herosunly的博客

阿里云天池大赛安全恶意程序检测第一名，科大讯飞比赛第一名，热衷于机器学习算法研究与应用。

原创大模型微调部署实战及类GPT工具的高效使用

本文主要介绍了专栏《大模型微调部署实战及类GPT工具的高效使用》的核心内容，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 专栏亮点3. 你的收获4. 详细目录

2024-07-24 07:00:00 94974 86

原创详解大模型微调数据集构建方法(持续更新)

本文详细介绍了大模型微调数据集构建方法，希望能对学习大模型的同学们有所帮助。文章目录1. 前言2. 微调数据集构建方法 2.1 方法一 2.2 方法二 2.3 方法三 2.4 方法四

2024-06-05 07:30:00 151888 57

原创大模型LoRA微调调参的实战技巧(持续更新)

本文主要介绍了大模型LoRA微调调参的实战技巧，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 实战技巧

2024-05-01 12:08:15 116271 63

原创惠普战99移动工作站: 第十三代英特尔酷睿处理器和惠普一站式AI应用开发方案的完美融合

惠普作为全球移动工作站领域的领军企业，一直致力于移动工作站的研发与创新。在万众瞩目的期盼下，惠普终于推出了最新款的移动工作站：2023款的战99酷睿版移动工作站。该款移动工作站是一款各方面表现都非常优秀的产品，集高性能、安全性、接口全、长续航、高耐用等特点于一身。这款耐用的高端设备具备增强型协作特性和专业级组件，不仅可快速运行CAD、3D创作、建模和渲染等专业软件应用，而且精心打造了惠普数据科学：一站式AI应用开发方案，极大提升了数据分析和可视化、机器学习的使用效率。

2023-09-26 15:47:51 98393 284

原创百度智能云：千帆大模型平台接入Llama 2等33个大模型，上线103个Prompt模板

今天给大家带来的是百度智能云：千帆大模型平台接入Llama 2等33个大模型，上线103个Prompt模板，希望能对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 大而全+持续进化的大语言模型平台3. Prompt海量模板库助力优化模型效果4. 总结

2023-08-11 22:54:04 37219 149

原创参加2021年CSDN博客专家颁奖仪式的收获

文章目录1. 活动简介2. 博客创作心得1. 活动简介作为CSDN的博客专家，非常荣幸能够参加本次CSDN开发者生态汇以及博客专家的颁奖仪式，感谢CSDN一直以来的支持与认可。主持人是由CSDN的邹总担任的。邹总的《编程之美》、《构建之法》深得程序猿们的喜爱。开场演讲是由CSDN的蒋总，标题是开源开放共建开发者新生态。其中关键词为开源、共建、生态。开源和共建的本质是团结，而生态是构建生态系统以及完整的产业链。蒋总先复盘过往，然后再基于数据和逻辑预测未来，其中讲到了开发者市场正

2022-03-31 21:29:56 42847 150

原创保姆级人工智能学习成长路径

0. 前言1. 第一阶段：编程语言学习2. 第二阶段：机器学习基本理论3. 第三阶段：深度学习理论与实战4. 第四阶段：细分领域深入学习5. 第五阶段：集大成者最近有很多小伙伴想学习人工智能，其中不少同学渴望从事相关职业。虽然网上的资料很多，但是很多内容不够接地气，导致他们看不懂，所以很迷茫，不知何去何从。作为获得AI比赛Top名次的老司机，就给大家讲讲如何系统学习人工智能，最终达到一名合格的算法工程师。希望大家能够跟随我一步步迈进人工智能的殿堂，一起冲鸭~~~...

2021-07-02 07:32:29 20825 114

原创阿里云安全恶意程序检测冠军经验分享(万字长文)

最近收到不少收费用户的私信，想要学习我是如何拿到阿里云安全恶意程第一名的优异成绩的经验。大家渴望学习的热情感染了我，所以特意整理了一篇详尽的经验分享博客，希望能对大家有所帮助。文章目录1. 任务描述2. 数据统计分析3. 方案设计3.1 单模型设计3.1.1 传统机器学习3.1.1.1 特征工程3.1.1.2 分类器3.1.2 深度学习3.1.2.1 深度学习模型设计3.1.2.2 深度学习模型训练3.2 模型融合3.3 线上部署4. 总结1. 任务描述将windows可执行程序在动态沙箱

2021-02-04 19:54:33 160052 127

原创 AI比赛经验分享 - 总目录

总目录1. 不同方向经验分享1.1 NLP1.2 CV1.3 语音1.4 结构化数据1.5 时序预测1.6 网络安全方向1.7 推荐与广告1.8 风控2. 工具和提分技巧分享3. 个人比赛体会

2020-12-11 13:30:50 121985 73

原创机器学习之学习路径、学习方法、常用工具、Python、Numpy、pandas、sklearn、Tensorflow、Pytorch、Git入门教学大纲

学习方法核心思想Python基础2.1 Python运行环境(Jupyter Notebook)2.2 编程规范2.3 基本语法2.4 函数式编程2.5 面向对象2.6 文件操作数据处理常用库Numpy数据处理常用库Pandas(DataFrame、Series等)Linux常用命令Git和Github.........................................................

2020-10-09 20:17:28 14684 61

原创 LLaMA Factory 核心原理讲解

本文主要介绍了LLaMA Factory 核心原理讲解，希望能对学习大模型的同学们有所帮助。文章目录1. 前言2. 核心模块讲解3. SFT流程讲解

2024-10-30 18:09:06 11508 44

原创使用langchain和大模型API提取QA的实战教程

本文主要介绍了使用langchain和大模型API提取QA的实战教程，希望能对学习大模型的同学们有所帮助。提取后的json部分内容如下所示。文章目录1. 前言2. 实战教程 2.1 搭建环境 2.2 实战代码 2.3 实战案例

2024-10-21 07:15:00 11764 37

原创超全！一文详解大型语言模型的11种微调方法

本文从背景、来源、技术路线及性能等方面综述了11种在模型参数调优阶段进行的方法，其中前缀调优、提示调优和P-Tuning v2属于引入特定参数来减少算力消耗、提升训练速度；基于LoRA的各种方法的基本思想是添加新的旁路，对特定任务或特定数据进行微调。开源社区Hugging Face将这11种方法归纳为高效参数调优方法（Parameter-Efficient Fine-Tuning，PEFT）。PEFT方法能够在不微调所有模型参数的情况下，有效地让预训练语言模型适应各种下游应用。

2024-10-16 17:31:16 19897 26

原创红蓝攻防实战技术———实战化运营体系的落地

本文主要介绍了红蓝攻防实战技术———实战化运营体系的落地，希望对学习网络安全的同学们有所帮助。文章目录1. 实战化安全运营体系建设理念2. 从临时演练防护模式到运营体系建设3. 为什么要写这本书？4. 如何阅读这本书5. 本书看点6. 购买链接

2024-09-29 13:36:20 30476 40

原创 Qwen2.5 本地部署的实战教程

本文主要介绍了Qwen2.5 本地部署的实战教程，希望对学习大语言模型的同学们有所帮助。文章目录1. 介绍2. 配置环境 2.1 安装虚拟环境 2.2 安装依赖库 2.3 下载模型文件3. 运行Qwen2.5 3.1 简单测试 3.2 启动API服务

2024-09-23 07:30:00 37105 33

原创 DeepSeek 2.5本地部署的实战教程

本文主要介绍了DeepSeek 2.5本地部署的实战教程，希望对学习大语言模型的同学们有所帮助。文章目录1. 介绍2. 配置环境 2.1 安装虚拟环境 2.2 安装依赖库 2.3 下载模型文件3. 运行DeepSeek 2.5 3.1 简单测试 3.2 启动API服务

2024-09-22 13:19:19 37172 17

原创 AIGC实战之如何构建出更好的大模型RAG系统

本文介绍了如何构建出更好的大模型RAG系统，希望能对学习大语言模型和RAG的同学们有所帮助。文章目录1. 前言2. S1 初级RAG3. S2 高级RAG 3.1 模型测 3.2 策略测 3.3 模型微调测4. S3 超级RAG5. 本书作者6. 内容简介7. 购买链接

2024-09-20 15:18:18 38834 15

原创详解大模型多轮对话的数据组织形式

本文主要介绍了详解大模型多轮对话的数据组织形式，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. LLaMA Factory适配的多轮对话数据形式3. SWIFT适配的多轮对话数据形式

2024-09-06 07:30:00 41057 42

原创调用Claude 3.5 API的实战代码

本文主要介绍了调用Claude 3.5 API的实战代码，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 实战代码

2024-09-04 18:30:37 47794 24

原创 windows系统huggingface连接不上的解决方案

本文主要介绍了windows系统huggingface连接不上的解决方案，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 解决方案 2.1 解决方案一 2.2 解决方案二

2024-09-01 21:07:28 50187 28

原创 Langchain-Chatchat本地部署的解决方案

本文主要介绍了Langchain-Chatchat本地部署的解决方案，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 配置环境 2.1 安装虚拟环境 2.2 安装依赖库3. 启动xinference4. 启动Langchain-Chatchat

2024-08-28 10:21:15 54182 23

原创基于华为昇腾910B和LLaMA Factory多卡微调的实战教程

本文主要介绍了基于华为昇腾910B和LLaMA Factory多卡微调的实战教程，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 配置环境 2.1 安装虚拟环境 2.2 安装依赖库 2.3 模型选型与下载 2.4 配置多卡环境3. 运行代码 3.1 构建训练数据 3.2 修改配置文件 3.3 继续预训练(CPT) 3.4 SFT

2024-08-23 22:26:47 58120 38

原创编程“奥斯卡”落幕，百度之星决赛中学生疯狂收割大奖！

大家好，我是herosunly。985院校硕士毕业，现担任算法研究员一职，热衷于机器学习算法研究与应用。曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。拥有多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。希望和大家一起成长进步。8月18日，被称为“技术界奥斯卡”的2024百度之星程序设计大赛（以下简称“百度之星” ）落下帷幕。

2024-08-20 17:29:33 60635 32

原创《智能计算系统：从深度学习到大模型（第2版）》重磅上市！

本文主要介绍了大模型优质书籍《智能计算系统：从深度学习到大模型（第2版）》，希望能对学习大模型的同学们有所帮助。文章目录1. 前言2. 书籍推荐 2.1 内容简介 2.2 本书作者 2.3 专家推荐 2.4 读者对象 2.5 本书目录3. 购买链接

2024-08-20 14:56:34 10387 12

原创预训练PDF数据格式转换

本文主要介绍了预训练PDF数据格式转换，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. PDF数据格式转换

2024-08-12 20:58:48 70238 46

原创预训练网页数据爬取与预处理

本文主要介绍了预训练网页数据爬取与预处理，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 数据爬取与预处理

2024-08-04 22:40:37 88166 44

原创优质书籍推荐：《码农职场：IT 人求职就业手册》——保姆级面试指南

本文主要介绍了优质书籍推荐：《码农职场：IT 人求职就业手册》——保姆级面试指南，希望能对同学们有所帮助。文章目录1. 前言2. 书籍推荐 2.1 内容简介 2.2 本书作者 2.3 本书目录3. 购买链接

2024-07-31 22:02:22 82207 29

原创 LLaMA Factory添加新模型template的实战解析

本文主要介绍了LLaMA Factory添加新模型template的实战解析，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 实战解析 2.1 检查代码 2.2 修改代码

2024-07-29 07:46:12 79118 28

原创 github连接不上的解决方案(持续更新)

本文主要介绍github连接不上的解决方案(持续更新)，希望对使用github的同学们有所帮助。文章目录1. 背景2. 解决方案

2024-07-23 07:18:51 103223 23

原创使用工作流产生高质量翻译内容的实战教程

本文主要介绍了使用工作流产生高质量翻译内容的实战教程，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 思路分析3. 实战教程

2024-07-22 07:00:00 86365 22

原创探寻大模型回答9.9和9.11犯错的根本原因

本文主要介绍了探寻大模型回答9.9和9.11犯错的根本原因，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 分析与思考

2024-07-18 19:30:00 86782 42

原创通过命令行工作流提升工作效率的实战教程（持续更新）

本文主要介绍了通过命令行工作流提升工作效率的实战教程，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 配置环境 2.1 可选步骤一 2.2 步骤二 2.3 步骤三3. 实战案例

2024-07-16 23:17:19 90874 33

原创 AI绘画Midjourney从入门到实战应用

本文主要介绍了AI绘画Midjourney从入门到实战应用，希望能学习AIGC的同学们有所帮助。文章目录1. 前言2. 《Midjourney从入门到实战应用》3. 购买链接

2024-07-15 07:15:00 91032 23

原创大模型生成人物关系思维导图的实战教程

本文主要介绍了大模型生成人物关系思维导图的实战教程，希望对使用大语言模型的同学们有所帮助。文章目录1. 前言2. 实战教程

2024-07-13 09:26:53 93066 14

原创大模型微调选择模型的实战技巧(持续更新)

本文主要介绍了大模型微调选择模型的实战技巧(持续更新)，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 实战技巧

2024-07-11 20:00:00 94595 19

原创大模型文档神器：合合信息大模型加速器

本文主要介绍了大模型文档神器：合合信息大模型加速器，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. TextIn大模型 “加速器”简介3. 通用文档解析实践 3.1 理论及实践综述 3.2 在线体验 3.3 API实践4. 通用文本向量实践 4.1 理论综述及API简介 4.2 huggingface acge_text_embedding模型5. 大模型加速器行业应用

2024-07-10 07:00:00 114727 98

原创 AIGC时代程序员的跃迁——编程高手的密码武器

过去，没有合适的辅助工具，这几乎是一项艰巨的工程。在苹果手机高端机型默认开启HDR视频作为拍摄视频的模式后，我们的一款APP便收到用户的使用反馈，上传到APP的视频，打开查看时颜色变得很暗淡。总的来说，AI在编程领域对程序员的帮助还是很大的，不会在每个方面帮助都大，但是在特定方面帮助尤其大，比如以上例举的两个例子：学习新技术，解决技术栈层次更深的问题，这可以解决大量的时间去查阅资料，去理解视频转码的每个参数的意思，尤其视频转码参数众多，理解每个参数都得花费不少的时间，还得挨个组合测试，总之，一级棒。

2024-07-08 14:29:24 78704 35

原创 Text2SQL提问中包括时间的实战方案

本文主要介绍了Text2SQL提问中包括时间的实战方案，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 实战方案

2024-07-07 17:46:33 100469 20

原创第四届BPAA算法大赛成功举办！共研算法未来

他表示，算法模型技术依然是中国人工智能产业最为薄弱的要素区，想要形成合理可期的中模型发展生态，需要重视有限范围的中数据的打通应用，也需要更为成熟的算法模型客户群体。当天上午，来自工业、公共、金融、商业、医疗、S算法模型赛道（聚焦可持续发展领域项目）的五十强优秀项目进行了激烈角逐，最终决出6个金奖与12个银奖项目。作为人工智能领域的全球年度性赛事、世界人工智能大会三大品牌赛事之一，BPAA大赛未来将继续紧扣人工智能发展方向，引进优质资源，推进政校企合作，借助社会各界力量不断推动算法产业向前发展。

2024-07-06 17:35:59 101900 24

原创大模型提问中包括时间的实战方案

本文主要介绍了大模型提问中包括时间的实战方案，希望对学习大语言模型的同学们有所帮助。文章目录1. 前言2. 实战方案

2024-07-04 23:02:15 103337 19

加利福尼亚州住房数据集，包括九个特征和一个目标值即房价，总共20640条数据，和sklearn中的california数据集相同

包括了房屋的经度、房屋的纬度、房龄、房间个数、卧室个数、街区内人口、街区内家庭总数、收入、房屋价值，和sklearn中的california数据集相同，可直接通过pandas.read_csv读取即可，适合sklearn无法正常加载的情况下使用，其中加载代码如下 ```python from sklearn.datasets.california_housing import fetch_california_housing housing = fetch_california_housing() ```

2023-01-04

将PDF转换成图片的依赖库文件

2022-04-07

考研英语和考研政治答题卡

考研英语和考研政治答题卡，值得考研同学借鉴学习。尤其是考研英语的作文区域是画好了格子，考研政治的大题是空白区域，建议大家可以购买考研专用尺画线。

2022-03-24

哈工大ltp模型文件(3.4.0)

2022-03-04

台湾清华大学微积分详细笔记

总共31个PDF文件。其中重点并详细介绍了如何高效学习微积分、极限、连续、微分、积分等核心概念。内容详尽，值得深入学习。

2022-03-02

企业网络资产及安全事件分析数据集

包含tcpflow、flow、db、login四个文件夹，tcpflow是记录TCP协议层的数据传输记录，flow日志是http请求中header的数据记录，db日志是记录数据库操作的日志(SQL语句的执行记录)，login日志是记录登录结果的日志(包括POP、FTP、SMTP、SMB和数据库的登录记录)。

2022-02-23