🧠 AI训练师手册2
照着《AI训练师手册2——DeepSeek+模型训练+商业应用实操》(谷建阳、贾一琦 编著,北京大学出版社)做的自学笔记 —— 它是 AI训练师手册 的续册:上一本讲这个职业的全景与算法基础——要会什么、机器学习三条路怎么选、六种网络各管什么、指标怎么读;这一本讲「手怎么动」——DeepSeek 装到本地、知识库搭起来、数据标出来、LoRA 训出来、声音克隆出来,最后落到八个行业里各自怎么用。两本合起来,是「知道为什么」加「真的做得出来」。全书 3 篇 12 章 104 篇,一条主线十二步:第 1 章 16 篇 AI入门(模型到底是什么、量化与蒸馏在省什么);第 2 章 9 篇模型部署(Ollama+Cherry Studio+Page Assist,把 DeepSeek 装到自己机器上);第 3 章 6 篇数据获取(数据集与 AnythingLLM 知识库);第 4 章 7 篇数据标注(MakeSense 打标);第 5 章 8 篇模型微调(OpenAI Platform,在已有模型上改脾气);第 6 章 9 篇语言模型训练(嵌入模型与向量检索,让模型认得你的文档);第 7 章 7 篇绘画模型训练(SD-Trainer 与 LoRA,训一个会画画的);第 8 章 6 篇语音模型训练(weights 平台,克隆一个会唱的声音);第 9~12 章各 9 篇,把这套东西放进八个行业——政务与教育、交通与智驾、医疗与法律、金融与农业,每章都是「三条训练要点+六个落地场景」。本课是 实操课,分三层写:第一层「能算的」全部真算(token 账、显存账、量化体积、LoRA 参数量、向量维度与相似度、检索命中率、脱敏前后的信息量);第二层「能用 numpy 手写就手写」全部真跑(分词与嵌入、余弦检索与 top-k、K-means 聚类打标、PCA 降维、量化误差、剪枝与蒸馏的损失曲线、分箱脱敏、音频重采样与变调);第三层「必须在图形界面里点的」(Ollama、Cherry Studio、AnythingLLM、MakeSense、SD-Trainer、weights)写成【📋 实操清单】加【🐍 沙箱等价物】——清单说清点哪儿、填什么、看到什么算成功。书成于 DeepSeek 走红之后、各家产品一周一个样的时期,凡涉及具体界面、按钮位置、模型代号的地方用【⚠️ 2026 现状】单列,命令行的部分几乎不变、界面的部分几乎都变。大白话、不跳步骤、必带生活比喻、常见误区、可折叠自测题。
内容来自我的 Obsidian 自学笔记 · 全书规划 12 章 104 篇,已完成第 1~11 章(95 篇) · 更新中 🚧
第一章 AI入门:认识人工智能模型训练
为什么要学人工智能
人工 15000 元对模型 2506 元…
人工智能是如何发展起来的
参数年增速从 116 倍掉到 2 倍,两…
人工智能的核心逻辑是什么
推公式与试错同解一个问题,写不出公式时才…
什么是模型,模型是怎么训练的
训练误差最低的那个模型,测试误差是别人…
什么是模型量化与模型蒸馏
量化省体积(4 位偏差 15%),蒸馏只…
了解GPT模型的工作原理
91 字只有 65 种二元组合(3.5%…
GPT为什么能够获得成功
token 与参数的比值随算力从 26…
AI强化学习解决大模型推理问题
6 步路径 729 条能撞对,20 步…
RAG检索技术解决大模型幻觉问题
闭卷蒙对 2 道,接检索 14 道,错的…
神经网络是AI模型训练的核心技术
两层不加激活仍是 0.7550,加 ta…
Transformer催生一切AI大模型
注意力打乱词序只差 4.4e-16,所以…
DeepSeek为什么爆火
显存都是 336 GB,MoE 每 to…
DeepSeek的16种使用途径
每天 200 次 API 24 元、订阅…
DeepSeek的逻辑推理能力
单步 95% 走 20 步只剩 0.36…
DeepSeek的联网搜索能力
衰减系数拧到 0.005,第一名从 45…
DeepSeek的商业应用案例
净收益 11 万、9.1 个月回本;盈亏…
第二章 模型部署:在本地使用DeepSeek
部署前的准备工作
7B 权重 4.6 GB 加 8192…
安装Python依赖项
八个模块缺 requests 和 fla…
下载与安装Ollama
端口探测 1001.6 毫秒超时;装了不…
下载DeepSeek模型
七个档 0.9 到 402.6 GB,6…
试运行DeepSeek模型
算力上限 8 tok/s,带宽上限 5.…
配置Cherry Studio前端界面
前端只发一个 POST 三个字段,往返…
安装Page Assist插件
扩展走 /api/chat,桌面端走 /…
配置Page Assist插件
缺一个 ACAO 头,服务端已处理完浏览…
测试DeepSeek模型
三项验收:5/5 连通、25.0 tok…
第三章 数据获取:构建AI模型的知识库
通俗解读模型训练中的数据集
20 条训练准确率 1.0000 而测试…
获取公开数据集的常用途径
120 行只挑出 106 行;坏 JSO…
生成高质量的模型微调数据集
模板造 72 条只有 3 种句式,句法多…
下载并安装AnythingLLM
11434 出答案、3001 找材料;后…
配置AnythingLLM
重叠 0 切断 1 条关键句,加到 10…
上传私有的训练数据集
块 100 单跳 5/5 多跳 2/4…
第四章 数据标注:引导模型学习提升性能
数据标注的概念与技术原理
错标一成测试掉 4.66 点、四成掉 1…
数据标注在大模型中的作用
修 60 条 0.8967 胜过再标 3…
选择打标任务类型
1000 张图:分类 25 元、分割 2…
创建和添加自定义标签
16 个标签 8 个是长尾,合计只占 4…
给图像数据打标
四个框 IoU 0.800/0.736/…
修改标注项目的名称
改名要动 1 处定义加 2 处引用,漏一…
导出打标数据文件
COCO 转 YOLO 回算 3/3 一…
第五章 模型微调:让AI训练效果达到预期
揭开模型微调的神秘面纱
只在 B 上微调:B 涨到 0.7378…
微调与长文本、知识库、预训练的区别
长文本一年 10953 元、全库一次 1…
模型微调的工具和基本流程
200 条里 9 条末条不是 assis…
模型是否真的需要微调
价格表知识库 14 分、微调 -2 分…
训练数据准备规范
60 条查出 6 条,五种能自动查;最长…
登录OpenAI Platform平台
不带密钥 401、带密钥 200;401…
创建微调模型并上传训练数据
3000 条训 3 轮 68 元、10…
模型微调的超参数配置策略
学习率 1.50 卡在 0.934,比全…
第六章 语言模型训练:高效赋能业务场景
配置文本嵌入模型
字面匹配 7/10,加同义词 9/10…
创建知识库
k=2 就到 10/10,加到 10 成…
添加提示词
窗口按 2048 算,k=3 只剩 49…
测试模型效果
检索命中 10/10,答案只有 9/10…
添加嵌入模型
向量化 1000 段:小模型 2 分钟…
创建知识库
混库不降召回,但占走 2 位名额;96%…
添加文件并进行向量化处理
批大小 1 到 256:吞吐从 1005…
搜索知识库
阈值 0.20 就把六成正确答案拒掉,相…
引用知识库生成回复
格式错的 2 条脚本抓到,内容错的 2…
第七章 绘画模型训练:创意生成与视觉设计
LoRA模型简介
r=8 只训 3.1% 参数,重构误差…
安装SD-Trainer
实测读 2.19 GB/秒;显存 512…
准备与整理训练数据集
40 张图 13 处毛病,8 张会被拒收…
使用WD标签器标注数据
32 张 151 个标签,触发词漏 3…
设置底模文件和数据集路径
12 项检查 6 项不过,其中 4 项训…
部署训练好的LoRA模型
头部 8 字节定长度,两个张量 1638…
使用LoRA模型实现文生图
1 到 8 步涨 15.57 dB,32…
第八章 语音模型训练:智能声音克隆与处理
认识与登录weights平台
60 分钟素材 44.1 kHz 单声道…
设置模型的详细信息
10 项元信息 5 项不过,zh-cn…
上传音频数据集并训练模型
40 段 16 处毛病落在 12 段;削…
克隆声音唱歌
165 Hz 唱 C4 升 8 个半音…
剪辑音频与视频素材
九个切点接缝跳变 0.9 到 7.2 倍…
智能识别歌词
10 个字全检到误差 10 毫秒;连读漏…
第九章 政务与教育:AI赋能治理与教学创新实践
数据隐私防护
泛化把最小 k 从 1 抬到 4;噪声…
多模态融合
单模态最高 74.0,软投票融合 83.…
数据动态脱敏
四类敏感信息 80 条全脱出,19 位订…
公共服务优化
3 个窗口 ρ=1.00 平均等 12.…
政务决策支持
平行趋势成立估 5.02,处理组本来涨得…
城市治理升级
准确率 87.2%;换代价最小规则掉到…
个性化学习支持
20 题估能力相关 0.866,3 题掉…
教学效能提升
同义替换被扣 4.1 分,加了否定却判成…
教育硬件赋能
8.7 GFLOPs 的模型在 2 GF…
第十章 交通与智驾:构建安全高效出行解决方案
数据安全与合规
网格缩到 200 米最小 k 就掉到 1…
模型鲁棒性强化
一场雾把 100% 打到 25%,增强后…
实时性保障方案
总延迟 249 毫秒,液压占 40%;推…
智能交通管理
平峰感应配时省 32%,过饱和反而差 7…
智慧出行服务
报中位数一半人迟到;独立假设的区间只覆盖…
主动安全防控
TTC 1.0 秒漏警 19.9%,4.…
感知系统升级
单雷达 0.715 米比单摄像头还差;加…
决策规划突破
时距 1.8 到 0.9 车距砍半只多…
仿真测试革新
随机抽 200 个命中 6.5 个危险场…
第十一章 医疗与法律:重塑精准诊疗与服务流程
数据安全与隐私保护
正则压到 0.579 时置信度差只剩 0…
持续学习机制
只微调忘掉 51.3 个点,EWC 只保…
边缘部署优化
int8 体积降到三成却慢 2.2 倍…
临床诊疗升级
灵敏度 50% 特异度 93% 的检查…
健康管理创新
阈值 5% 的 NNT 19.9 覆盖…
医院管理优化
按均值能排 8 台,实测 45% 的日子…
法律文本智能处理
「叁拾万」抽得出、「明年二月底」抽不出…
法律研究赋能
纯文本 top5 精确率 27%,加案由…
企业管理合规
补词表把漏检 199 处砍到 0,20…