🚀 工具与实操

把学到的知识变成能跑起来的东西

从工具上手到完整项目,再到行业场景与安全边界:每一步都有可执行的步骤清单和真实案例。 还没定方向?先看 学习路径 补齐基础。

共 24 个实操与案例条目 · 持续扩充

🛠️ 2.1 工具与实操

常用 AI 工具与开发框架的上手教程:每一步都能直接操作,并配套可落地的小项目。

入门

本地环境与 Jupyter 上手

打开官网 →

30 分钟搭好可复用的 AI 学习环境:Python 虚拟环境 + Jupyter Notebook,后续所有实操都在这里跑。

先安装 Python 3.11+ 与 VS Code(或直接使用 Anaconda),为每个项目创建独立虚拟环境,避免依赖冲突。

Jupyter Notebook 适合边写边看结果,是学习阶段最顺手的工具;熟悉单元格、Markdown 与内核切换即可开始。

🧩 操作步骤
  1. 安装 Python 3.11+,验证 python --version
  2. 创建虚拟环境:python -m venv .venv 并激活
  3. 安装 jupyterlab 与常用库(numpy、pandas、matplotlib)
  4. 启动 jupyter lab,新建 Notebook 跑通第一段代码
Python 虚拟环境 Jupyter
入门

用 pandas 完成一次数据清洗

打开官网 →

拿到一份脏数据后的标准动作:读入、看结构、处理缺失与重复、统一口径,最后导出干净数据。

选一份公开数据集(如 Kaggle 的 Titanic 或电商订单数据),按「概览 → 清洗 → 验证」三步走。

清洗的关键不是记住 API,而是养成先统计缺失率、再决定删还是填的习惯,并把每一步处理记录下来。

🧩 操作步骤
  1. read_csv 读入,用 info/describe 概览字段与缺失
  2. 处理重复行、统一日期与数值格式
  3. 按业务含义填充或删除缺失值并记录理由
  4. 用 groupby 做一次分组统计验证清洗结果
  5. 导出清洗后的 CSV 并写 5 行结论
Pandas 数据清洗 数据质量
入门

PyTorch 训练第一个神经网络(MNIST)

站内资料 →

用一个手写数字识别任务走完训练闭环:数据加载、模型定义、训练循环、评估与保存。

MNIST 是深度学习的 Hello World:数据干净、模型小,适合把注意力放在训练循环的每个环节上。

跑通后建议做三个小实验:改学习率、改网络层数、去掉归一化,观察损失曲线的变化,比看十篇教程更有用。

🧩 操作步骤
  1. 安装 PyTorch,用 DataLoader 加载 MNIST
  2. 定义一个含两层卷积的小型 CNN
  3. 写训练循环:前向、损失、反向、更新
  4. 每个 epoch 在测试集上评估准确率
  5. 保存模型权重并加载做一次推理
PyTorch CNN 训练循环
入门

用 Hugging Face 调用开源大模型

站内资料 →

用 transformers 加载一个开源模型,完成文本生成、摘要与情感分类三个最常见的推理任务。

Hugging Face 的 pipeline 把模型加载、分词、推理封装成三行代码,非常适合第一次接触大模型。

熟悉 pipeline 后,再试着手动加载 tokenizer 与 model,理解 input_ids、attention_mask 与生成参数各自的作用。

🧩 操作步骤
  1. 安装 transformers 与 torch
  2. 用 pipeline 跑通文本分类与文本生成
  3. 手动加载 tokenizer 与 model,理解输入张量
  4. 调整 temperature 与 max_new_tokens 观察输出变化
  5. 记录显存占用与推理耗时,形成模型选型参考
transformers 模型推理 Prompt
入门

用 Ollama 在本地跑大模型

打开官网 →

一条命令拉取并运行开源模型,通过本地 REST API 接入自己的脚本或应用。

Ollama 适合在个人电脑上验证想法:模型下载后即可离线使用,数据不出本机,隐私友好。

跑通后用 curl 或 Python 调用 /api/generate 与 /api/chat,把本地模型接入一个小型命令行助手。

🧩 操作步骤
  1. 安装 Ollama 并拉取一个 7B 级别模型
  2. 命令行对话验证可用性
  3. 用 REST API 发起一次生成请求
  4. 写一个 Python 脚本封装多轮对话
  5. 对比不同量化版本的显存占用与速度
本地部署 Ollama REST API
进阶

用 LangChain 搭建第一个 RAG 问答

站内资料 →

把一份 PDF 变成可问答的知识库:文档切分、向量化入库、检索、带引用生成。

RAG 是当前企业落地最多的 LLM 应用形态:不训练模型,只把私有资料检索出来交给模型作答,显著降低幻觉。

先做一个最小闭环,再逐步加上切分调优、重排序与评测集,避免一上来就陷入框架细节。

🧩 操作步骤
  1. 加载 PDF 并按 500-800 字符切分,保留重叠
  2. 用嵌入模型写入向量库(FAISS 或 Chroma)
  3. 实现检索 + 提示词模板 + 带引用回答
  4. 准备 20 个问题做人工评测,记录错例
  5. 针对错例调整切分与检索条数
RAG 向量检索 LangChain
进阶

用 MCP 把外部工具接入智能体

站内资料 →

理解 MCP 的 Tools / Resources / Prompts,接入官方服务器并用 Inspector 调试,再写一个自定义服务器。

MCP 把「模型连接外部世界」标准化:同一个服务器可以被不同客户端复用,无需为每个应用重复写集成代码。

建议先在客户端里接入 Filesystem 与 Fetch 两个官方服务器,感受标准化的价值,再用 Python SDK 发布一个自己的工具。

🧩 操作步骤
  1. 在支持 MCP 的客户端中配置官方 Filesystem 服务器
  2. 用 MCP Inspector 连接并测试工具调用
  3. 用 Python SDK(FastMCP)写一个查询天气或数据库的工具
  4. 在客户端中加载自建服务器并验证调用
  5. 检查权限范围,避免暴露不必要的文件或接口
MCP 工具调用 FastMCP
🚀 2.2 项目与案例

从简单到进阶的项目路线:数据分析、图像分类、问答助手、智能体与微调部署,附真实应用案例。

入门

项目一:公开数据集分析报告(入门)

打开官网 →

从一份公开数据集出发,完成清洗、探索性分析与可视化,产出可分享的 Notebook 报告。

目标不是模型,而是建立「数据 → 问题 → 结论」的完整链路。选题建议:电商订单、电影评分、城市出行等结构化数据。

真实案例:零售企业用同类分析定位销量下滑的门店与品类,分析结论直接进入运营周会。

🧩 操作步骤
  1. 明确 3 个业务问题并列出所需字段
  2. 清洗数据并做描述性统计
  3. 用图表回答每个问题,标注异常点
  4. 给出 3 条可执行结论与局限说明
  5. 整理为 Notebook + 一页摘要
Pandas 数据可视化 分析报告
入门

项目二:图像分类器(迁移学习)

站内资料 →

用预训练模型微调一个自己的分类器,并包装成可上传图片的简单接口。

自建数据集(如垃圾分类、零件缺陷)只需每类几百张图即可起步;迁移学习让单卡也能在几十分钟内出结果。

真实案例:制造企业用轻量 CNN 做产线表面缺陷初筛,人工只复核被标记的样本,漏检率显著下降。

🧩 操作步骤
  1. 收集并划分训练/验证集,做数据增强
  2. 加载 ResNet 等预训练模型,替换分类头
  3. 冻结主干先训分类头,再解冻微调
  4. 用混淆矩阵分析易混类别
  5. 导出模型并用 FastAPI 提供上传预测接口
迁移学习 PyTorch 模型部署
进阶

项目三:文档问答助手(RAG)

站内资料 →

面向个人或团队文档的问答系统:检索增强生成、来源引用与幻觉控制。

在企业中这是落地最广的 LLM 应用:制度问答、产品手册、客服知识库都可以用同一套架构。

真实案例:客服团队把历史工单与产品文档接入 RAG,首轮解决率提升明显,复杂问题再转人工。

🧩 操作步骤
  1. 整理文档并设计切分策略
  2. 构建向量库,实现检索与重排序
  3. 生成带引用的回答,无依据时明确拒答
  4. 建立 30 题评测集,统计准确率与幻觉率
  5. 加入反馈入口,持续收集错例迭代
RAG LangChain 评测
进阶

项目四:提示词驱动的写作助手

用结构化提示词与多轮工作流,做出可控风格的写作助手(提纲→初稿→润色→校对)。

重点练习提示词工程:角色设定、任务拆解、输出格式约束、少样本示例与自我检查,而不是调 API。

真实案例:内容团队把品牌语气规范写进提示词模板,新人产出的文案一致性明显提升。

🧩 操作步骤
  1. 拆解写作流程为四个可独立调用的步骤
  2. 为每步设计提示词模板与输出格式
  3. 加入风格示例与禁用词清单
  4. 用 10 篇历史文章做对照评测
  5. 把模板固化为可复用的小工具
Prompt 工程 工作流设计 文本评测
进阶

项目五:智能体自动化工作流

站内资料 →

让智能体定时抓取信息、调用工具、生成日报,并在失败时通知与重试。

Agent 项目的难点不在模型,而在可控性:明确工具边界、设置最大步数、记录每一步动作与结果。

真实案例:运营团队用定时智能体汇总竞品动态与舆情,每天早上自动生成简报,人工只需复核要点。

🧩 操作步骤
  1. 定义任务目标与可用工具清单
  2. 实现 ReAct 循环:规划、调用、观察
  3. 加入超时、重试与最大步数保护
  4. 定时触发并输出结构化日报
  5. 记录日志,定期抽查执行质量
Agent 工具调用 自动化
高级

项目六:LoRA 微调客服助手并部署

打开官网 →

构造领域指令数据,用 LoRA 微调开源模型,量化后部署为可用的推理服务。

当提示词与 RAG 无法满足风格与稳定性要求时,微调是最后一步;它需要高质量数据而不是海量数据。

真实案例:金融客服场景用 2,000 条人工审核的问答对做 LoRA 微调,回答口径一致性明显提升,但合规内容仍需规则兜底。

🧩 操作步骤
  1. 构造并清洗 1,000-5,000 条指令数据
  2. 用 LoRA/QLoRA 在单卡上微调
  3. 与基座模型做盲评对比
  4. 量化导出并用推理服务部署
  5. 接入业务系统,设置人工复核与回滚预案
LoRA 微调 模型部署
🏭 2.3 AI 应用场景

教育、医疗、金融、制造、内容创作:各行业在做什么,以及进入这些行业需要补哪些技能。

入门

教育:个性化辅导与教学效率

AI 在教育中的应用:答疑辅导、作业批改、课程内容生成与学情分析。

典型场景:课后答疑机器人、作文批改与反馈、按学情生成分层练习、教师备课与课件生成。

行业特点:效果评估周期长、涉及未成年人数据,必须重视隐私保护与内容安全,AI 反馈应作为教师判断的辅助。

🎯 需要掌握的技能
  1. 掌握教学场景拆解与提示词设计
  2. 理解学情数据与评测指标(正确率、掌握度)
  3. 熟悉未成年人数据合规要求
  4. 具备与教师协作设计工作流的能力
教育场景 提示词 数据隐私 评测设计
进阶

医疗:辅助诊断与病历处理

AI 在医疗中的应用:影像辅助筛查、病历结构化、医学文献检索与随访管理。

典型场景:影像辅助标注与初筛、病历文本结构化、临床指南与文献快速检索、患者随访提醒。

行业特点:错误成本极高,模型输出只能作为辅助意见;需要可追溯依据、严格权限与脱敏,且必须符合医疗合规要求。

🎯 需要掌握的技能
  1. 具备医学基础知识与术语理解能力
  2. 掌握脱敏、权限与审计要求
  3. 理解可解释性与不确定性表达
  4. 建立人工复核与责任追溯机制
医学知识 合规 可解释性 风险控制
进阶

金融:风控、投研与合规审查

AI 在金融中的应用:风险识别、投研摘要、合同与合规文本审查、智能客服。

典型场景:信贷材料初审、舆情与研报摘要、合同条款比对、客服问答与工单分流。

行业特点:强监管、强审计,任何结论都要能回溯到数据与规则;幻觉在此场景的代价很高,需检索增强与规则引擎配合。

🎯 需要掌握的技能
  1. 理解金融业务流程与风险点
  2. 掌握可审计的检索增强方案
  3. 熟悉合规与数据分级要求
  4. 建立模型输出的人工复核流程
金融业务 合规 可审计 幻觉控制
进阶

制造:视觉质检与预测性维护

AI 在制造中的应用:表面缺陷检测、设备预测性维护、工艺参数优化。

典型场景:产线视觉质检、振动/温度时序异常预警、排产与能耗优化。

行业特点:数据来自现场设备,标注成本高、类别不平衡;模型往往需要边缘部署,强调稳定、低延迟与可维护。

🎯 需要掌握的技能
  1. 掌握视觉检测与时序异常检测方法
  2. 理解数据标注与样本不平衡处理
  3. 熟悉边缘部署与模型轻量化
  4. 具备与产线工程团队协作的能力
计算机视觉 时序分析 边缘部署 数据标注
入门

内容创作:文案、图像、视频与音乐

AI 在内容行业的应用:选题与脚本、配图与视频、配音配乐与多平台分发。

典型场景:短视频脚本与分镜、电商商品图与详情页、口播数字人、背景音乐生成。

行业特点:产能提升显著,但同质化与版权风险并存;从业者的核心竞争力正从「会生产」转向「会判断与编排」。

🎯 需要掌握的技能
  1. 掌握提示词与风格控制
  2. 理解版权与商用授权边界
  3. 建立素材审核与品牌一致性规范
  4. 把 AI 接入现有创作与分发工作流
Prompt 审美 版权意识 工作流
🛡️ 2.4 伦理、安全与事实核查

隐私、偏见、版权、幻觉与安全边界:把风险控制变成每次使用 AI 的固定动作。

✅ 事实核查四步法 ① 要求给出处 → ② 两个独立来源交叉验证 → ③ 数字与引用回到原始文档 → ④ 高风险结论人工签字确认。
入门

隐私与数据保护

不把敏感数据交给不该去的地方:最小化收集、脱敏、本地化处理与权限审计。

使用在线大模型时,输入的内容可能离开自己的设备;涉及个人信息、客户资料与商业机密时必须有明确边界。

基本原则:能不传就不传、必须传先脱敏、敏感场景优先本地模型,并对调用行为留痕可审计。

✅ 落地检查清单
  1. 建立数据分级:公开 / 内部 / 敏感
  2. 敏感数据先脱敏再调用外部模型
  3. 优先选择支持私有化或本地部署的方案
  4. 开启日志与权限审计,定期复核
数据分级 脱敏 权限管理
进阶

偏见与公平性

模型会放大训练数据中的偏差:识别来源、评估影响、在关键场景设置缓解措施。

偏见常来自数据不均衡、标注者主观判断与历史决策惯性,在招聘、信贷、医疗等场景可能造成实质性伤害。

做法:按群体拆解评估指标、建立敏感字段清单、对高风险决策保留人工复核与申诉渠道。

✅ 落地检查清单
  1. 列出可能受影响的群体与敏感属性
  2. 按子群体统计模型表现差异
  3. 检查训练数据与标注流程中的偏差来源
  4. 对高风险场景保留人工复核与申诉机制
公平性评估 数据审计 风险管理
入门

版权与合规使用

生成内容的版权边界:训练数据来源、生成物权属、引用规范与商用授权。

不同平台对生成内容的商用授权规则不同,训练数据来源也可能涉及版权争议;企业使用前应确认平台条款。

实践建议:保存生成记录与提示词、对明显模仿他人风格的内容谨慎使用、对外发布时按规范标注 AI 参与。

✅ 落地检查清单
  1. 确认模型/平台的服务条款与商用授权
  2. 避免直接复制受版权保护的文本与图像
  3. 保留生成记录,便于追溯
  4. 对外内容按规范披露 AI 参与程度
版权 授权 合规审查
入门

幻觉识别与事实核查

模型会自信地编造:建立「先怀疑、再核查、留依据」的固定动作,是使用 AI 的基本功。

幻觉常见于数字、引用、人物与时间线:回答越流畅越要警惕,尤其是无法给出处的内容。

四步核查法:① 要求给出处;② 用搜索引擎/官方文档交叉验证;③ 对关键数字回到原始数据;④ 高风险结论必须人工签字确认。

✅ 落地检查清单
  1. 要求模型标注信息来源与不确定之处
  2. 用至少两个独立来源交叉验证
  3. 数字与引用回到原始文档核对
  4. 高风险结论保留人工复核记录
事实核查 检索 风险意识
进阶

安全与滥用防范

提示注入、越权调用与内容滥用:给智能体划清权限边界,并做红队测试。

接入工具与数据的智能体风险更高:恶意网页或文档可能通过提示注入诱导它泄露信息或执行危险操作。

措施:最小权限、工具白名单、操作确认与审计日志;上线前用红队用例测试,明确哪些动作必须人工确认。

✅ 落地检查清单
  1. 为工具设置最小权限与白名单
  2. 高风险操作(删除、支付、外发)强制人工确认
  3. 对输入来源做信任分级与内容隔离
  4. 定期进行提示注入与越权测试
提示注入 权限控制 红队测试
进阶

负责任地使用 AI:决策边界

AI 可以提效,但不能替代责任:明确人机分工、对外披露与问责机制。

在医疗、金融、司法、招聘等影响个人权益的场景,最终决策必须由人做出,并对结果负责。

建议在团队内明确:哪些环节 AI 可以做初稿、哪些必须人工确认、出现错误时如何追溯与纠正。

✅ 落地检查清单
  1. 列出 AI 可独立完成 / 需人复核 / 禁止使用的场景
  2. 在对外内容中披露 AI 参与方式
  3. 建立错误反馈与纠正流程
  4. 定期复盘事故与近失事件
人机协同 问责 披露