DeepSeek-R1 Takeaways 总结 Part II ➢ 推理为中心的RL训练： ➢ 语言一致性奖励，以解决模型在多语言环境中进行推理时，出现语言混合的问题。 ➢ 对推理链的质量进行细致的评估，并通过奖励机制引导模型生成更加合理、准确的推理过程。 ➢ 多目标优化：兼顾推理性能、帮助性和安全性； ➢ 蒸馏的潜力：蒸馏可以帮助将更大模型通过RL发现的高阶推理范式蒸馏到小模型中，这比用小 ➢模型首先采样潜在的推理路径（rationale）的过程类似于 RL 中通过策略选择动作（action），基于 环境状态选择一个可能的策略路径。 ➢STaR 中，通过计算目标函数，模型对整个数据集的预测结果进行评估，并且只根据预测正确的样 本更新模型。 ➢STaR 在同一批数据上进行多次梯度更新，这类似于某些策略梯度算法中的策略，即通过多次调整 同一批数据来稳定学习过程。 [1] STaR: Bootstrapping ➢ 任务与语言之间的正迁移：Long-COT 训练不仅能提升数学任务的性能，还能对其他领域和语言产生正向影响，展现了其 广泛的适用性。此外，该方法具有良好的泛化性和鲁棒性，在通用基础任务和对齐评估中取得了相当或更优的表现。 ➢ 强化学习的规模化提升了效率：离线强化学习算法（DPO）和在线强化学习算法（PPO）均能有效增强模型性能。 ➢ Long-COT 强化多模态模型：将 Long-COT

单次推理效率倍级提升 一次预测多个 token 推理倍级提升 FP16/BF16 1 前 1 后单流水 需要裁判模型评估 1 次 1token 预测 MHA/GQA 分组共享减少缓存 GPT4 16 专家选 2 FP8 混合精度 双向流水并行 新老策略组队评估 1 次多 Token 预 测 MLA 低秩压缩减少缓存 DeepSeekMoE 更稀疏 256 选 8+1 训练精度 腾训练的模型时，需要以昇腾训练的模型精度为标杆 迁移工作量大：建立工具链完成对昇腾的精度 对比和调优。 模型迁移：工具链进一步升级，提升 GPU 到昇腾快速迁移能力 迁移分析工具 模型支持度分析和修改建议 模型支持度评估 离线模型 — — 分析报告 差异三：基础能力差异导致支持完备度不同 基础库、加速库、三方库等支持情况不同 跨架构时需通过引入、适配第三方库，或者开 发基于自身架构的对等库来解决库的差异问题 DeepSeek 模 型 DeepSeek-R1-Distill-llama DeepSeek-V2.5 DeepSeek-R1 DeepSeek-V3 模型权重转换 模型量化 推理资源评估 推理设备选型 ModelA CANN7.0.0 ，依赖 MindSpeed 推理运行环境部署支持 模型运行版本配套复杂 Huawei Proprietary -

赋能房产装 修 - 智能设计与方案生成 （ VR ） 与增强现实 （ AR ） - 虚拟现实 体验 xu • 3. DeepSeek 赋能知识产权服 务 - 专利检索与分析 - 侵权检测与风险评估 - 知识产权法律咨询 - 专利撰写与优化 - 知识产权交易与估值 - 知识产权管理与监控 - 知识产权培训与教育 - 知识产权战略规划 • 4. DeepSeek 赋能金融行 业 - DeepSeek 赋能跨境贸 易 - 市场分析与需求预测 - 供应链优化与物流管理 - 跨境支付与汇率风险管理 - 合规管理与海关申报 - 多语言客户服务与沟通 - 贸易伙伴匹配与谈判支持 - 风险管理与信用评估 - 跨境电商营销与推广 谢 谢！ 2025.2.15

学习大量的语音数据 ，大模型可以实现高质量的跨语言翻译和 语音 识别以及生成自然语音 3.7 大模型的应用领 域 金融风控 自动驾驶 医疗健康 大模型可以用于信用评估、欺诈检测等任 务 。通过分析大量的金融数据 ，大模型 可 以评估用户的信用等级和风险水平， 以及 检测欺诈行为，提高金融系统的安 全性和 稳定性 大模型可以用于医疗影像诊断、疾病预测 等任务 。通过学习大量的医学影像数据 数字孪生模拟高危实验操作 服务场景 n 心理咨询智能体： 通过微表情识别学生心理状态 n 就业指导智能体： 分析百万岗位数据生成个性化 求职策略 管理场景 n 招生智能体： A I 面试官评估考生综合素质 n 行政智能体： 自动处理盖章、 证明开具、 报销等 流程 6. 基于大模型的智能体 智能体在高校的应用场景 n 文献智能体： 跨语言论文溯源与创新点挖掘 A I 赋能高校科研 厦门大学大数据教学团队作品 研究选取了 ChatGPT-4o 、 Gemini Advanced 和 DeepSeek 三种 AI 模型 ， 评估了它们向非医学背景公众传达欧 洲复苏委员会（ ERC ） 指南的有效性。 意大利的一个研究团队借助 DeepSeek 模型 ，在中科院 1 区、 影 响因子

拓展课外教 学活动 教育安全监 控与危机快 速处理 教学设备管 理 05/06/2025 大数据 大数据技术 25 大数据 创 新 教育舆情监测与剖析 教育信息化与现代化发展水平评估 教育机构布局与教育经费调整 学生的发展性评价 基于大数据的科学研究 26 云计算 • 云计算中的“云”主要用来强调计算泛 在性和分布性，实质上是分布式计算、 并行计算和网格计算等技术的发展。

解决方案：政府推出“全民 AI 素养提升计划”，覆盖 5000 万弱势群体 ②职业替代 ⚫ 高危岗位：基础文案/客服/数据分析岗位替代率达 47% ⚫ 转型路径：建立“人机协作绩效评估体系”，重构岗位价值标准 ③认知依赖 ⚫ 思维退化：调查显示过度依赖 AI 导致 25%用户独立思考能力下降 ⚫ 应对策略：中小学增设“批判性使用 AI”课程，培养元认知能力

建预测模型，通过分析大量用户数据和市场趋势，洞 察市场需求，预测未来趋势，精准定位产品的设计与 迭代方向。 • 优化研发流程管理：基于当前项目状态和历史数据建 立预测模型，预测每项任务的完成时间，并评估整个 项目的完成时间，有助于提前发现潜在延迟风险，让 团队合理分配时间和其他资源，保证项目按时或提前 完成。 • 自动化代码编写与优化：AI 编程助手利用深度学习 算法和大量代码数据训练模型，通过分析代码的结构