DeepSeek-R1 \ Kimi 1.5 及 类强推理模型开发解读 北大对齐小组 陈博远 北京大学2022级“通班” 主要研究方向：大语言模型对齐与可扩展监督 https://cby-pku.github.io/ https://pair-lab.com/ 2 Outline ➢ DeepSeek-R1 开创RL加持下强推理慢思考范式新边界 ➢ DeepSeek-R1 Zero vs. 强化学习驱动：国内外现有各家技术路线对比分析及Takeaways ➢ PRM & MCTS 的作用 ➢ 从文本模态到多模态 ➢ 其他讨论：Over-Thinking 过度思考等 ➢ 未来方向分析探讨 ➢ 模态穿透赋能推理边界拓展：Align-DS-V ➢ 合成数据及Test-Time Scaling: 突破数据再生产陷阱 ➢ 强推理下的安全：形式化验证 Formal Verification Generation Space 更大，而不是像象棋一样, Search Space 是 relatively well-defined，容易陷入局部最优 ➢ Value Model 直接影响了搜索方向，而训练一个好的Value Model 比较困难 ➢ 一个相对成功的典范是 rStar-Math [1], 通过小模型达到OpenAI o1数学任务相当的水平 ➢ 一个作为策略模型Policy Model

用于触发大模型的响应并指导其如何生成或 回应 这些提示词可以是一个问题、 一段描述、 一个指令 ， 甚至是一个带有详细参数的文字描述。 它们为大模型提供了生 成对 应文本、 图片、 音频、 视频等内容的基础信息和指导方向。 提示词的重要作用如下： 5.1.5 AIGC 大模型的提示词 引导生成 ，特别是深度学习、 机器学习等算法 ， 自动创建或处理视频内容的技术。 它 能 根据给定的文本、 图像或其他数据 ， 自动生成符合描述的视频内容 ，涵盖文生视频、 图生视频、 视频风格化、 人物 动态化等多个方向。 这一技术在创意设计、 影视制作等领域潜力巨大 ，极大地提升了视频内容的生产效率和 质量 5.5 视频类 AIGC 应用实 践 □ 使用即梦 AI 实现图生视频 索 的盲目性 DeepSeek 不仅适用于医学领域 ，还能够跨学科地支持生物学、 化学、 物理学等多个学科的研究。 它能够帮助科研人员打破学科间的壁垒 ，从其他领域汲取创新思路 ，开拓新的研究方向 基于已有文献和数据 ， DeepSeek 能够为用户提供智能化的实验设计建议。 它通过对相关文献 的 深度分析 ，为实验方案的优化提供指导 ， 帮助科研人员减少设计上的误差和不必要的重复 DeepSeek

Law 升级，模型能力 = 算力 x 数据 x 思考 + 逻辑推理 DeepSeek-V3/R1 OpenAI-o1/o3 算力 x 数据 重新定义 Scaling Law 延续智能涌现的 方向 2017 谷歌发布首个 Transformer 架 构 模 型 2023 ChatGPT 模型能力突破 开启 NLP 时代 2012 AlexNet 模型能力突破 Proprietary - Restricted Distribution 昇腾硬件使能 Ascend Runtime 模型训练：算网 / 算存深度协同是大模型分布式并行训练的基 础 大模型技术发展方向 支持 2 级框盒、框框组网，适用于大规模及超大规模集群 3 、 AI 任 务信 息 任务、通信域 … 1 、控制器获取网络拓扑， 下 发路径 信息 2 、 AI 任 务调 度 以全部通信关系和拓扑信息作为输入

技术的快速发展掀起了新一轮工业革命浪潮，通用大模型的出现让 AI 技术从专用化迈向 了通用化。AI 技术正在步入工业领域的千行百业，帮助企业实现从传统的劳动密集型、资源密集型企 业，向技术密集型、知识密集型的高端化、智能化、绿色化方向转型升级，打造依托于人工智能、大 数据、云计算等现代信息技术的新质生产力。 工业 AI 和大模型的应用，已经渗透到工业生产的产品设计、企业流程管理规划、智能化生产、设备预 测性维护、供应链优化 技术在工业领域的应用主要在以下几大方面： 研发与规划 • 需求分析与预测：基于历史数据和机器学习算法，构 建预测模型，通过分析大量用户数据和市场趋势，洞 察市场需求，预测未来趋势，精准定位产品的设计与 迭代方向。 • 优化研发流程管理：基于当前项目状态和历史数据建 立预测模型，预测每项任务的完成时间，并评估整个 项目的完成时间，有助于提前发现潜在延迟风险，让 团队合理分配时间和其他资源，保证项目按时或提前 用传统视觉算法，对工业相机采集到的图像经过预处 理，基于图像分割等深度学习模型，高效且较为准确 地检出缺陷，为传统的视觉检测技术赋予高度智能 化。质量检测也是目前 AI 技术在工业领域落地应用 较多、较为成功的一个方向。 • 智能生产管理： 在生产计划和排程方面，AI 算法可以优化生产计划 和排程，最大程度地减少产线空闲时间，提高产品交 付准时率。 在生产资源分配方面，通过深度学习和大数据分析， AI

②存在价值重构 意义经济学：人类工作价值从“劳动产出”转向“情感连接” 案例： ⚫ 手写信件服务价格暴涨 10 倍 ⚫ 线下脱口秀票房超过 AI 生成内容 ③文明进化方向 ⚫ 星际探索：搭载 DeepSeek 的探测器自主分析外星土壤 ⚫ 意识延续：临终者将“思维印记”存入 AI 实现数字永生 ⚫ 伦理铁律：立法禁止“完全意识复制”，保留人类生物独特性