多约束生产级 Agent 系统实践:两阶段工具路由、DAG 局部重规划与轨迹级评测闭环 2026-10-20 2026-10-23 AI Agent / LLM / 工具调用 / 上下文工程 / DPO / 强化学习 围绕跨境酒旅等强耦合多约束业务场景,拆解向量 Top-K 召回 + LLM 精排 + 跨语言实体链接与 Schema 门控(96%+ 调用合法率)、基于状态机的 DAG 局部子图重规划、Observation 冗余裁剪(节省 40% Token),以及从线上失败恢复轨迹构造 SFT/DPO 偏好对的评测与训练闭环。 1 | 0
从 Actor、Critic 到 PPO Loss:用 GSM8K 理解语言模型强化学习 2026-10-07 2026-10-07 AI LLM / PPO / 强化学习 / GSM8K / verl / 模型后训练 从 GSM8K 和 verl 实验出发,理解 PPO 中的 Actor、Critic、奖励对齐、GAE、概率比与反向传播。 3 | 0
TD-MPC2 精读:用隐式世界模型统一 104 个连续控制任务 2026-07-22 2026-07-22 AI 强化学习 / 世界模型 / 模型预测控制 / 连续控制 / 多任务学习 / ICLR 从隐式潜在动力学、SimNorm、离散回归、策略先验与 MPPI 规划出发,拆解 ICLR 2024 Spotlight 论文 TD-MPC2 如何用统一超参数稳定训练并扩展到 317M 参数、80 个任务。 19 | 0