从 Expected Return 到 Surrogate Loss:RL 如何接入 Backprop
AI / Agent / System Design
记录 AI、Agent、系统设计与工程实践。内容以一线问题、长期方法和可复用经验为主。
Knowledge Map
如果你更关心我已经沉淀了哪些长期主题,而不只是最近写了什么,可以直接从知识地图进入。
简介(未完成)
简介(未完成) Python 的内存到底长什么样 Everything is a PyObject allocator GC Python 代码是如何执行的? Python 可以在哪里 Hook? 简介(未完成) Python 的内存到底长什么样 char *p = mall...
简介 场景 协作 claude方案 对 Agent Infra提出了哪些新的挑战? 简介 主流多 Agent 框架(CrewAI、AutoGen、MetaGPT)大多采用 Leader-Worker 架构。有基于 capability 的分配和结果验证,但本质仍是调度器,没有方...
简介 与/goal 对比 Loop怎么设计 场景 验证工程 graph engineering 总结 简介 当 agent 的行动已经能被 harness 约束,如何设计一个系统替人完成任务发现、任务续跑、验证闭环和状态写回。Loop Engineering 就是设计一...
简介(未完成)
简介