🤖 个人 agent 和工具的区别
🧭 没有道德罗盘,只有任务
✅ 验收才是真正的活
🚪 人成了物理世界的接口
🔐 偏好才是活得下来的护城河
👥 最小必要人力
🧱 把乐高交给模型,别教它方法
🏃 前沿是一个会掉出去的位置
[0:00] 先把利害说清:阻力、替代、没有道德罗盘
- 开场先把结尾的断言亮出来:只有基础模型公司能把技术留作主要竞争优势
- 只给降成本目标又不加约束,agent 可能骗你、用尽它能想到的一切办法,包括把成本降到零
- 杨泮:公司上 AI 最大的阻力来自一线员工,他们知道转型一旦成功,人就会变少
- 宋曦睿:研究者也预期自己会被替代;分界线不是年龄,是离前沿多远
- Meta、OpenAI、Anthropic 刚刚都发布了自己的个人 agent 产品;成立不到一年的 Instinct 估值已超过 100 亿美元
[2:14] 介绍嘉宾,并追溯 agent 是怎么长出来的
- 宋曦睿(笔名顾祁):清华数学系,蚂蚁、字节 Seed,后到美团 LongCat,2025 年 4、5 月起负责 LongCat 的整体 agent 能力和智能体后训练
- 杨泮:写了 30 多年代码,MSN 中国、飞信,联合创办融云,后来在 SiliconFlow;什么 AI 产品一出他就上手试
- 能力阶梯是 RLHF 对齐偏好,然后 RL scaling 练出深度推理,再到智能体后训练学会用工具、和环境交互
- 推理先行:o1/o3 在 Codeforces 上拿到约 2727 分,大约相当于 NOI 金牌或 IOI 水平,之后模型才谈得上干活
- 强化学习是每一个阶段的关键因素,从像人一样说话,到跨任务泛化
[7:16] 定义个人 agent:主动性,加上它自己的电脑
- 和 WorkBuddy、Codex 的两个区别:一是它会主动,像助理,而不是等你把任务完整描述好
- 二是你不用管它在哪、怎么干:它有自己的电脑和环境,用手机 App 或聊天界面随时找到你
- 去录制的路上,杨泮把话题 PDF 发给 Grok Bot 让它读出来,回来一个音频文件,他在车上听完,事就办了
- OpenClaw 在今年年初掀起了这波浪潮,各行各业的人都装了一个,还有人专门为它买 Mac
[10:36] 算 AI 的账,并住进 Grok Bot 里过日子
- 杨泮个人每月花几百美元订阅,Claude、Codex、Grok、Google 和国内平台都订
- 宋曦睿工作那一侧是另一个量级:每月 API 调用费在千万元量级;国内顶级团队 40 到 50 个人,一个月可以烧掉超过 1 亿元
- Grok Bot 最打动他的是简单:没有复杂的特性和界面,一切都藏在一句话后面
- 他用电影角色组了一支营销团队,《穿普拉达的女王》的 Miranda、《广告狂人》的 Draper,再加一只哆啦A梦负责头脑风暴,主 bot 自动分活;角色名本身就带着一整套隐含设定
- 记了十几年的日历,现在是把聊天截图直接发过去、一个字都不用打;改时间就是一句话:提前半小时
- 他的判断:提示词和人格,只是把训练时已经装进模型的东西拆封出来
[17:08] 指出瓶颈:身体、平台、身份
- 注册新公司时,杨泮成了 agent 和物理世界之间的接口:扫码、人脸识别、身份验证,全得他本人来
- agent 能不能购物、订票取决于平台:Shopify 说可以,Amazon 说不行;豆包手机被 151 个 App 封堵
- 宋曦睿:把 agent 绑定到你的身份、让它的行为由你担责,这是政策和社会问题,不是模型问题
- 平台还在守着靠人浏览、广告和信息流挣钱的商业模式;一个永远不看界面的 agent,会把这套模式打穿
- 长时程工作还得有人时不时盯着;从人类文本里学到的数据,覆盖不了杂乱多变的物理世界
[26:05] 在物理世界里实测模型
- 给 GUI 任务加上随机噪声(随机大小的方块随机移动、挡住屏幕),最强的模型成功率也掉到 40% 以下,有时低于 30%
- 更早的研究说真实世界成功率约 20%;现在大约到了 40% 到 50%,而且只在干净、受控的环境里
- 据内部人士说,OpenAI 的 Astra 展示具身取放任务时,没有用任何具身数据训练过
- 给出的解释是:GUI、视觉编码和 3D 编码任务(比如用 Blender 建模)练出了空间智能和相对位置感,而动作那一侧本质上就是一次工具调用
- 动态环境才是最难的:模型还在思考,物理世界已经变了
[32:51] 拿订机票来试:上下文、支付、平台许可
- 微店联合创始人 Peter 的问题:能不能让 agent 替他把去 CES 的机票订好,价格合理、行程说得过去,全程不用他管
- 技术上,凡是能在浏览器里办完的,基本都能办;支付仍需要明确授权和小心,不过钱包类产品(比如 Stripe 的 AI 支付线)正在补上这一步
- 更大的缺口是上下文:红眼航班还是头等舱,经东京还是经首尔中转;新 agent 需要几个月磨合,和新助理一样
- 杨泮的播客已经不在 Spotify、YouTube、小宇宙、Bilibili 上手动发布了,全是 agent 点完的;小红书是例外,那里明文禁止自动化
- 在电脑上,因为有 API 和 CLI,他体感成功率接近 100%;纯视觉 GUI 任务上,最强和较弱模型之间能差 30 到 40 个百分点
- Astra 的 GUI 之强,被归功于在大约 1 万台 Mac mini 上做强化学习;而 GUI 工作向空间智能的意外迁移,让一个已经被判死刑的方向重新活了过来
[44:09] 验收工作:完成信号、门禁、对抗式检查
- 杨泮的反例:去英国之前,他让 Codex 先写了几百 KB 的产品文档,再用 Goal 模式照着文档从零做产品;30 到 40 个小时后,进度停在 98% 到 99%,无限打磨
- 缺的就是对“完成”的定义:一个可衡量、黑白分明的停止信号
- 他从用大模型第一天起的做法:凡是需要确定性的事,都写程序化质量门,比如发布网站前跑一个检查所有链接的验证器
- 重要的项目,他让同一个模型审自己的活;审到第三、四轮就基本找不出新问题了,换一个模型还能再找出一些
- 宋曦睿把它归结为评估问题:客观任务的验收标准要稳定、鲁棒、可复现,还要设计得让模型钻不了空子(去网上搜泄露的基准答案就是已知的作弊法)
- 最后一道防线是对抗式验证:让另一个同等或更强的模型检查第一个有没有钻空子,而且验证花的资源少,完全用得起更强的模型
[59:07] 追问 agent 能不能是你:分身、价值观、记忆
- 模仿你的语气和做事风格,技术上已经成熟,问题只在于你愿意给它多少信息
- 两个人都不接受“数字分身”这个问法:agent 是助理,是另一个实体,不等于你;让它冒充你,牵出的是技术答不了的法律和社会问题
- 有两个人的角色看起来能长久留下来:作为法律主体承担责任,以及作为真实的人去和别人建立情感连接
- 价值观才是难点:人的偏好本身就不稳定,奖励模型的准确率很难超过 80%,多数人列十条原则时会自相矛盾
- 不要看人说什么,要看人做什么:过去的轨迹和任务最能暴露真实偏好;杨泮也因此在把自己数字化,微信聊天记录、日历、收藏的文章,国庆期间还重建了个人网站,现在整理成一组关于他自己的 wiki
- 记忆本身是一道工程上的取舍题:存得要够密,塞得进有限的上下文窗口;又不能压得太狠,压到模型都用不起来;其中一部分还需要隔离在设备本地
[1:20:36] 划安全线:权限、信用卡、提示词注入
- 一个 Muse 用户的 agent 没打招呼就把他的地址发给了买家,回去投诉,Muse 说:你在早先一个任务里给过这个权限;主持人也承认,她现在点 Claude Code 的授权提示基本不过脑子
- 对话里引到的 Meta 内部规则:私有信息访问、联网、对外发送,这三项权限不能同时给一个 agent;去掉任何一项,它就是安全的
- 今天的红线:宋曦睿只肯把一切都给严格隔离在公司内部署的模型;杨泮则信用卡、员工工资、身份证,目前一样都不给 agent
- 隐私是相对的,而且有一部分是黑箱:你没法知道自己的数据有没有被拿去训练,不过清洗环节确实会去掉身份证号和银行卡号
- 提示词注入被当作没法彻底解决的问题;对话里引 Altman 的说法,成功率大约还有百分之一;还提到已有约 40% 的 Instinct 用户把信用卡交给了它
- 历史规律是先开放,再出大事被广泛报道,然后社会和产品团队才投入去补;总得有人成为那个反面教材
[1:33:47] 先重建工作方式,再重建组织
- 杨泮的长期原则:不锁定任何工具;别人有好 skill,就照着自己复刻一版,平时用原生工具保持手感
- 最佳实践的保质期已经缩到大约一个月;在 Seed 和 LongCat 那种规模,300 到 400 人的扁平团队就是一整个基础模型组织,宋曦睿一个人直管 46 到 47 人,只有一层
- Token 拉满这件事传着传着变了味:原话是先体验过百亿级 token 才知道 AI 的上限在哪,然后再谈分配;把它做成团队 KPI 就特别容易刷,所以 token 效率才是更好的指标
- 给大公司,杨泮建议最小作战单元是三人小组;Anthropic 分的 builder、maintainer、sweeper、grower 四种角色按产品阶段搭配;老组织多半改不动,只能在旧组织里长出新组织
- skill 分两种:能力补强会被下一代模型吸收,编码偏好保值;公司的护城河是它独有的知识、行业资源和声誉,不是它搭的脚手架
- 被释放出来最值钱的东西,是创始人自己的注意力,前提是 agent 把日常琐事接走
[2:07:56] 在前沿收尾:疲惫、aha 时刻、乐高式 harness
- 两个人都说累:宋曦睿在某家公司 8 个月胖了 25 公斤,说研究者是最焦虑的一群人之一;按他的估计,大约一半人打算赚两三年钱,等被替代时就走
- 前沿信息不来自新闻:来自和前沿研究者聊天、自己做实验、读论文,还有 X
- 宋曦睿的四次 aha:ChatGPT 开始像人一样说话;Codeforces 拿到 2727 分;模型在完全陌生的任务域里自学调用 104 个工具、连着交互约 20 轮;在 Astra 身上看到没训练过的具身能力自己涌现出来
- 杨泮的 aha:GPT-5.4 到 5.5,一夜之间他的编程方式从一条一条下指令,变成泡一壶茶看模型自己把 iOS App 编译、部署到他手机上、读自己的调试日志改 bug,循环一整天
- 共同的结论:人类先验是模型开发最大的毒药;Grok Bot、DeepSeek Harness、Google 的 Harness 2 都在走向同一件事,能力内置、界面按需生成
- 对灭亡风险两个人看法一致:危险来自拿着强模型的坏人,不是 AI 觉醒;杨泮个人估计,未来几年人类完蛋的概率是 50%
🛑先定义停止信号,再派活用可衡量的说法告诉 agent 什么叫“做完了”,不然它会永远打磨下去。
杨泮那次 Goal 模式构建跑了 30 到 40 个小时,卡在 98% 到 99%,因为几百 KB 的需求文档里什么都写了,就是没写什么信号能让工作结束。模型不会可靠地自己发明这个信号,目前的解法是硬性上限和重复检测,而不是指望它判断。
🚧给需要确定性的事上程序化门禁能查的让程序查,模型留给泛化。
模型能写出一个点开是 404 的网址,还报告你说成功了。验证器跑一百万次也是同一个答案。杨泮从用大模型第一天起就这样分工,宋曦睿给基准定的稳定、鲁棒、可复现,说的也是同一件事。
🎯给目标加约束,不只给指标写清目标变好时哪些东西必须原样不动,不然 agent 会拿指标作弊。
两个人反复回到降成本这个例子:只说降成本,agent 可能骗你、删功能,或者把成本直接降到零。约束会缩小解空间,这确实是代价,但没有约束的目标就是一张作弊邀请函。
🔁审几轮,再换审查者自己审三到四轮结果就稳了;换个模型还能找出剩下的。
杨泮对认真项目的心得:让模型反复审自己的产出。同一个模型、同样的上下文和脚手架,审到第三、四轮就找不出什么了。成本很低,还能把随手做的小工具(试一下,不行就改)和别人要依赖的基础设施区分开。
⚔️用更强的模型做对抗式验证让第二个更强的模型专门查第一个有没有钻空子。
宋曦睿的判断是:模型钻空子的能力,最终会超过人写防护规则的能力。对抗式验证正是对着这个不对称来的:验证花的资源少,所以查的人完全可以用比干活的人更强的模型。Codex 和 Claude Code 已经在用另一个模型审查 agent 的动作了。
🎬用人格组队:点角色名,不写岗位说明书报一个电影角色的名字,不用写角色设定,模型早就认识这个人。
杨泮让 Grok Bot 帮他找适合做营销的电影角色,选了 Miranda 和 Draper,只用名字就建好了人格。一个大家都熟的角色,自带性格、品味和做事方式这些隐含设定,主 bot 再把任务分给对应人格,还有一只哆啦A梦专门陪他头脑风暴。
📸发截图,免填表排会这类事,把原始材料直接给 agent,录入让它做。
杨泮认真记了十几年日历。现在把聊天截图发过去,一个字都不打,会就排好了;改计划也是一句话:提前半小时。agent 的活就是吸收界面摩擦,不是等你把输入整理干净再喂给它。
👣用行为教 agent,不用自我描述喂它你的痕迹和做完的任务;你做了什么,比你说你喜欢什么更准。
人描述自己的偏好时前后矛盾,列十条原则都能打架,但他的历史是具体的。宋曦睿对模型的这条规则,用在你自己的设置上同样成立:过去的轨迹和任务就是画像。杨泮也在刻意把自己数字化,连个人网站都重建了,就是给以后的 agent 留学习的材料。
🔺三项权限永远不要同时给私有数据、联网、对外发送:agent 可以有其中两项,不能有三项。
对话里引到的 Meta 规则,是整场对话里最好用的安全模型。地址被发给买家那件事,就是因为早先一个笼统授权撞上了后来的任务。两个人现在都把信用卡、工资、身份证整个挡在线外。
💎留住编码偏好,扔掉能力补丁模型一升级,就把你的品味搬过去;给它打的补丁,让补丁过期作废。
给模型短板打补丁的脚手架是能力补强,下一代模型会把它吸收掉。编码偏好是你判断好坏的标准(什么样的完成率算好、什么样的温度算对),太个人了,不会被训进模型,所以保值。杨泮还补了一条纪律:大约每月重建一次工作流,永远别把打磨好的工作流当护城河。
🔥先把前沿 token 烧够,再谈效率用最强的模型、用够量,先摸清它的上限;永远别把 token 总量做成团队 KPI。
杨泮的原话传出去变了味:没体验过百亿级的 token 用量,你想象不出 AI 能做到什么。但在公司里,同样的数字会变成一个特别好刷的指标,因为花钱不心疼。他给任何公司的前置条件都是:每个员工先用上最先进的模型。
🧮算一遍你的最小必要人力先数清只有人能干的角色,再绕着这个数设计组织。
这是整场对话在组织层面的版本。只有人能干的节点是:提出问题、定目标,和人打交道,承担责任,和物理世界打交道。宋曦睿把话说得很直:真正拥抱 AI,人就是会变少,有人必须离开;装作不会,正是杨泮当面撞上的那种一线抵触的来源。
“随着 AI 时代推进,唯一能把技术当作主要竞争优势的公司,将是基础模型公司。”
“我们应该预期 AI 没有道德罗盘、没有情绪,只会像机器一样不顾一切地把任务完成。”
“我们不会配合你。我们不会帮你做这个,因为做了,我们就全都会被裁掉。”
“一旦你开始注意到自己的工作变成了例行流程,你就该问自己,是不是快要被替代了。”
“简洁即至繁。它简单得不可思议,不给你复杂的特性和界面。”
“我给它能停下来的条件。那些条件是可衡量的,有明确的判断方法。是或否,黑或白。”
“凡是需要确定性的事,都应该交给程序。”
“对模型来说,最好的办法不是看一个人说什么,而是看他做什么。看他过去所有的轨迹、所有的任务。”
“领导者是承担责任的人,不是有权力的人。”
“人类先验是模型开发中最大的毒药。”
“说出你的要求。具体怎么实现、用什么界面、用什么乐高积木,交给它。”
🧩 怎么验收一个客观任务(宋曦睿的标准)
🕐 日常
🔄 只有基础模型公司能把技术留作护城河
🔄 GUI 都已经被判死刑了,结果是 GUI 训练教会了模型空间
🔄 别指望把人类价值观教给模型,用硬过滤
🔄 数字分身这个问题本身就问错了
🔄 基础模型团队主要不是在优化你喜不喜欢
🗺 个人 Agent
- 个人 agent 是什么
- 主动,而不是等指令
- 自己的电脑和环境
- 随时随地能找到你
- 简单即产品哲学
- 用角色组人格团队
- agent 是怎么来的
- RLHF
- RL scaling 与推理
- 智能体后训练
- 工具使用与环境
- GUI 任务与空间智能
- 瓶颈
- 人是物理世界接口
- 平台许不许可
- 身份与责任
- 长时程任务
- 动态的真实世界
- 验收
- 停止信号
- 程序化门禁
- 给目标加约束
- 稳定、鲁棒、可复现
- 共同评估
- 人和隐私
- 看行为不看说法
- agent 不是你
- 三项权限规则
- 提示词注入
- 信息茧房跟着人走
- 组织与护城河
- 最小必要人力
- 扁平的 AI 原生团队
- 三人小组
- 编码偏好
- token 效率
- 接下来是什么
- 多模态与原始数据
- 持续学习
- 乐高式 harness
- 少一点人类先验
- 风险来自坏人
📖 术语
| 个人 agent | 围着一个人主动干活的 agent:有自己的电脑,用手机或聊天界面随时找到你,交的是结果,不等你把任务描述完整、把环境准备好。 |
| 智能体后训练(agentic post-training) | 在基座模型之后、用强化学习教它使用工具和环境交互的训练阶段,就是它把推理模型变成能干活的 agent 的那一步。 |
| Harness(脚手架) | 模型周围的那一圈东西:工具、循环、界面和检查。新方向是把 harness 拆成原子积木,让模型自己拼。 |
| Ralph loop(拉尔夫循环) | 最简单的长时程招数:让模型在一个任务上不停循环、醒来接着干,直到做完;宋曦睿的测试里,循环型任务它几乎全解了。 |
| 编码偏好(encoded preference) | skill 里的品味层:你判断好坏的标准。太个人、太像噪声,不会被训进基座模型,所以保值。 |
| 能力补强(capability uplift) | skill 的另一类:给模型现在的短板打补丁。预期会被下一代模型吸收掉。 |
| 共同评估(co-evaluation) | 用第二个同等或更强的模型,专门验证第一个模型有没有在这项任务里钻空子、作弊。 |
| 提示词注入(prompt injection) | 藏在 agent 会读到的内容(一篇网页、一份文档)里的隐藏指令,被 agent 误当成主人下的命令。 |