SheepNav

AI 资讯

每日聚合最新人工智能动态

来源:Anthropic清除筛选 ×

## 当单元格不可用时,表头成了关键证据 在把表格数据整合进知识图谱(KG)之前,元数据质量往往决定了最终图谱的质量。但现实中,表格的单元格值常常缺失、含噪或不适合直接使用。**Metadata-only Semantic Table Interpretation(仅元数据语义表格解释)** 正是针对这种场景:不看单元格内容,只依赖列头等结构信息完成语义标注。 arXiv 上新发布的论文 **《An Explainable Header-Centric Framework for Large-Scale Semantic Table Interpretation and Data Quality Assessment》**(作者:Marcelo Valentim Silva、Hannes Herrmann、Valerie Maxville)提出了一套以表头为中心、可解释的框架,用于仅元数据条件下的**列类型标注(CTA)**与**数据质量评估(DQA)**。 ## 框架做了什么 - 利用人工整理的词汇资源,将表头映射到 **39 种可解释的 FinalFormat 类型**; - 通过 **SourceKeywords** 保留 token 级别的可追溯性,让每一步判断有据可查; - 每种被赋予的类型会激活一套基于**数据质量问题(DQI)分类体系**的验证规则,可检出缺失数据、重复、域违规、错误数据类型、时间不匹配等问题; - 这些检测结果被聚合为 **HeadersIQ**——一个轻量、不加权的数据源级质量指标。 换句话说,该框架不只回答“这一列是什么类型”,还顺带回答“这份数据源整体质量如何”。 ## 评测与一个诚实的发现 研究在多个异构基准上进行了评估,包括 **UCI、Prague、Kaggle、VizNet/Sato、SOTAB、T2Dv2** 以及 **SemTab 2024 Metadata-to-KG** 赛道,总计约 **12 万列**表头。结果显示,该框架在嘈杂的真实元数据上具有广泛的实用覆盖,同时一条并行的 KG 映射路径支持对齐到 **DBpedia** 等知识库。 值得注意的是,在 SemTab 2024 Metadata-to-KG 赛道的官方 **GT-strict** 评测中,成绩并不亮眼。但作者进行了一次**盲审诊断性审计**,发现许多不匹配反映的是基准粒度、别名和本体选择效应,而非表头中心预测本身完全不合理。作者明确表示,这只是关于分歧模式的诊断证据,**并非修正后的基准成绩**。 ## 为什么值得关注 这项工作提供了一条可复用的流程:元数据驱动的语义标注、数据源级质量监控,以及面向 KG 的基准诊断。在数据治理与知识图谱构建越来越依赖自动化管线的当下,这种“可解释 + 轻量 + 可追溯”的思路,为处理脏数据和不可见单元格场景提供了一个务实的选项。

Anthropic8天前原文

企业AI落地最尴尬的现实之一是:模型需要海量真实业务数据来训练和评测,但法务和业务部门绝不允许把生产库随便开放。arXiv上一项新研究提出了一个有趣的思路——**让智能体在模拟环境中"跑"出数据**,而不是"造"出数据。 ## 两条老路,各有硬伤 论文将现有方案归纳为两类: - **表格数据合成**:依赖数据库Schema和种子数据,结构上容易失真,遇到复杂业务约束就力不从心; - **基于流程的合成**:流程逻辑没问题,但分布保真度差,且每个业务域都得手工编写规则。 换句话说,一个管得住"格式"管不住"业务",另一个管得住"业务"管不住"分布"。 ## STS:在模拟环境里"执行"数据 作者提出的 **Synthesis Through Simulation(STS)** 范式跳出了这个二选一。核心思路是:让LLM智能体在一个模拟企业环境中,通过调用带策略约束的API来执行操作,数据是这些操作的"副产品"。 这带来一个优雅的性质:**数据由定义"什么是合法"的同一套环境生成,结构有效性天然成立**。有效性校验和分布建模因此被解耦,可以各自独立优化。 ## Generalist Populator的成绩单 STS的域无关智能体 **Generalist Populator(GP)** 负责解决分布保真度和规模化问题。论文给出的数字值得注意: - 在**十个环境**中,GP在**不访问数据库Schema**的前提下,平均边际保真度达到 **0.88**,约束满足率 **100%**; - 统计型合成器因需要必要种子数据,在七个环境中直接不适用; - 拥有Schema权限的智能体在航空环境紧耦合工作流中,**82%的轨迹失败**,原因是任务组合过于脆弱。 这组对比说明:拿到Schema并不等于拿到能力,反而可能因为过度依赖结构信息而在动态流程中翻车。 ## 为什么这件事重要 企业级工具调用智能体的训练和评测长期受制于数据获取。STS的价值在于把"数据从哪来"这个问题,转化为"环境怎么模拟"——后者是工程问题,前者往往是法律问题。 作者已**开源完整框架、十个环境和生成数据集**,这对需要构建企业智能体评测基准的团队来说,是一个可以直接上手的起点。当然,模拟环境能否覆盖真实企业系统的长尾复杂性,仍需后续验证。

Anthropic8天前原文

## 当工具调用记录成为负担 使用工具的 AI 智能体(tool-using agents)在长任务中会不断累积工具返回结果。问题在于,这些原始载荷里真正有用的信息往往只占很小一部分——一条几百上千 token 的日志、API 响应或报错堆栈,最终可能只贡献一句结论。 arXiv 上最新提交的一篇论文 **《Agent-Controlled Forgetting for Tool-Using Agents: Reversible Context Curation in Practice》**(作者 Jan-Peter Franke,2026 年 10 月 6 日提交)提出了一种思路:**让智能体自己决定忘掉什么**。 ## 方法:原位替换 + 可恢复归档 这套机制的核心设计并不复杂: - 由执行任务的模型主动挑选此前观察到的工具结果; - 在**原始位置**用一条简短笔记替换该结果; - 把完整原文存入**可恢复归档**,需要时可显式取回。 作者用一个 Python 工具框架实现了批量归档与显式恢复,**无需针对特定任务做模型训练**。值得注意的是,用户指令和助手消息被排除在这些操作之外,不会被归档或替换——这是一条重要的安全边界。 ## 实验结果:省了一半 token,但代价是什么? 论文用一组探索性案例做了验证:一个 OpenTelemetry 调试任务,后接一个不相关的实现任务。 | 指标 | 遗忘机制 | 保留完整历史 | |---|---|---| | 最终提示词 token(供应商报告) | 231,951 | 912,492 | | 累计输入 token | 减少约 50% | 基准 | | 估算 API 成本 | 1.28–1.44 美元 | 约 4.38 美元 | 两个对照组都通过了主行为测试(two-case primary behavioral oracle),但**都没能完全满足后续评估**。此外,采用遗忘机制的那一侧发起了更多请求,整体耗时**增加 17%**。 ## 并非万能:工作负载依赖是关键 论文并没有给出"一刀切"的乐观结论。作者明确报告了两类反例: 1. 一组对比性的应用开发任务中,该方法**没有带来任何上下文或成本节省**; 2. 一个更早的延续任务里,尽管上下文减少了,人工评估的质量却**更低**。 这些观察指向一个核心判断:**可逆上下文管理的收益高度依赖工作负载类型**。在噪声大、冗余多的工具调用轨迹中(如调试、日志排查),收益显著;而在信息密度本就很高的任务中,收益可能为零甚至为负。 ## 这对智能体工程意味着什么 上下文窗口管理一直是长时程智能体的痛点。业界常见做法包括滑动窗口截断、摘要压缩、向量检索召回等,但大多要么不可逆(截断即丢失),要么需要额外的摘要模型。 这篇论文的价值在于把"遗忘"变成一个**由智能体自主控制、且可逆**的动作,同时用实测数据量化了它的收益与代价。它提醒工程团队:上下文优化不是免费的午餐——省下的 token 可能以更多请求轮次和更长延迟为代价,而是否划算,取决于你的任务究竟有多"吵"。 论文共 13 页、含 1 张图,代码与研究工件已公开。

Anthropic8天前原文

## 一篇论文试图回答的核心问题 当 Agentic AI 系统表现出更强的能力时,我们如何判断它究竟是「真的变强了」,还是仅仅「搜索得更久」或「获得了更多外部支持」?arXiv 上最新发表的一篇论文 **《Verification and Self-Improvement in Agentic AI: Foundations and Limits》**(作者 Chien-Ping Lu,26 页,含证明与可复现产物)正是围绕这一问题展开。 作者指出,单看一个性能分数,无法区分以下三种改进机制: - **搜索更长时间**(compute scaling) - **获得额外支持**(外部工具、提示、验证器辅助) - **修改提议与验证输出的方式**(自我改进) ## 用「有界验证」统一刻画 论文提出了一套基于**有界验证与隐藏终端随机性**的形式化框架。一个「阶段」(stage)由四要素构成:可接受的记录集合、多项式界、交替验证协议,以及终端检查器。 - **native reach**:使用默认支持时可达的范围 - **closure frontier**:接口已允许的全部支持所构成的边界 在一致逐点概率差距与任务相关可靠性条件下,这些范围被证明是良定义的语言。 ## 几个关键结论 论文的证明结果相当技术化,但可提炼出几点值得关注的判断: 1. **独立多数放大**能同时保持两类语言,而**对随机带做存在性接受**则可能引入错误输出。 2. 精确验证是零随机性特例,论文给出了相应的放置与完备性结果。 3. 随机验证器类满足 **Σₖᴾ ⊆ Σₖᴿⱽ ⊆ Σₖ₊₁ᴾ**;严格的扩张与深度分离需要显式的复杂度假设。 4. 当 **BPP = P** 时,存在具有相同前沿的精确对应类。 5. 对**递归自我改进**而言,在公共可靠解释器与固定验证协议下,一致有界的自我修改仍停留在同一验证类内。 6. 一个**条件误差预算**用于控制自适应选择候选时的错误选择。 7. 一个**配额强制的 XOR 合成族**,将搜索成功率的无界比例与可接受语言的变化分离开来。 ## 对行业的含义 这篇论文的价值不在于给出某个具体系统的性能数字,而在于**把「自我改进」的主张绑定到一组可检验的义务上**:正确性、可接受证据、验证资源、选择误差。 换句话说,未来评估一个自称「能自我改进」的 Agent 时,不能只看 benchmark 分数,而要追问:它的改进来自哪里?验证协议是否固定?证据是否可审计? 论文同时表明,在固定验证协议与可靠解释器的约束下,自我修改带来的能力提升是有上界的——这为「Agent 能否无限自我进化」的争论提供了一个形式化的边界。 > 需要说明的是,该论文属于计算复杂度与 AI 理论交叉领域,其结论依赖若干显式假设,并不直接等同于工程实践中的性能预测。

Anthropic8天前原文

## 当智能体开始“改写自己”,合规审查还剩下什么? 自我改进型 LLM 智能体可以根据新规则调整信贷流程,但问题在于:**一个能够重写自己的智能体,会同时摧毁监管者赖以审查的证据链**——一次具名的变更、一份可复现的测试记录、一个明确的审批动作。如果智能体的每一轮“进化”都不可追溯,那么合规就无从谈起。 arXiv 上最新发布的一篇论文(编号 2610.10629,作者 Ravil Akhtyamov)提出了一个清晰的边界主张:**自我进化只有在被限制在运行时“harness”(指令文本、工具调用逻辑与原子能力组合)内、且模型权重保持冻结时,才具备可审查性**。换句话说,模型本身不动,改变的是它“怎么做事”的那一层外壳。这样一来,每一次适配都是一份带有原因和测试的 diff。 ### 双环引擎与准入闸门 论文给出了一个建立在该边界之上的**双环引擎**,核心是一个在部署前写入哈希链记录的“准入闸门”。研究团队在仿真环境中对该闸门进行了测量——用的是模拟智能体和种子搜索提案器,而非真实语言模型。 在三种监管重新解释族、三种严重程度、每种 10 个随机种子的设置下: - 带闸门的回路在 **7,449 个候选变更中仅放行 144 个**,且没有一个在留出历史上恶化误差; - 在全部低、中严重度单元中,假阳性率被恢复到 oracle 水平,同时未漏报增加。 作为对照,当闸门被替换为无界系统常用的检查方式(只看近期轨迹中更少的错误)时,同样的回路**放行了 309 个有害变更**,并在 90 次运行中有 49 次将漏报率留在 10% 以上——假阳性下降的原因仅仅是筛查被放松了。 ### 规则必须能重标历史 一个值得注意的发现是:在基于转变前标签进行评估时,闸门拒绝了每一个候选。这意味着,**一次监管重新解释必须被编码为一条能够重新标注历史的规则**,否则它无法通过准入。参数性和范围性偏移可以局部修复;结构性偏移只能通过替换原子能力来修复。而在最高结构性严重度下,闸门固定的容差设置在一半的种子中阻止了正确的替换。 ### 与监管框架的对照 论文将上述机制映射到 **欧盟《人工智能法案》** 中关于高风险信贷评分的条款,并指出 **2026 年 4 月发布的美国模型风险指引将智能体式 AI 排除在其适用范围之外**。这一对照凸显出一个现实张力:技术层面已经开始尝试为自我进化建立可审计的边界,而部分监管框架尚未把这类系统纳入视野。 论文共 14 页、5 张表,代码、配置与逐次运行输出已以 v0.6.0 版本发布,并附有 Zenodo DOI。

Anthropic8天前原文

## 指令鸿沟:训练与使用之间的错位 在空中视觉语言导航(Aerial VLN)领域,一个长期被忽视的矛盾正在被放大:智能体在训练时接触的是**细节丰富、与轨迹逐点对齐的长指令**,而真实用户在部署时给出的却是**简短、以意图为中心的口语化指令**。这种错位带来的性能损失是惊人的——在一项基于冻结 **OpenFly** 导航器的测试中,指令鸿沟直接把成功率(SR)从 **31.03%** 拉低到 **11.33%**。 换句话说,模型本身没变,只是换了一种说话方式,它就从「基本能用」跌到了「几乎不可用」。 ## TGIT:不重训导航器,只翻译指令 来自 Xi Chen、Zhe Liu、Shouling Ji 等研究者的论文提出了一种名为 **Trajectory-Grounded Instruction Translator(TGIT)** 的前端方案。它的核心思路相当克制: - **保持导航器冻结**,不微调、不重训,避免高昂的算力成本与灾难性遗忘; - 在导航器之前插入一个「翻译器」,负责把用户的**弱指令**(Weak inputs)转写为智能体能执行的**可执行指令**; - 翻译器的训练信号并非来自人工标注,而是来自**导航器实际走出的轨迹结果**——走得好,说明翻译对了。 为了规模化训练数据,研究者先用语言模型参考人工风格示例,将原始指令改写为配对的、以意图为中心的弱指令。这批数据单独拿去训练,成功率只能到 **15.27%**,说明单纯的语言改写并不足够。 ## 关键数字:从 11.33% 到 32.51% 真正起作用的是轨迹锚定机制。经弱指令训练的 TGIT 将弱输入下的成功率提升至 **37.93%**,并且能够**零样本迁移到真实人类指令**: - 真实人类指令:**11.33% → 32.51%** - 留出的 OpenFly 测试集:**4.95% → 20.79%** - 在 **CityNav** 与 **AirVLN** 上也观察到性能恢复 ## 为什么这件事值得关注 这项工作的价值不只是一组数字。它揭示了一个更普遍的问题:**具身智能体的能力瓶颈,未必在感知或决策,而可能在「接口层」**。当基础模型被冻结、无法再训练时,如何用轻量前端弥合人机表达差异,可能比继续堆参数更具性价比。 当然,TGIT 目前仍依赖导航器的轨迹反馈来训练翻译器,这意味着它并非完全免训练,而是把训练成本从「重训大模型」转移到了「训练小翻译器」上。这一权衡是否在所有场景下成立,还有待更多验证。

Anthropic8天前原文

## 长程智能体的规划困境:计划赶不上变化 在**长程智能体(long-horizon agent)** 任务中,规划能力正变得愈发关键。一个成功的执行过程,往往需要在数十步乃至上百步中协调子目标、调用工具、处理中间结果。然而现实环境充满不确定性:规划阶段做出的假设可能被环境推翻,工具可能返回意料之外的结果,动作也可能直接失败。 这意味着,优秀的智能体不仅要会"制定计划",更要会"修改计划"。 问题在于,传统做法——把整个计划推倒重来——代价高昂且风险不小:原本正确的部分可能被无意改动,反而引入新的错误。 ## 核心洞察:修复往往只涉及局部 来自 arXiv 的最新论文 **《Plan-and-Patch: Diffusion Language Models for Agentic Planning》**(arXiv:2610.10786,2026 年 10 月 7 日提交)提出了一个关键观察: > 计划修订通常只影响其中一部分,而前后结构保持不变。 基于这一观察,作者提出 **Plan-and-Patch** 框架:与其重新生成整个计划,不如只修复受影响区域——在保留前缀与后缀的前提下,对选定的片段进行"补丁式"重写。 这一思路之所以可行,得益于**扩散语言模型(dLLM)** 的特性:它通过**并行去掩码(parallel unmasking)** 生成结构化、类程序式的计划,因此天然支持"填洞"式的局部修复,同时将周围步骤固定不变。 ## 实验数据:修复成功率接近翻倍 研究团队对比了扩散模型 **DreamReasoner-8B** 与自回归模型 **Qwen3-8B** 作为规划器的表现,结果颇具说服力: - 在 **Natural Plan** 基准上、未做任务特定训练的情况下,扩散模型的计划修复成功率达到 **53.7%**,几乎是自回归模型 **27.0%** 的两倍。 - 在 **ALFWorld** 与 **TextCraft** 两个智能体基准上完成任务特定训练后,两者在计划生成的成功率上表现相近。 - 但扩散模型将**平均计划生成延迟降低了 39%–46%**。 这组数据揭示了扩散规划器的双重优势:**更快的生成速度**,以及**更有效的局部修复能力**。 ## 为什么值得关注 长期以来,自回归(AR)模型几乎是语言模型规划任务的默认选择——逐 token 顺序生成,天然契合文本。但顺序生成也意味着:一旦计划中途需要调整,模型很难"回头"只改一段,往往只能整段重写。 扩散语言模型的并行生成范式,恰好为"局部编辑"提供了结构性便利。Plan-and-Patch 把这种便利转化为智能体规划中的实际收益,指向一个更务实的方向: **让智能体的规划从"一次性生成"走向"可维护、可增量修复"。** 对于需要长时间运行、频繁与环境交互的智能体系统而言,这种"打补丁"而非"重开一局"的能力,可能比单纯的生成质量更为重要。 论文由 Syamantak Kumar、Jiang Guo、Hassan Hamad 等九位作者合作完成,涉及人工智能、计算语言学与机器学习多个领域。

Anthropic8天前原文

在机器学习的主流范式里,"标准答案"(ground truth)通常被当作唯一且确定的。标注者之间的分歧往往被多数投票聚合掉,或者直接归为噪声丢弃。但一篇被 **NeurIPS 2026 Trustworthy AI for Good Workshop** 接收的立场论文提出了不同看法:对于大量以人为本的任务,人类理解本身就是模糊的,同一输入存在多个同时合理的解读。把这种模糊性压缩成单一目标,等于丢掉了关于人类感知、判断与经验多样性的关键信息。 ## 被"聚合"掉的人类分歧 论文 *Whose Ground Truth? Embracing Ambiguity in Human-Centered AI* 由 **Jingyao Wu、Mohammad Tariqul Islam、Per Rådberg Nagbøl、Julie Gerlings、Giovanni Leoni、Georgiana Fryza、Lars Pilegaard Thomsen、Jakob Mainz** 等八位作者合作完成,发布于 arXiv(编号 2610.10805)。 作者指出,传统 AI 系统大多建立在"存在一个确定的标准答案"这一假设之上。当不同标注者给出不同标签时,常见做法是**聚合**(如多数投票)或将其视为**噪声**处理。这套流程在图像分类等任务上行之有效,但一旦任务涉及人的主观体验——比如情绪识别、内容审核、医疗判断、教育评价——分歧本身可能恰恰是有价值的信息,而非需要消除的误差。 ## 从"唯一答案"到"解读空间" 论文的核心主张是:应当转向**对合理解读空间的建模**,而不是追求单一目标值。换句话说,模型要学习的不是"这个人到底在想什么",而是"哪些人类判断是合理的,以及它们的分布是怎样的"。 这里有一个关键的区分:作者强调必须把**有意义的模糊性**与**标注噪声**分开。前者反映真实的人类多样性,后者源于标注错误或流程缺陷。混为一谈会导致两种失败——要么把有价值的多样性当噪声抹掉,要么把真正的错误当作合理的多元解读而保留下来。 ## 影响的不只是建模 论文将这一视角贯穿到 AI 系统的多个环节: - **表示(represented)**:模型输出应能承载多种可能解读,而非强行收敛到一点 - **学习(learned)**:训练目标需适配分布式的、多峰的标签结构 - **评估(evaluated)**:评价指标要能衡量对合理判断空间的覆盖,而非仅看与单一答案的吻合度 - **部署(deployed)**:系统在真实场景中应如何呈现和传递不确定性 - **治理(governed)**:当多个解读都合理时,责任归属与决策依据如何界定 ## 为什么现在值得关注 随着 AI 系统越来越多地与人交互、并对人做出决策,"谁的标准答案"这个问题不再是学术细节。情绪识别系统把某人的表情判为"愤怒",内容平台判定某条发言是否"有害",招聘工具评估候选人是否"匹配"——这些任务中的判断往往高度依赖语境和个体差异。 如果训练数据里少数标注者的真实感受被多数投票淹没,系统学到的可能是一种被平均化的、并不代表任何具体人群的"共识"。论文认为,承认并建模这种模糊性,是构建更以人为本的 AI 的必要一步。 需要说明的是,这是一篇**立场论文**(position paper),重点在于提出研究议程与方向,而非给出完整的实证方案。它更像是一份呼吁:在追求性能指标之外,AI 社区需要重新审视那个被默认接受的假设——标准答案只有一个。

Anthropic8天前原文

## 相似度不该只有一把尺子 在向量检索和表示学习中,**余弦相似度**几乎是默认的度量方式。它简洁、稳定,却隐含了一个强假设:语义相似性只有一种固定的几何结构。 但现实并非如此。两幅图像可能因为**描绘同一物体**而相似,也可能因为**视觉风格一致**而相似,还可能因为**指向同一临床发现**而相似。这三种「相似」指向完全不同的语义维度,用同一把尺子去衡量,必然产生混淆。 来自 **Akash Kannan、Kiho Park 与 Victor Veitch** 的论文《Anchor Divergence for Semantic Geometry in Contrastive Learning》(arXiv:2610.06919)正是针对这一矛盾展开研究。 ## 核心思路:把几何当成可建模的对象 论文的关键洞察是:对比学习得到的表示,其实**天然包含了一族几何结构**,而非只有单一几何。作者借助三个工具建立联系: - **对比学习**:提供表示空间的训练框架; - **指数族分布**:刻画锚点(anchor)上的概率分布; - **信息几何**:提供 Bregman 几何这一更一般的度量家族。 由此,作者建立了「**锚点上的概率分布**」与「**表示空间上的 Bregman 几何**」之间的对应关系。换句话说,**对锚点分布建模,就等于对几何本身建模**。 ## Anchor Divergences:在固定表示上切换语义视角 基于这一对应,作者提出了 **Anchor Divergences(锚点散度)**。它的价值在于: 1. **表示保持固定**——不需要为每种语义重新训练模型; 2. **语境可指定**——通过调整锚点分布,就能定义面向特定语义结构的度量; 3. **高效**——检索实验中,该方法被验证为指定语境相关语义相似性的有效且高效手段。 这意味着同一个预训练表示,可以在「同物体」「同风格」「同临床发现」等不同任务间灵活切换,而无需重复训练成本。 ## 为什么值得关注 这项工作把「相似度度量」从固定超参数提升为**可学习、可条件化的对象**。对于多模态检索、医疗影像检索、推荐系统等需要区分多种相似性来源的场景,提供了一条理论清晰、实现成本可控的路径。 论文代码已公开,属于 **cs.AI**,同时交叉 **计算机视觉、机器学习** 与 **统计机器学习** 领域,值得关注表示学习与检索方向的研究者跟进。

Anthropic9天前原文

## 放疗AI的碎片化困境 放射治疗是一条典型的**长链条临床路径**:从治疗决策、靶区勾画、计划设计,到剂量验证、疗效评估与随访,每个环节都已经有AI工具介入。但问题在于,这些能力分散在不同的临床阶段、软件环境和数据模态中,彼此割裂。一个环节的输出往往无法顺畅地流入下一个环节,与放疗本身**纵向连续**的工作流形成鲜明反差。 arXiv 上新发布的论文 **RadOnc-Agent** 正是针对这一痛点提出的解决方案。 ## 框架设计:四个阶段 + 26个可调用函数 研究团队(Caiwen Jiang、Shuoyang Wei、Songlin Zhao、Junyu Li、Jingyuan Chen、Wei Liu)将放疗流程形式化为**四个临床阶段**,并通过对话式接口提供 **26 个可调用函数**。 其核心是一个**大语言模型控制器**,负责三件事: - 将临床意图映射为**受 schema 约束**的函数调用 - 维护患者与工作流的上下文状态 - 把请求路由到对应的专科服务 换句话说,LLM 在这里扮演的不是诊断者,而是**协调者**——它不直接做医学判断,而是决定"该调用哪个工具、带着什么上下文去调用"。 ## 评测数据:从合成场景到真实病历 论文的验证规模值得关注,分为三个层次: | 评测类型 | 规模 | 结果 | |---|---|---| | 单函数请求 | 2,600 条(7,800 次重复执行) | 选中目标函数 **98.79%** | | 预设跨阶段合成场景 | 200 个(600 次执行) | 完成率 **96.50%** | | 真实患者工作流 | 60 份去标识病历、120 个实例(360 次干净执行) | 完成率 **96.67%** | 真实患者数据覆盖了"决策到计划"与"计划到自适应"两类流程,说明测试并非只停留在玩具场景。 ## 消融实验揭示的关键机制 更有信息量的是对比消融实验: - **移除纵向状态**:跨阶段完成率从 96.50% 降至 **84.00%**。这说明让模型"记住"前面阶段发生了什么,是跨阶段协作的关键,而非可有可无的装饰。 - **关闭 schema 与身份校验**:在重放/测试评估中,后端调度错配率从 **0% 飙升到 95.28%**。这一数字相当惊人——没有结构化约束,LLM 几乎会把请求发错地方。 这两组数据共同指向一个工程结论:**在医疗这类高风险场景中,LLM 智能体的可靠性更多来自外部约束机制,而非模型本身的聪明程度。** ## 边界声明:技术可行性 ≠ 临床有效性 论文作者在摘要中明确划出边界:这些发现**仅确立了 LLM 编排架构在协调异构放疗能力与信息方面的技术可行性**,并**不证明临床正确性、临床实用性或前瞻性收益**。 这一表态相当克制,也符合当前医疗AI研究的规范要求。对于关注AI Agent落地的读者来说,RadOnc-Agent 的价值或许不在于"AI能治癌",而在于它示范了一种模式:**用LLM做编排层,用schema和状态管理做安全网**,把散落的专科AI能力整合成一条可追溯的工作流。这一思路对影像、病理、药物研发等同样碎片化的领域,都具有参考意义。

Anthropic9天前原文

当训练数据中缺乏直接指向抽象概念的视觉证据时,Vision Transformer 究竟如何学会理解「愤怒」「喜悦」这类抽象语义?一篇入选 **EMNLP 2026 主会**的论文给出了一个颇具想象力的答案:模型可能借助「转喻」机制——用「火焰」这类具体、可解释的锚点概念,把视觉信号桥接到抽象语义之上。 ## 研究问题:抽象概念从何而来 论文标题为《Metonymic Circuits for Abstract Concept Grounding in Vision Transformers》,作者为 **Jing Ding、Ziqiao Ma、Jiayuan Mao、Joyce Chai、Freda Shi**。研究的核心困惑是:视觉模型在识别「愤怒」时,数据里往往并没有大量直接标注「愤怒」的样本,那么抽象预测究竟由什么驱动? 作者提出假设:模型内部存在一种**转喻式接地机制(metonymic grounding)**,抽象判断并非凭空产生,而是由具体的、可解释的「锚点概念」中介完成。例如「火焰」与「红色」「高温」等感知特征相关联,进而被用于支撑「愤怒」这类抽象语义的识别。 ## 方法:用 Transcoders 拆解中间特征 为验证这一假设,研究团队在 **CLIP** 和 **DINO** 两种视觉编码器上应用了 **Transcoders**,从模型中间层中恢复出可与具体概念语义标签对应的特征,并追踪这些特征在抽象概念识别回路中的贡献。 实验使用了一个精心构建的**图标数据集(icon dataset)**,结果揭示了结构化的转喻回路: - **感知原语**在浅层占据主导地位; - **类物体锚点**出现在抽象目标之前,形成「具体 → 抽象」的过渡链条; - 当图像中包含渲染文字时,模型会改用一条**独立的「感知到文本」通路**。 ## 因果验证:锚点真的在起作用 仅观察相关性还不够。作者进一步通过**因果干预实验**证明,这些转喻性的中间特征在功能上确实参与了抽象概念的接地过程,而非仅仅是伴随现象。 ## 意义与观察 这项工作为可解释性研究提供了一个有价值的视角:抽象能力的涌现未必神秘,它可能建立在具体概念的组合与中介之上。如果这一机制具有普遍性,那么未来或许可以通过干预中间锚点概念,来调试或增强视觉模型对抽象语义的理解能力。 需要注意的是,该结论目前主要基于特定图标数据集与 CLIP、DINO 两类编码器,其向更广泛模型与真实场景的推广程度仍有待进一步验证。

Anthropic9天前原文

## 当智能体学会「举一反三」 大语言模型(LLM)智能体在交互式任务中已经展现出令人印象深刻的能力,但它们始终面临一个根本性瓶颈:**无法真正从经验中持续进化**。微调虽然能带来适应性提升,却依赖对模型参数的访问权限和大量算力,对于闭源大模型而言几乎不可行。外部记忆机制提供了一条替代路径——不改动参数,也能积累经验。但现有方法大多停留在经验的表示与组织层面,所学知识仍与具体任务和上下文紧密耦合,难以泛化到新场景。 真正的挑战在于:**如何把具体的交互经历,转化为抽象、可复用的知识,去指导超越单次经验之外的决策?** ### SAGA 的三层抽象 针对这一问题,研究者提出了 **SAGA**(Self-evolving Agents through Experience-Grounded Abstraction)框架,核心思路是让智能体将交互轨迹逐步抽象为三个层次: - **情节描述(episodic descriptions)**:记录发生了什么 - **可复用流程(reusable procedures)**:提炼怎么做 - **带明确适用条件的原则(principles)**:总结何时用、为何用 关键在于,这些抽象知识并非凭空产生,而是**始终保留与执行证据的链接**,确保可追溯、可验证。 ### 执行与抽象的闭环 SAGA 的工作机制形成了一个「执行—抽象」反馈循环:检索到的原则会被实例化为针对当前任务的指导,并通过**纠正性反馈与重采样**来优化候选动作。换句话说,积累的知识指导未来的交互,而新的经验又持续更新分层记忆库。这让智能体不再只是「记住上次怎么做」,而是逐步形成类似人类「原则性判断」的能力。 ### 实验验证 在 **ScienceWorld** 和 **ALFWorld** 两个交互式基准上,SAGA 均展现出任务性能的提升。消融实验进一步表明,**上下文实例化**和**动作调控**是发挥原则级知识价值的关键环节——仅有抽象原则而不做任务适配,效果会明显下降。 ### 为什么值得关注 这项工作触及了 LLM 智能体的一个核心命题:在模型能力日益强大却愈发封闭的当下,如何让智能体在不触碰参数的前提下持续成长。SAGA 给出的答案是——**让经验升华为原则,让原则反哺行动**。对于依赖闭源大模型构建智能体应用的开发者而言,这条路径可能比微调更具现实可行性。 论文编号 arXiv:2610.06964,提交于 2026 年 10 月 3 日。

Anthropic9天前原文

## 背景:预填充-解码分离架构的调度难题 在大语言模型(LLM)推理服务中,**预填充-解码分离(Prefill-Decode Disaggregation)** 已成为主流架构。它将计算模式截然不同的两个阶段拆开:预填充阶段负责处理用户输入、生成 KV Cache,属于计算密集型;解码阶段则逐 token 生成输出,属于访存密集型。两者对延迟 SLO(服务等级目标)的要求也各不相同。 然而,现有系统大多采用**固定的预填充/解码 Worker 配比**,再配合请求路由来分配负载。问题在于,真实工作负载的预填充-解码需求比例并非一成不变——既有短时突发,也有持续偏移。一个在某个时刻配置得当的集群,可能很快就会失衡,导致即便别处存在空闲算力,延迟 SLO 依然被违反。 传统的自动扩缩容机制虽然能增加容量,但反应慢、需要备用 GPU,且无法直接应对短时间尺度的阶段失衡。 ## FluidPD 的两大核心机制 针对上述痛点,来自 Azure 等机构的研究者提出了 **FluidPD**,一个提供 **SLO 感知原地弹性** 的 P/D 分离服务系统。它包含两个互补机制: - **FluidToken**:应对**瞬时失衡**。当解码侧出现空闲算力时,将一部分有界的预填充计算卸载到解码 Worker 上执行,从而在不新增资源的情况下缓解预填充压力。 - **FluidRole**:应对**持续失衡**。通过原地重新分配正在运行的 Worker 角色,在预填充与解码之间切换,**无需重新加载模型或重启引擎**。 两个机制都由轻量级的**压力指标**驱动,能够在资源压力演变为 SLO 违规之前就将其暴露出来。 ## 实测效果 在**生产级 Azure 追踪负载**上,FluidPD 相比静态配置的 SGLang,整体 SLO 达成率**最高提升 94.6 个百分点**。这意味着,通过 SLO 感知的原地 P/D 弹性调度,无需额外配置 Worker,就能显著提升服务质量。 ## 为什么值得关注 随着 LLM 服务规模化,推理成本与延迟 SLO 的平衡成为核心挑战。FluidPD 的思路——**不靠加机器,而是靠更聪明的原地调度**——为降低推理服务总拥有成本(TCO)提供了新方向。尤其在云厂商按 GPU 时长计费的背景下,这种弹性能力直接关系到服务的经济性。 该论文共 13 页、11 张图,已提交至 arXiv(编号 2610.06917)。

Anthropic9天前原文

## 当自然语言遇上企业数据:一个「可控」的仪表盘生成方案 用一句话让系统自动生成数据仪表盘,听起来很美好,但企业场景真正在意的从来不是「能不能生成」,而是「生成得对不对、能不能查、出错怎么办」。arXiv 上最新发布的一篇论文 **Text2Dashboard**,正是冲着这个矛盾去的。 ### 核心思路:模型只负责「提议」,软件负责「执行」 Text2Dashboard 是面向 **DataBrain** 的原型系统,目标是把自然语言分析请求转化为**可审查(inspectable)**的仪表盘。它的架构由两部分组成:一个可安装的 **Codex 插件**,以及独立的 **Agent Runtime**。 这套设计最关键的一句话是:**模型提出动作,确定性软件控制执行并记录状态转换。** 换句话说,大模型不直接操作数据,而是被约束在 schema 之内做决策,真正的执行权交给带类型的工具和确定性逻辑。 整个流水线覆盖了从实体解析、元数据发现、只读 SQL 强制,到仪表盘组装,再到静态检查、动态预检和浏览器审查的完整链路。 ### 「治理」体现在哪里? 论文特别强调了 **Hooks(钩子)** 机制——用于审批、审计、检查点、恢复和失败处理。这相当于给 Agent 装上了刹车和行车记录仪:每一步状态变化都被记录,异常时有恢复路径,越权操作能被拦截。 ### 实测结果:小而具体,但不吹嘘 研究团队在**冻结的真实 DataBrain 任务**和受控的 Hook 故障场景上做了评估: - **元数据与 SQL 任务**:严格成功率 **6/8**。其中元数据选择 **4/4** 全过,四个 SQL 任务均满足语义标准,但只有 **2/4** 满足精确的输出列契约。 - **仪表盘任务**:最终版本通过了 **4/4** 单面板任务、一个双面板任务,以及一个已有仪表盘的优化任务;另有一个参数化任务超出了步数上限。 - **故障处理**:全部 **10 个故障场景**都达到了预期结果,且**没有产生未经批准的外部副作用**。 - **性能观察**:在所有报告分组中,**模型推理占运行时长的 97% 以上**。 ### 别过度解读 论文作者自己划了边界:这些结果**样本量小、且高度特定于 DataBrain**,不足以证明生产就绪、通用 text-to-SQL 准确率,或者比人工搭建仪表盘更高效。 这其实是一种难得的诚实。在 Agent 概念满天飞的当下,Text2Dashboard 的价值不在于「全自动」,而在于它示范了一种更务实的路径——**把不确定性留给模型,把确定性留给工程**。对于真正想把 AI Agent 落进企业数据栈的团队来说,这套「模型提议 + 软件治理」的分工,或许比生成结果本身更值得参考。

Anthropic9天前原文

## 数据管道的「慢性病」,终于有人开药方了 但凡做过数据工程的人,大概都对这样一种场景不陌生:凌晨两点,告警响了——上游 API 悄悄改了字段名,或者目标网站的 DOM 结构变了,整条数据管道轰然断裂。工程师从床上爬起来,排查、定位、写补丁、测试、部署,平均 **170 分钟**就这么没了。 这几乎成了数据团队最消耗人的日常。而现有的可观测性工具能做什么?它们会**发告警**,然后……就没有然后了。剩下的事情,还是得靠人。 来自 arXiv 的一篇新论文提出了一个可能改变这一局面的方案:**AegisFlow**(Agentic Engine for Intelligent Self-healing and Graph-driven Operations for Workload remediation),一个多智能体代理框架,试图把「检测」和「修复」之间的断点彻底接上。 ### 它是怎么工作的? AegisFlow 的核心思路并不复杂,但工程实现相当精巧。它由两个关键角色构成: - **Watchdog 智能体**:负责持续采集运行时遥测数据,监控管道健康状态 - **Repair 智能体**:一旦发现问题,基于**大语言模型(LLM)**自动生成、测试并部署代码补丁 整个流程基于经典的 **MAPE-K 循环**(Monitor、Analyze、Plan、Execute、Knowledge)构建。但真正让 AegisFlow 区别于「让 GPT 写段代码」的,是它提出的 **Parallel Shadow Patching**(并行影子补丁)执行模型——在**数字孪生环境**中生成并验证补丁,确认无误后才部署到生产环境。这意味着修复过程是非侵入式的,不会因为一个自动补丁把问题搞得更糟。 ### 效果如何? 研究团队在五类常见故障场景下进行了实验测试,结果相当亮眼: - **MTTR 改善 98.1%**:从平均每个补丁 170 分钟降至 **3.2 分钟** - **补丁成功率 92%** - 分场景来看,**JSON schema 变更**场景成功率达 96%,**标点漂移**场景达 98%,而**Shadow DOM** 场景表现最弱,为 85% 论文指出,AegisFlow 能将数据工程师约 **98% 的 on-call 时间**从「救火」中释放出来,重新投入到创新性工作中。 ### 落地方式与局限 AegisFlow 的一个务实设计是**部署无关性**——它可以以插件形式接入现有的管道编排系统,对现有系统改动极小。这降低了采用门槛,也让它更容易融入企业已有的数据基础设施。 不过需要注意,Shadow DOM 场景 85% 的成功率说明,面对高度动态、结构模糊的前端环境,自动化修复仍有边界。此外,论文目前为预印本状态,尚未经过同行评审,实际生产环境中的长期表现还有待验证。 ### 为什么值得关注 数据管道的脆弱性是个老问题,但用**多智能体 + LLM + 数字孪生验证**的组合来系统性解决它,代表了一种值得注意的趋势:AI 代理不再只是「帮你写代码」,而是开始**自主闭环地运维系统本身**。如果这类框架成熟,数据工程师的角色或许会从「管道修理工」真正转向「管道设计师」。

Anthropic9天前原文

## 从一句模糊需求到可玩成品,差在哪里 让大模型直接根据用户的一句话生成一款浏览器游戏,听起来像是前端代码生成能力水到渠成的延伸。但现实是,稀疏的用户查询往往迫使编码智能体自行"脑补"大量未指定的细节,结果就是:**机制不完整、玩法流程断裂、视觉效果粗糙**。 以往的研究要么依赖复杂的多轮交互工作流,要么聚焦于静态的游戏评测基准,而由 arXiv 收录的论文 **GameGo** 则瞄准了一个更直接的目标——**端到端的真实游戏合成**。 ## GameGo 的核心思路:把"游戏种子"变成需求文档 GameGo 的关键洞察在于:与其让模型在模糊指令下自由发挥,不如先把简短的"游戏种子"系统性地转化为一份完整的**产品需求文档(PRD)**,而且这份文档要扎根于工业界的真实游戏开发实践。 具体来说,这套框架做了两件事: - **需求扩写**:将用户寥寥数语的描述,扩展为包含玩法机制、交互流程、视觉规范的结构化文档,减少智能体的"欠定假设"。 - **动态压缩**:在保留核心玩法约束的同时,用任务特定的压缩策略最大化信息密度,避免冗长的 PRD 反过来限制设计探索空间。 这种"先规范、再压缩"的组合,试图在**指令遵循**与**创作自由度**之间找到平衡点。 ## 数据与基准:55,060 条轨迹撑起训练管线 光有框架不够,训练一个真正能写游戏的模型需要海量高质量数据。研究团队基于上述管线构建了 **GameGoData**,包含 **55,060 条开发轨迹**,覆盖 **2D、2.5D 和 3D** 三类游戏形态。 与此同时,他们还发布了 **GameGoBench**,一个由 **124 个多样化游戏查询**组成的评测基准,用于衡量模型在真实游戏开发任务上的表现。 在这套数据上训练的 **GameGoCoder**,据论文描述,表现超过了同等规模的基线模型,并在游戏开发基准上**接近前沿模型**的水平。 ## 这意味着什么 GameGo 的价值不止于"又一个代码生成模型"。它揭示了一条路径:当通用大模型在垂直领域表现不佳时,**用合成数据 + 领域知识注入来训练专用智能体**,可能比单纯堆参数更有效。 对于游戏行业而言,如果这类工具成熟,独立开发者和小团队的制作门槛将被显著拉低——从"想做一个游戏"到"看到一个可玩原型"之间的距离,正在被 AI 压缩。 论文代码、数据集和模型均承诺**公开**,具体开源时间与地址尚未在摘要中给出,值得持续关注。

Anthropic9天前原文

## 当「快思考」被塞进 Agent 流水线 LLM Agent 每完成一个任务,背后往往要做出大量细碎而类型化的判断:调用哪个模型、选择哪个工具、检索到的文本是否相关、输入是否携带提示注入。如果每次判断都交给一次完整的 LLM 调用,成本和延迟会迅速累积。**System-1 决策模型**的思路正是针对这一点——用单次前向传播直接输出类别概率,试图以更低的代价替代这些小型决策。 但「快」是否等于「准」?arXiv 上的一篇新论文给出了一个相当谨慎的答案。 ## 配对评估:11 个决策点、两组模型 作者 **Jiawei Li** 对两个 System-1 模型进行了配对评估:开源权重模型 **Laya** 与托管模型 **Jev**。测试集覆盖 **11 个 Agent 决策点**,来自 **18 个公开来源**,包含 **7,283 个基础用例**以及 **6,640 个鲁棒性变体**。评估强调字节级一致的输入、配对检验,以及跨硬件、跨天的可复现性检查。 结果并不均衡: - **Jev 在 11 个决策点中的 9 个上显著更准**,领先幅度为 **+10.8 到 +46.0 个百分点**。 - 在**零样本模型路由**上,两个模型都没有超过随机水平。 - 在 **RAG 相关性门控**上,两者打成平手。 - Laya 的脆弱性尤其明显:当选项顺序反转时,它会改变 **30%** 的答案;在候选数量多或彼此相似时表现急剧下降——**50 个最近邻工具时准确率为 31%**,而 Jev 在存在唯一正确工具的条目上达到 **98%**。 这些数字指向一个现实:System-1 模型在「选项少、区分度高」的场景里可能够用,但一旦候选空间变大或语义相近,单次前向传播的概率输出就开始失稳。 ## 更值得注意的:作者审计了自己的流水线 这篇论文的另一半价值在于**自我审计**。作者主动披露了分析过程中的错误与设计混杂因素,并指出它们曾扭曲过部署结论: - **遗漏的预筛选成本**:原本报告的 **23.9% 节省**,实际只有 **4.3%**。 - **门控准确率被当成端到端质量**:**58%** 对 **98%**,两者含义完全不同。 - **样本内阈值**:目标 5%,但留出集上的漏检最高达到 **17%**。 - **通道效应**:注入误报上的通道差异,在使用通道原生内容后消失。 另外两个疑似混杂因素经检验后未改变结论。作者同时公开了全部用例、原始输出与分析代码。 ## 这意味着什么 对正在搭建 Agent harness 的团队来说,这篇论文传递了两个信号。第一,**System-1 决策模型不是万能替代品**:模型路由这类需要全局判断的任务,零样本表现仍不可靠;工具选择在候选变多时也需要更谨慎的验证。第二,**评估本身需要被评估**:一个看似可观的成本节省,可能因为漏算预筛选开销而大幅缩水。 在 Agent 系统越来越依赖「小模型做小决策」的趋势下,这篇论文的价值或许不在于给出某个模型的好坏定论,而在于提醒:**快模型给出的答案,需要慢证据来验证。**

Anthropic12天前原文

## 一份年报,能告诉我们多少关于 AI 风险的事? 当一家公司开始谈论 AI,它究竟是在展示创新,还是在承认隐患?一项新研究尝试用大语言模型(LLM)大规模扫描英国上市公司的年报,试图从这些官方文件中挖掘出企业如何披露自身对 AI 的回应。 这篇题为《AI 风险观测站:从年报中的 AI 披露能学到什么关于社会韧性的知识?》的论文,由 Bart Jaworski 撰写,已被 arXiv 收录。研究团队构建了一套可复现的两阶段分类流程,对 **1,362 家英国上市公司在 2020 至 2025 年间(含部分 2026 年数据)的 9,821 份年报**进行了系统分析。 ### 验证方法:与人类标注对齐 在正式分析前,研究者先用 **474 段人工标注文本**验证了分类流程。结果显示,该方法在召回率上表现较高,但在标签级别的一致性上仅为中等。这意味着,模型能较好地“发现”相关内容,但在具体分类上仍有改进空间。 ### 三个值得注意的发现 研究揭示了三个实证模式: 1. **AI 风险提及率飙升,但“实质性”披露稀缺** 2020 年至 2025 年间,提及 AI 风险的年报比例从 **2.8% 跃升至 41.2%**;同时,披露 AI 采用情况的比例也从 **13.8% 上升至 45.2%**。供应商提及则高度集中于少数几家主要厂商,**微软**位居榜首。 然而,研究者进一步开发了“实质性分类”来评估披露质量,发现大多数 AI 风险披露并不实质性:**2025 年,41.2% 的年报提及 AI 风险,但只有 4.3% 包含被归类为实质性的 AI 风险披露。** 2. **披露情况因行业和市场板块差异显著** 在关键国家基础设施(CNI)领域,AI 风险披露率差异巨大。**AIM 市场(另类投资市场)的年报披露 AI 风险的比例远低于主板市场**;能源和数据基础设施等行业在 AI 风险披露方面也落后于其他行业。 3. **危害披露几乎缺席** 在整个语料库中,仅有 **7 份年报**提及了 AI 带来的实际危害。这一数字之低,令人关注。 ### 这对社会韧性意味着什么? 社会韧性研究依赖于有用且可操作的数据。这项研究的意义在于,它提出了一种利用 LLM 从海量非结构化文本中提取信号的方法,并揭示了当前企业 AI 披露的“言行差距”:**谈论风险的公司很多,但真正严肃对待并披露实质性风险的公司很少。** 对于政策制定者、投资者和研究者而言,这或许是一个提醒:年报中的 AI 风险披露,目前更多是形式上的合规动作,而非实质性的风险治理。 论文代码和数据已公开(数据集版本 v1.1),为后续研究提供了可复现的基础。

Anthropic12天前原文

## 一个被默认接受的前提,正在被质疑 当前主流文生图(Text-to-Image)安全方案中,有一类做法格外流行:**免训练(training-free)** 的推理时干预。它不需要重新训练模型,而是在生成过程中沿着某个「不安全方向」或「全局有害子空间」对表示进行统一修正。 这个思路隐含了一个假设——**不安全语义可以被一个可复用的全局信号统一表达**。来自 arXiv 的论文 **《Keep It CALM: Analyzing the Limits of Global Unsafety in Text-to-Image Generation》**(NeurIPS 2026,作者 NaHyeon Park、Minhyun Lee、Hyunjung Shim)对这一假设做了受控的几何分析,并给出了一个并不乐观的结论。 ## 覆盖度与选择性的两难 论文指出,全局不安全假设存在一个**一致的覆盖度—选择性权衡(coverage-selectivity trade-off)**: - **紧凑的不安全子空间**:维度低、干预精准,但无法覆盖多样化的不安全语义,容易漏掉异质的有害提示。 - **更宽泛的聚合子空间**:覆盖范围扩大,但会越来越严重地**扭曲与安全相邻的良性提示(safety-adjacent benign prompts)**,也就是常见的「误伤」问题。 换句话说,把所有不安全语义压进一个方向或子空间,本身就是在牺牲精度换召回,或者反过来。这不是调参能解决的工程细节,而是该假设的结构性限制。 ## CALM:把「全局移除」换成「局部修正」 基于这一发现,作者提出 **CALM(Counterfactual Adaptive Local Modulation)**,一种免训练的安全护栏机制。其核心设计包括: 1. **匹配的不安全—良性锚点**:用成对锚点建立对照,而非依赖单一全局方向。 2. **提示级路由**:对每个输入提示,判断其激活了哪些不安全类别,而不是对所有提示施加同一套干预。 3. **最小化 token 级编辑**:只把真正违规的 token 表示朝安全侧做最小幅度调整。 4. **残差抑制**:压制与不安全方向正对齐的残差分量。 这套流程的关键词是 **prompt-local** 与 **counterfactual**:干预范围从「全局统一」收缩到「与当前提示相关的局部」,干预依据从「固定方向」变为「反事实对照」。 ## 结果与意义 论文报告,在广泛评测中,CALM **显著提升了不安全内容的抑制效果,同时保住了良性提示的可用性**。作者据此主张:相较于全局不安全信号的统一移除,**局部反事实修正是一种更具选择性的替代路径**。 对行业而言,这项工作的价值不只是一项新方法,更是一种视角转换:文生图安全对齐的瓶颈,可能不在于「信号够不够强」,而在于「信号是否足够局部、足够贴合具体提示」。当监管与平台都在追求既安全又不牺牲创作自由的平衡点时,这类关于安全机制几何边界的分析,或许比又一个更强的过滤器更有参考价值。

Anthropic12天前原文

## 从「生成世界」到「编辑世界」 过去一年,交互式世界模型(interactive world models)的进展主要集中在两件事上:**生成一个可运行的环境**,以及**在其中行动**。但一个更贴近真实需求的环节长期被忽略——如果已经有一个可执行的世界,我们能否像改代码一样,**有目的地去编辑它**,同时不破坏那些本该保持不变的部分? arXiv 上最新的一篇预印本论文 **《World Editing: Intervening on Executable Worlds at Increasing Depth》** 正式把这个问题提了出来。作者把它定义为「world editing」:对既有世界进行干预,并保留应当不变的性质。 ## 核心概念:干预深度 论文的关键贡献之一是引入 **intervention depth(干预深度)** 这一维度,用来描述一次编辑对世界实体、动力学和系统之间的耦合强度。深度越浅,改动越局部;深度越深,编辑就越牵动整个世界的运行逻辑。 为了把这一能力落到实处,团队选择了一个颇为务实的方向——**工业级游戏模组(modding)**,并构建了 **IGMWorld** 以及配套基准 **IGMBench**。 IGMBench 覆盖 **Minecraft** 与 **Terraria** 两个平台,包含 **110 个任务**、超过 **1.1K 条可执行状态与行为判据**,任务类型横跨属性、实体、动力学与系统四个层级的干预。评估方式也相当严格: - 确定性可执行性检查 - 行为检查 - 保留性检查(确认不该变的部分没变) - 视觉检查 ## 前沿编码智能体表现如何 结果既有惊喜也有隐忧。 **最强配置**在严格的任务级标准下解决了 **78.2%** 的任务,在判据级标准下更是达到 **94.8%**。这说明前沿编码智能体已经具备相当可观的世界编辑能力。 但**可靠性随干预深度上升而普遍下降**,而且这一趋势在判据数量相近的任务之间依然存在——也就是说,难度来自「深度」本身,而非任务复杂度的简单堆叠。 另一个值得注意的发现是:**大多数失败的编辑仍然能成功构建并加载**。换句话说,问题不在于「改不动」,而在于「改了之后世界不按预期运行」。这恰恰点出了世界编辑的真正难点——让编辑后的世界**行为正确**,而不仅仅是语法上成立。 视觉一致性则是另一块短板:**所有被评估的配置,联合视觉通过率均低于 50%**。 ## 为什么这值得关注 这项研究传递了一个明确信号:**world editing 是一种独立于 world generation 和 interaction 的能力**。会生成世界、会在世界里行动,并不等于会精准地编辑世界。 而可执行游戏,恰好提供了一个既真实又可量化、可复现的试验场。对于正在推进世界模型、智能体与仿真环境的团队来说,IGMBench 这类基准或许会成为下一阶段能力评估的重要参照。

Anthropic12天前原文
1 / 50下一页