SheepNav

AI 资讯

每日聚合最新人工智能动态

OpenAI 于 2026 年 4 月 23 日正式发布 GPT-5.5,这是其迄今为止最智能、最易用的模型。新模型在编码、研究、数据分析等代理任务上表现显著提升,同时保持与 GPT-5.4 相当的推理速度,且 token 消耗更少。即日起向 Plus、Pro、Business 和 Enterprise 用户开放,API 即将推出。 ## 性能飞跃,效率同步提升 GPT-5.5 在多个基准测试中展现出明显优势。在 **Terminal-Bench 2.0** 上,GPT-5.5 得分 **82.7%**,远高于 GPT-5.4 的 75.1%;内部测评 **Expert-SWE** 从 68.5% 提升至 **73.1%**;**OSWorld-Verified** 得分 **78.7%**,超越 GPT-5.4 的 75.0%。在与竞品对比中,GPT-5.5 Pro 的 **BrowseComp** 得分高达 **90.1%**,高于 Claude Opus 4.7 的 79.3% 和 Gemini 3.1 Pro 的 85.9%。 更值得关注的是,GPT-5.5 在提升智能水平的同时,**保持了与 GPT-5.4 相当的每 token 延迟**,并且完成相同 Codex 任务所需的 token 数量显著减少,实现了“更聪明、更快、更省”的三重进步。 ## 代理能力全面增强 GPT-5.5 专为处理“混乱的多步骤任务”而设计。用户无需精细管理每一步,只需给出目标,模型即可自主规划、使用工具、检查结果、应对不确定性,直至任务完成。其强项领域包括: - **代理编码**:复杂代码的编写与调试 - **计算机使用**:操作软件、跨工具协作 - **知识工作**:文档与电子表格创建、在线研究 - **早期科学研究**:基于上下文的推理与长期行动 ## 安全与可用性 OpenAI 为 GPT-5.5 配备了迄今为止**最强大的安全防护措施**,包括全面安全评估、内部及外部红队测试、针对高级网络安全和生物学能力的专项测试,并收集了近 200 家早期合作伙伴的反馈。 即日起,GPT-5.5 面向 **Plus、Pro、Business 和 Enterprise** 用户在 ChatGPT 和 Codex 中推出;GPT-5.5 Pro 则面向 **Pro、Business 和 Enterprise** 用户。API 版本正在与合作伙伴紧密协作,以确保大规模服务的安全要求,预计很快上线。

Hacker News1.6k6个月前原文

Anthropic 近日发布官方说明,详细披露了过去一个月内 Claude Code 用户反馈“模型变差”的原因。调查发现,问题并非源于模型本身或 API 层,而是 Claude Code、Agent SDK 和 Cowork 产品中三项独立的配置与代码改动。 ## 问题一:推理强度默认值下调 3 月 4 日,团队将 Claude Code 的**默认推理强度从“高”降为“中”**,目的是解决高模式下界面“假死”般的延迟问题。然而用户普遍认为,宁可忍受等待也要保持更强智能。Anthropic 在 4 月 7 日撤回该改动,承认“这是错误的权衡”。受影响模型包括 **Sonnet 4.6 和 Opus 4.6**。 ## 问题二:会话上下文清除漏洞 3 月 26 日,一项旨在清理空闲超 1 小时会话中“老旧思考内容”的改动,因 bug 导致**每次交互都重复清除上下文**,而非仅清理一次。这使得 Claude 看起来“健忘且重复”,严重破坏编码连贯性。该问题于 4 月 10 日修复,同样影响 Sonnet 4.6 和 Opus 4.6。 ## 问题三:系统提示精简过度 4 月 16 日,为减少冗长回复而新增的系统提示指令,与其他提示修改叠加后**意外降低了代码生成质量**。该改动在 4 月 20 日被回滚,影响范围包括 Sonnet 4.6、Opus 4.6 和 Opus 4.7。 ## 为什么感知到“全面退化” 由于三项改动分别作用于不同流量切片、在不同时间上线,用户感受到的是**碎片化、不一致的体验下降**,而非单一可复现的 bug。Anthropic 承认初期难以将反馈与正常波动区分,内部测试也未能复现。 ## 补偿与改进 截至 4 月 23 日,所有订阅用户的**使用限制已重置**。Anthropic 表示将加强变更前后的评估流程,并增加用户反馈的敏感度阈值,防止类似问题再次发生。 此番事件给行业敲响警钟:AI 产品的“变笨”往往不是模型退步,而是工程层面的隐性折衷。在追求低延迟与高智能之间,如何保持透明沟通与快速回退机制,是所有 AI 服务商需要持续面对的课题。

Hacker News9416个月前原文

## 当“自然”不再自然:MIT科技评论特辑探讨技术与地球的未来 你想象的“自然”是什么?是未被触碰的荒野,还是纯粹的原生状态?然而,从雨林野生动物体内的微塑料到北冰洋的人造光,人类的影响已触及地球的每一个角落。在这样的背景下,**“自然”本身成了一个需要重新定义的问题**。 这正是 **MIT科技评论全新“自然特辑”** 试图回答的核心议题。该特辑通过一系列深度故事,审视技术如何重塑我们的星球,以及技术能否用于修复它。 - 我们调查了**不会唱歌的鸟**、**不是狼的狼**,以及**不是草的草**——这些看似矛盾的现象背后,是人类活动对物种和生态系统的深刻改变。 - 我们探索了**北极冰下的生命意义**、人类内心的自然性,甚至借助著名作家杰夫·范德米尔的新小说,展望了遥远未来异星世界上的自然形态。 这些故事共同提出一个问题:在一个被技术深刻改变的世界里,我们是否应该用技术去“修复”自然?而修复后的自然,还是“自然”吗? ## LLMs+:大语言模型的下一步是什么? 在AI领域,ChatGPT的爆发让大语言模型成为焦点。但下一个大事件是什么?答案是:**更多、更好的大语言模型——我们称之为LLMs+**。 LLMs+将朝着**更便宜、更高效、更强大**的方向进化。这一趋势被列入MIT科技评论的“当前AI领域最重要的10件事”榜单,本特辑将逐一解读。 ## 聚变发电会变便宜吗?别抱太大希望 聚变能被视为零排放的未来能源,但一项发表在《自然·能源》上的新研究泼了冷水。研究团队通过估算聚变技术的“经验率”(即产能每翻倍时成本下降的百分比),发现**聚变发电的成本下降可能不如预期**。这为聚变技术的商业化部署提供了更现实的判断依据。 --- **小结**:无论是重新定义“自然”,还是审视LLMs+与聚变能的未来,本期《下载》特辑都在提醒我们:技术既是问题的制造者,也可能是解决方案的一部分。关键在于我们如何理解并选择使用它。

MIT Tech6个月前原文

OpenAI 于 2026 年 4 月 23 日发布了 GPT-5.5 系统卡,详细介绍了这一新模型的能力、安全评估结果和防护措施。GPT-5.5 被定位为面向复杂现实工作的模型,能够编写代码、在线研究、分析信息、创建文档和电子表格,并跨工具完成任务。相比前代模型,GPT-5.5 能更早理解任务、减少对用户指导的依赖、更高效地使用工具,并能自我检查直至完成工作。 在安全方面,OpenAI 表示对 GPT-5.5 进行了全面的部署前安全评估,包括针对高级网络安全和生物学能力的定向红队测试,并收集了近 200 家早期访问合作伙伴的真实用例反馈。GPT-5.5 配备了迄今为止最强的一组安全防护措施,旨在减少滥用风险,同时保留高级能力的合法有益用途。 值得注意的是,OpenAI 指出 GPT-5.5 Pro 版本(利用并行测试时计算)在安全结果上通常与标准版 GPT-5.5 具有强代理性,但在某些情况下会单独评估,因为设置可能显著影响相关风险或适当的安全防护姿态。系统卡中描述的结果均来自离线评估环境。 此次发布伴随一系列安全相关博文,包括加速网络防御生态系统、下一代网络防御的可信访问等,体现了 OpenAI 在安全与能力平衡上的持续投入。

OpenAI6个月前原文

OpenAI Academy 最新教程详细介绍了 Codex 的自动化功能,允许用户通过设定计划和触发器,让 AI 代理自动执行周期性任务,如生成周报、创建晨间简报、检查数据更新等。该功能使 Codex 从被动响应转变为主动工作,大幅提升工作效率。 ## 核心机制:计划与触发器 Codex 自动化的核心是**计划(Schedule)**和**触发器(Trigger)**。用户只需定义任务执行的时间或事件条件,Codex 便会在指定时刻自动运行,并将结果呈现给用户审阅。例如,你可以设置一个**每周五的周报自动化**,或是一个**每日清晨的工作回顾**。 ## 典型应用场景 自动化特别适合以下重复性工作: - **周期性报告**:每周工作总结、项目状态更新 - **信息汇总**:昨日工作简报、新增文件摘要 - **数据维护**:清理每周数据导出、检查数据一致性 - **持续追踪**:返回同一对话,基于已有上下文继续任务 例如,你可以这样设置自动化指令: > “每周一早上,回到这个对话,根据我当前的笔记、草稿和优先级,帮我规划本周工作。” 或者: > “每周五,回顾我本周的工作,写一份简短总结:完成了什么、还有什么未完成、下周需要关注什么。” ## 使用建议 官方建议,在创建自动化前,先与 Codex 进行多轮对话,精确定位所需的行为和输出格式。一旦确认,即可将任务转化为自动化规则。 **注意**:如果是在本地运行 Codex,自动化功能需要笔记本电脑保持唤醒且 Codex 处于运行状态。 ## 行业背景 随着 AI 代理(AI Agent)概念的兴起,从被动问答到主动执行是行业重要趋势。Codex 的自动化功能正是这一趋势的体现——它不再仅仅是“回答问题”的工具,而是能**自主规划并执行工作流**的数字助手。对于知识工作者而言,这意味着可以将大量重复性、规则明确的任务交给 AI,从而聚焦于更高价值的创造性工作。 OpenAI Academy 同时提供了《如何开始使用 Codex》《Codex 是什么?》《Codex 在工作中的十大用途》等系列教程,帮助用户系统掌握这一能力。

OpenAI6个月前原文

OpenAI 近日发布了 Codex 平台的两项核心功能——**插件(Plugins)** 与 **技能(Skills)**,旨在让 AI 代理更精准地执行特定任务,并深度融入用户已有的工具与工作流程。 ## 插件:连接外部工具 插件使 Codex 能够与 Google Drive、邮箱等外部数据源交互,用户无需手动复制粘贴即可让 AI 直接引用关联信息。在 Codex 界面左上角选择“插件”,即可浏览推荐或已安装的插件库,或创建自定义插件。创建插件通常需要一定的技术能力,但使用门槛较低。 ## 技能:固化团队最佳实践 技能则更像一份“操作手册”,教会 Codex 按照用户、团队或公司的特定方式完成任务。例如,不同公司编写新闻稿的格式可能截然不同,而技能可以让 Codex 自动遵循这些内部规范,无需每次重复解释。常见应用场景包括: - 按团队标准格式撰写公司新闻稿 - 准备客户账户简报 - 将会议笔记转换为项目计划格式 - 按品牌语言审核对外沟通内容 - 按固定流程提取账户数据并生成周报 要使用技能,同样在左上角“插件”菜单中进入。创建技能比创建插件更简单,用户可直接让 Codex 引导完成。在对话中,通过输入 `$` 并选择技能名称即可调用,例如:`$customer-update 使用此文件夹中的笔记和文件创建本周客户更新`。 ## 插件 vs 技能:一图看懂 | 功能 | 插件 | 技能 | |------|------|------| | 目的 | 连接外部工具和数据 | 定义任务执行流程 | | 创建难度 | 较高(需技术知识) | 较低(可对话引导) | | 典型场景 | 读取 Google Drive 文件、查询邮箱 | 按固定格式生成报告、审核内容 | ## 行业视角 在 AI 代理(Agent)竞争日益激烈的当下,OpenAI 通过插件与技能的组合,正在将 Codex 从单纯的对话助手升级为可定制的工作流引擎。这一策略与微软 Copilot 的“技能”生态、Anthropic 的“工具使用”功能形成直接竞争。对于企业用户而言,技能的低代码创建方式降低了 AI 落地的门槛,而插件的开放性则保证了与现有工具链的兼容。可以预见,**“技能市场”** 或将成为下一个 AI 平台争夺的焦点。

OpenAI6个月前原文

OpenAI 的 Codex 不仅能写代码,还能成为你工作中的得力助手。本文基于 OpenAI Academy 最新发布的指南,整理了 **10 个实用场景**,涵盖自动化任务、生成交付物、整合多工具信息等,帮助你将想法快速转化为行动。 ## 1. 打造你的“每日参谋长” 每天早晨,你需要在日历、消息、邮件和笔记之间来回切换,才能理清当天最重要的事。Codex 可以自动整合这些信息,生成一份清晰的简报,让你**从“救火”转向“主动规划”**。 **尝试这个提示词:** > 设置一个工作日简报,从早晨开始持续监测。每天开始,查看今日日历、过去 24 小时的未读私信和提及、过去 24 小时的未读邮件、我的待办清单以及影响今日的其他上下文。生成一份简报,包含优先级、会议准备、需要回复的消息、我欠下的决策以及有用的周知信息。之后每小时检查一次,直到下班,仅在有变化或需要行动时更新。 **如何个性化:** 替换你的实际工具和待办来源,设定简报开始时间和检查频率,并指定 Codex 何时草拟回复。 ## 2. 自动生成会议纪要与待办 一次会议结束后,整理纪要和待办事项往往比会议本身更耗时。Codex 能**根据会议录音或文字记录**,提取关键决策、行动项和负责人,并自动同步到你的项目管理工具中。 ## 3. 快速创建仪表盘与报告 无需手动拉取数据、制作图表。只需告诉 Codex 你需要的数据源和指标,它就能**自动生成可视化仪表盘**,并定期更新。无论是销售周报还是团队进度看板,都能一键搞定。 ## 4. 智能邮件分类与回复 Codex 可以扫描你的收件箱,**按优先级、主题或发件人分类**,并针对常见问题(如会议邀请、进度询问)起草回复。你只需确认或微调后发送,大幅减少邮件处理时间。 ## 5. 跨工具工作流自动化 将 Codex 与 Slack、Google Drive、Notion 等工具连接,**构建跨平台的工作流**。例如:当 Slack 中有人提及某个关键词时,自动在 Google Docs 中创建页面并通知相关人员。 ## 6. 代码审查与调试助手 开发者可以粘贴代码片段,让 Codex 检查潜在错误、提出优化建议,甚至**自动生成测试用例**。它还能理解上下文,指出代码与项目规范不符之处。 ## 7. 生成演示文稿初稿 输入主题和要点,Codex 就能**生成包含标题、要点和备注的幻灯片草稿**。你只需调整设计风格和细节,即可快速产出专业演示文稿。 ## 8. 简历与职位描述定制 招聘时,Codex 可以根据岗位要求**优化职位描述**,并协助筛选简历。求职者也可以使用它来**针对特定岗位调整简历和求职信**,突出匹配的技能。 ## 9. 学习与知识库构建 Codex 可以从你提供的文档、网页或笔记中提取知识,**自动生成问答对、摘要或学习卡片**。对于团队来说,它可以维护一个持续更新的内部维基或 FAQ。 ## 10. 个性化日程规划 结合你的日历、任务列表和习惯,Codex 可以**智能安排深度工作时间、会议和休息**,避免冲突,并提醒你预留缓冲时间。 ## 小结 以上只是 Codex 在工作场景中的一部分应用。关键在于**将重复性、信息整合类任务交给 AI**,让自己专注于创造性决策和人际沟通。OpenAI 也提供了详细的提示词模板和个性化指南,帮助用户根据自身需求定制。 未来,随着 Codex 与更多工具深度集成,这类“AI 代理”将成为每个职场人的标配——不是取代工作,而是**重新定义我们如何工作**。

OpenAI6个月前原文

OpenAI 近日通过其 Academy 平台发布了一篇关于 **Codex** 的深度介绍文章,清晰地定义了这款 AI 产品的定位:**它不是一个聊天机器人,而是一个能接手实际工作的 AI 智能体**。文章明确指出,ChatGPT 擅长的是“帮你思考工作”,而 Codex 则专注于“帮你推进工作”——两者形成互补,而非替代关系。 ### 核心定位:从“对话”到“执行” Codex 的设计初衷是**超越单次问答**,处理那些需要跨文件、跨工具、跨重复流程的复杂任务。用户无需具备编程背景即可使用,因为它的能力不仅限于代码生成,而是扩展到**文档、幻灯片、电子表格**等常见办公产出的自动化创建与更新。文章特别强调,Codex 并非要取代用户的判断力,而是像一个“第一天上班、充满干劲的助理”——速度快、效率高,但需要你指明方向,并在最终成果出炉前进行审核。 ### 典型应用场景 文章列举了 Codex 能够胜任的多种实际工作场景,例如: - **信息整合**:从邮件、Slack、笔记和仪表盘中提取数据 - **内容生成**:根据素材自动制作幻灯片 - **日常管理**:创建数字助手来规划日程 - **快速原型**:构建简单的仪表盘、落地页甚至可运行的应用程序 - **工作流修复与自动化**:修复有问题的流程、批量更新文件、自动化繁琐的重复任务 ### 行业背景与意义 在 AI 行业从“对话式助手”向“自主执行体”快速演进的当下,Codex 的定位恰好卡在了关键节点上。此前,GPT 系列模型虽然能生成代码或文本,但用户仍需手动复制、粘贴、整合到具体工具中。Codex 则试图**打通 AI 与现有工具链之间的最后一公里**,让 AI 真正“动手干活”。 这一策略也与 Anthropic 的 Claude(强调长文档处理与工作流集成)以及微软 Copilot(深度绑定 Office 生态)形成了差异化竞争。Codex 不局限于某个特定软件,而是以“智能体”形态灵活连接多种工具,这在一定程度上降低了用户的使用门槛,也拓宽了 AI 在办公自动化领域的想象空间。 ### 小结 对于正在探索如何将 AI 融入日常工作的用户而言,Codex 提供了一个明确的思路:**把重复性、多步骤的任务交给它,而自己专注于决策与创新**。正如 OpenAI 所建议的:“当你想找人帮你思考时,用 ChatGPT;当你想找人帮你推进工作时,用 Codex。” OpenAI Academy 还同步推出了《如何开始使用 Codex》《Codex 在工作中的十大用途》等配套指南,帮助用户更快上手。

OpenAI6个月前原文

OpenAI 今日发布 Codex 入门指南,帮助用户快速上手这款 AI 编程与任务自动化工具。指南从下载桌面应用开始,逐步讲解创建线程、设置项目、配置权限以及完成首个任务的全流程。 ## 第一步:下载与登录 首先,从 OpenAI 官网下载 Codex 桌面应用,并使用你的 ChatGPT 账户登录。启动应用后,你会看到左侧边栏和主工作区。左侧边栏用于管理项目和对话历史,主工作区则显示当前线程及与 Codex 协作的聊天界面。 ## 创建项目:连接本地文件夹 Codex 的核心概念是“项目”,每个项目对应你电脑上的一个文件夹。建议在电脑上创建一个名为 `Codex` 的根文件夹,再为每个具体任务建立子文件夹。如果你希望 Codex 处理特定文件,只需将它们拖入对应文件夹;如果文件夹为空,Codex 会在此处生成新文件。 ## 选择任务与模型 对于初学者,推荐从简单任务开始,例如整理笔记、清洗小型数据集或对比两份文档草稿。Codex 默认使用推荐模型,遇到更复杂的问题时可手动切换到高推理能力模型。 ## 权限设置:安全第一 在项目模式下,输入框下方会显示“Work locally”标识,表示 Codex 只能在你指定的文件夹内操作。权限下拉菜单提供“默认权限”和“完整权限”两个选项。**默认权限**将 Codex 限制在项目文件夹内,适合入门;**完整权限**允许 Codex 访问系统更多资源,适合高级任务,但需谨慎使用并征得管理员同意。 ## 第一个提示词 官方推荐的首个提示词如下: > 检查这个文件夹,告诉我你看到了什么。然后建议一个可以安全完成的小任务。在我批准之前,不要做任何更改。 通过这种“询问-批准”模式,你可以逐步建立对 Codex 的信任,再逐步分配更大任务。 ## 持续学习 OpenAI Academy 还提供更多 Codex 相关课程,包括“什么是 Codex?”、“自动化”等主题,帮助用户深入掌握 AI 工具的实际应用。

OpenAI6个月前原文

OpenAI 在 Codex 中引入了丰富的设置选项,帮助用户根据个人需求定制工作流程。本文将带你了解如何通过调整个性化、防止睡眠、详细程度和外观等关键设置,让 Codex 更高效、更少干扰地为你服务。 ## 快速上手核心设置 对于初次使用 Codex 的用户,建议优先关注以下四个设置项,它们能显著改善使用体验: - **个性化(Personalization)**:与 ChatGPT 的个性化功能类似,你可以选择 Codex 的沟通风格——是友好亲切还是直接高效。同时,还可以添加自定义指令,让 Codex 更贴合你的工作习惯。 - **防止睡眠(Prevent sleep while running)**:位于“General”设置中。启用后,Codex 在执行长时间任务时会让电脑保持唤醒状态,避免因系统休眠导致任务中断。 - **详细程度(Detail level)**:控制 Codex 在工作时显示的信息量。**Coding 模式**会展示正在执行的具体命令,适合需要调试或监控细节的场景;如果信息过多,切换回 **Default 模式**可以让对话界面更简洁。 - **外观(Appearance)**:在“Avatar”选项中,你可以为 Codex 设置一个友好的虚拟形象。它会浮动在屏幕上,让你在切换窗口时也能随时了解任务进度。点击头像即可快速返回 Codex 界面。 ## 灵活调整,循序渐进 OpenAI 强调,用户无需掌握所有设置后再开始使用 Codex。**建议从上述核心设置入手,保持权限的保守设置,随着对任务类型的熟悉再逐步调整**。这种渐进式的学习路径既能降低上手门槛,又能确保安全性和效率。 ## 持续学习与资源 Codex 的设置只是 OpenAI Academy 系列教程的一部分。该平台还提供了“如何开始使用 Codex”、“什么是 Codex?”以及“自动化”等专题指南,帮助用户系统性地掌握 AI 编程技能。无论你是开发者还是 AI 爱好者,都可以通过这些资源将 Codex 融入日常工作中。 > 小贴士:Codex 的设置入口位于界面左下角的菜单中。首次使用时,不妨花几分钟调整这些选项,你会发现 AI 助手的工作方式可以如此贴合你的节奏。

OpenAI6个月前原文

聚变能有望成为未来稳定、零排放的电力来源——前提是相关公司能够建成并运营聚变电站。但一项新研究指出,即使那一天到来,聚变能也可能并不便宜。 技术通常会随着时间推移而降价,但不同技术的降价速度差异显著。锂离子电池自 2013 年以来成本下降了约 90%,而历史上风电、太阳能和电池的“经验率”(即产能每翻一倍时成本下降的百分比)分别为 12%、23% 和 20%。相比之下,核裂变仅为 2%。 发表于《自然·能源》的新研究试图通过估算聚变能的经验率来预测其未来价格。研究团队考察了三个关键特征:单元规模、设计复杂度和定制化需求。规模越大、复杂度越高、定制化需求越强,经验率通常越低。 研究人员采访了聚变领域专家,请他们基于上述特征对聚变电站进行评估,并据此预测经验率。研究主要聚焦于磁约束和激光惯性约束两种主流路线,它们占据了目前绝大部分研发投入。 结果显示,聚变电站规模较大(类似煤电或裂变电站),定制化需求可能低于裂变(因监管和安全更简单),但仍高于部分技术。综合来看,预计聚变能的经验率较低,成本下降速度可能远慢于太阳能和电池。 这意味着,即便聚变技术实现商业化,其发电成本可能仍高于其他清洁能源,难以成为“太便宜的”电力。研究提醒,在投入巨额公共与私人资金时,需审慎评估对聚变能经济性的假设。

MIT Tech6个月前原文

OpenAI 于 2026 年 4 月 23 日通过 Academy 发布了 Codex 的详细使用指南。Codex 是一款面向开发者的智能工作台,核心设计理念是将 ChatGPT 式的对话能力与本地文件操作相结合,让用户通过自然语言驱动代码生成、文件编辑和任务自动化。 ## 工作区概览 打开 Codex,你会看到四个核心区域:**侧边栏菜单**、**项目区**、**设置**和**聊天窗口**。侧边栏用于在对话线程、项目和工具之间导航;项目用于组织工作,每个项目对应电脑上的一个文件夹,Codex 仅对该文件夹内的文件进行修改;设置则控制权限、个性化以及是否允许电脑休眠时继续运行任务。 ## 线程与项目 在 Codex 中,“线程”相当于 ChatGPT 中的“对话”。你可以创建独立线程,也可以将线程嵌套在项目中。新建线程时,可选择关联已有项目、创建新项目或保持为独立对话。搜索功能可查找历史任务和项目。插件(Plugins)能扩展 Codex 的能力,例如执行重复流程或连接外部工具。 项目是 Codex 的核心组织单元。每个项目绑定一个本地文件夹,Codex 只会在该文件夹内创建或修改文件。项目文件夹初始可以空置,新建文件会自动存入该文件夹。 ## 聊天窗口与操作 Codex 的聊天窗口与 ChatGPT 类似,支持自然语言交互。你不需要完美的提示词或技术指令,只需告诉 Codex 你想要什么、使用哪些文件、以及“完成”的标准。关键区别在于 Codex **可以执行动作**——根据任务和权限,它能检查文件、创建新文件、编辑文档、整理信息或构建完整项目。 注意:如果电脑进入休眠状态,Codex 可能会停止运行。对于耗时任务,可在设置中调整休眠权限。如果中途忘记交代细节,也无需中止 Codex,随时补充即可。 ## 小结 Codex 通过对话式界面降低了自动化工作流的门槛。对于开发者而言,它不仅是一个代码助手,更是一个**可执行任务的项目管家**。结合项目隔离和插件系统,Codex 有望成为本地开发环境中的智能协作中枢。

OpenAI6个月前原文

## 热力学推理能力评估新基准发布:ThermoQA 近日,研究人员推出了名为 **ThermoQA** 的基准测试,专门用于评估大型语言模型在工程热力学领域的推理能力。该基准包含 **293个开放式问题**,分为三个层级:属性查找(110题)、组件分析(101题)和完整循环分析(82题)。 ### 基准设计特点 - **三层递进结构**:从简单的属性查询到复杂的系统分析,逐步考察模型的深层推理能力。 - **程序化生成真值**:使用 **CoolProp 7.2.0** 计算标准答案,涵盖水、R-134a制冷剂和变比热空气三种工质。 - **自然区分场景**:超临界水、R-134a制冷剂和联合循环燃气轮机分析等场景成为区分模型能力的“试金石”,性能差距可达40-60个百分点。 ### 六大前沿模型表现 研究团队对六款前沿大语言模型进行了三轮独立测试,综合排行榜显示: 1. **Claude Opus 4.6**:94.1% 2. **GPT-5.4**:93.1% 3. **Gemini 3.1 Pro**:92.5% ### 关键发现 **跨层级性能下降明显**:从属性查找到完整循环分析,模型性能普遍下降。下降幅度从Claude Opus的2.8个百分点到MiniMax的32.5个百分点不等。这表明**单纯记忆属性数据并不等同于真正的热力学推理能力**。 **推理一致性成为新评估维度**:通过多轮测试计算标准差(σ),模型的表现稳定性差异显著,范围从±0.1%到±2.5%。这为评估模型推理的可靠性提供了量化指标。 ### 对AI行业的意义 ThermoQA的发布填补了专业工程领域评估基准的空白。传统基准多关注通用知识或编程能力,而热力学这类需要复杂物理推理的领域长期缺乏系统评估工具。 **数据集和代码已开源**,为后续研究提供了可复现的基础。这有助于推动大语言模型在工程、物理等专业领域的应用落地,也为模型能力的细粒度评估提供了新思路。 ### 未来展望 随着AI向专业领域渗透,类似ThermoQA的专项基准将越来越重要。它不仅能够帮助开发者了解模型在特定领域的真实能力边界,还能为模型优化提供明确方向。热力学推理只是开始,未来可能会有更多工程、科学领域的专项评估基准出现,推动AI向更深层次的推理能力发展。

Anthropic6个月前原文

在反洗钱(AML)领域,交易监控系统每天都会产生海量警报,调查员必须在严格的审计和监管约束下快速进行分诊处理。大语言模型(LLMs)虽然能够汇总异构证据并草拟推理过程,但在受监管的工作流程中,不受约束的生成存在风险——包括幻觉、来源追溯性弱以及解释与底层决策不一致等问题。 近期,一篇题为《Explainable AML Triage with LLMs: Evidence Retrieval and Counterfactual Checks》的论文提出了一种创新的可解释AML分诊框架,将分诊视为一个证据约束的决策过程。该研究由Dorothy Torres、Wei Cheng和Ke Hu共同完成,旨在解决LLMs在合规敏感场景中的应用难题。 ## 核心方法:三管齐下提升可解释性与可靠性 该框架融合了三个关键组件,共同构建了一个更安全、更透明的决策支持系统: 1. **检索增强的证据整合**:系统并非让LLM自由发挥,而是主动从多个结构化来源检索证据,包括**政策/类型学指南、客户背景信息、警报触发因素以及交易子图**。这确保了决策基于具体、可追溯的数据,而非模型的内在知识或臆测。 2. **结构化的LLM输出契约**:要求模型在输出中必须包含**明确的引用**,并将证据清晰分类为**支持性、矛盾性或缺失性**。这种结构化输出强制模型“展示其工作过程”,极大增强了审计的便利性和解释的可信度。 3. **反事实检查验证**:这是该框架的亮点。系统会进行“如果-那么”式的推演,验证当对输入证据进行最小、合理的扰动时,分诊建议及其推理是否会发生连贯、合理的变化。这有效检验了模型决策的逻辑一致性和鲁棒性。 ## 性能评估:在合规与效能间取得平衡 研究团队在公开的合成AML基准测试和模拟器上进行了评估,对比了传统规则系统、表格与图机器学习基线,以及纯LLM或纯检索增强生成(RAG)的变体。 **结果显示,该综合框架取得了最佳的整体分诊性能**(PR-AUC 0.75;升级警报F1分数 0.62)。更重要的是,在可解释性和合规性关键指标上表现突出: * **证据基础**显著提升了可审计性,减少了数值和政策层面的幻觉错误。 * **来源与忠实度指标**强劲:引用有效性达0.98,证据支持度0.88。 * **反事实验证**进一步提升了决策关联的可解释性和鲁棒性,反事实忠实度达到0.76。 ## 行业意义:为AI在金融合规领域落地指明方向 这项研究的意义超越了AML分诊本身,为**大语言模型在高度监管行业(如金融、医疗、法律)的负责任应用**提供了一个可操作的范本。它证明,通过巧妙的系统设计——将LLM的推理能力与严格的证据约束、结构化输出和逻辑验证相结合——可以构建出既强大又可信的AI辅助决策系统。 **关键在于,这种方法没有牺牲合规性对可追溯性和可辩护性的核心要求**,反而通过增强透明度和验证机制来满足甚至超越这些要求。随着全球对AI监管的日益加强,这种“治理先行、可验证”的LLM系统设计思路,很可能成为企业将前沿AI技术安全融入核心风控与合规流程的关键。 ## 小结 总而言之,这项研究展示了一条切实可行的路径:利用大语言模型处理复杂、非结构化的金融合规数据,同时通过**证据检索、结构化输出和反事实检查**三重保障,牢牢守住准确性、可解释性和合规性的底线。这不仅是AML领域的进步,更是AI赋能严肃商业应用的一次重要示范。

Anthropic6个月前原文

## 临床试验剂量错误检测迎来AI新突破 临床试验对用药方案有着极其严格的要求,但剂量错误仍然是影响患者安全和试验完整性的一个持续挑战。传统的人工审核方式不仅效率低下,还容易因疲劳或疏忽而遗漏关键错误。现在,一项基于人工智能的新研究为这一问题提供了自动化解决方案。 ### 多模态特征工程:融合传统与前沿技术 这项研究提出了一种**自动检测系统**,专门用于从非结构化的临床试验叙述中识别剂量错误。系统的核心在于其**全面的多模态特征工程方法**,共提取了**3,451个特征**,覆盖了多个层面: - **传统自然语言处理(NLP)特征**:如TF-IDF(词频-逆文档频率)和字符n-grams,用于捕捉文本的表层统计信息。 - **密集语义嵌入**:采用**all-MiniLM-L6v2**模型生成句子的语义向量,以理解文本的深层含义。 - **领域特定医学模式**:针对临床试验文本设计的专业特征,用于识别与剂量相关的特定表述和模式。 - **基于Transformer的评分**:利用**BiomedBERT**和**DeBERTa-v3**等预训练模型,获取更精准的上下文表示。 这些特征从九个互补的文本字段中提取,确保了覆盖的全面性。研究团队在包含**42,112份临床试验叙述**的数据集上进行了验证,平均每个样本约5,400个字符。 ### 模型性能与关键发现 研究使用了**LightGBM**(一种高效的梯度提升框架)来训练分类模型。在**CT-DEB基准数据集**上,该系统面临严峻的类别不平衡挑战——阳性样本(即存在剂量错误)仅占**4.9%**。尽管如此,通过5折集成平均,模型在测试集上取得了**0.8725的ROC-AUC值**(交叉验证结果为0.8833 ± 0.0091),显示出强大的识别能力。 **系统性的消融研究**揭示了几个关键洞察: 1. **句子嵌入至关重要**:移除句子嵌入特征会导致性能最大幅度的下降(**2.39%**),尽管其在总特征重要性中仅贡献了**37.07%**。这表明语义理解在错误检测中扮演着不可替代的角色。 2. **特征选择优于全特征集**:分析发现,选择**前500-1000个最重要的特征**,模型性能反而更优(AUC达到0.886-0.887),超过了使用全部3,451个特征时的表现(0.879 AUC)。这凸显了**特征选择作为一种正则化技术**的有效性,能够有效减少噪声,提升模型泛化能力。 3. **稀疏与密集特征的互补性**:在严重的类别不平衡下,稀疏的词汇特征(如传统NLP特征)与密集的语义表示(如嵌入向量)形成了良好的互补,共同提升了分类效果。 ### 行业意义与未来展望 这项研究不仅为临床试验的自动化质量监控提供了实用工具,更在方法论上对AI在医疗文本分析中的应用提供了重要参考。它证实了在专业领域(如临床文本)和挑战性场景(如严重类别不平衡)下,精心设计的**多模态特征工程**与**智能特征选择**相结合,能够显著提升模型性能。 该论文已被**CL4Health 2026(LREC26会议)** 接收,标志着其在计算语言学和健康信息学交叉领域获得了学术认可。随着AI在医疗合规、药物安全等领域的深入应用,此类技术有望成为保障临床试验数据质量、加速新药研发流程的关键基础设施之一。 **小结**:本研究成功开发了一个基于LightGBM和多模态特征的自动化系统,能有效检测临床试验叙述中的剂量错误。其核心价值在于通过融合传统与前沿NLP技术,并利用特征选择优化模型,在严重不平衡的数据上实现了高精度检测,为AI赋能医疗文本分析树立了新的范例。

Anthropic6个月前原文

## 大语言模型的新挑战:工具过度使用现象 在人工智能领域,为大型语言模型(LLM)配备外部工具已成为提升其推理能力的常见策略。这些工具能够弥补模型内部知识的不足,处理复杂计算、实时信息查询等任务。然而,一项最新研究揭示了一个被忽视的严重问题:**工具过度使用**。这种现象指的是LLM在推理过程中不必要地调用外部工具,即使模型自身已具备相关知识或能力。 研究团队通过实验发现,工具过度使用在多种主流LLM中普遍存在,这不仅增加了计算成本和延迟,还可能影响推理的准确性和效率。 ## 两大核心机制解析 ### 1. 知识认知幻觉 研究人员通过分析模型在不同内部知识可用性区域的行为,识别出所谓的“**知识认知幻觉**”。简单来说,模型错误判断了自己的知识边界,无法准确感知哪些问题可以依靠内部知识解决,哪些需要借助外部工具。 这种幻觉导致模型倾向于“保守”策略——即使内部知识足够,也优先调用工具,以避免因知识不足而犯错的风险。 **解决方案**:研究团队提出了一种基于直接偏好优化的知识感知认知边界对齐策略。该方法通过训练让模型更准确地评估自身知识状态,从而减少不必要的工具调用。实验结果显示,这一策略将工具使用量降低了**82.8%**,同时推理准确性还有所提升。 ### 2. 奖励结构的因果影响 第二个关键发现涉及训练过程中的奖励机制。研究团队通过可视化工具增强训练过程,建立了奖励结构与工具使用行为之间的因果关系。 他们发现,传统的“**仅结果奖励**”机制(即只根据最终答案的正确性给予奖励)无意中鼓励了工具过度使用。因为在这种机制下,模型只要通过工具获得正确答案就能获得奖励,而不考虑工具调用的效率或必要性。 **改进方案**:研究团队尝试在训练中平衡奖励信号,不再单纯依赖结果奖励。例如,引入对工具使用效率的评估,或对不必要的工具调用进行轻微惩罚。实验表明,这种方法在7B和32B参数规模的模型上,分别将不必要的工具调用减少了**66.7%** 和 **60.7%**,且未牺牲准确性。 ## 行业意义与未来展望 工具过度使用现象的揭示,对AI开发者和研究者具有重要启示: - **效率优化**:减少不必要的工具调用可以显著降低推理成本和时间,对于部署在资源受限环境(如边缘设备)的模型尤为重要。 - **可靠性提升**:过度依赖外部工具可能引入新的错误源(如工具故障、数据延迟),优化工具使用策略有助于提高整体系统的稳定性。 - **训练策略反思**:这项研究提醒我们,训练LLM时不能只关注最终性能指标,还需考虑推理过程的合理性和效率。 未来,如何设计更智能的工具调用机制,让模型在“自信”时使用内部知识,在“不确定”时合理求助外部工具,将成为LLM能力进化的重要方向。这不仅需要技术层面的创新,也可能涉及对模型认知能力的更深层次理解。 ## 小结 工具过度使用是LLM发展中的一个新兴挑战,它源于模型对自身知识的错误判断和训练奖励机制的偏差。通过知识边界对齐和奖励结构优化,研究者已展示了显著改善的可能性。随着AI应用场景的不断扩展,平衡内部能力与外部工具的使用,将成为构建更高效、更可靠智能系统的关键一环。

Anthropic6个月前原文

随着生成式AI在科研、教育和专业工作中快速渗透,一个核心矛盾日益凸显:**当前治理框架无法有效评估AI辅助产出在学习密集型场景中的价值**。一篇题为《AI to Learn 2.0:面向学习密集型领域不透明AI的可交付成果导向治理框架与成熟度评估体系》的论文,于2026年3月16日提交至arXiv,提出了一个旨在解决这一问题的系统性方案。 ## 核心问题:代理失效 论文开篇即指出,生成式AI的广泛应用带来了“**代理失效**”的挑战。在学习密集型领域(如教育、研究、专业培训),工作成果传统上被视为衡量个人理解、判断或迁移能力(即能够将知识应用于新情境)的证据。然而,AI可以生成高度“抛光”的成果——这些成果本身可能有用,却**无法再可信地证明背后的人类是否真正掌握了相关能力**。 例如,一篇由AI代笔但经过学生轻微修改的论文,可能获得高分,但这无法证明学生具备了相应的研究和写作能力。这种“成果”与“能力”的脱节,是现有评估和治理体系面临的重大漏洞。 ## AI to Learn 2.0 框架的核心设计 该论文提出的 **AI to Learn 2.0 框架**,其创新之处并非在于提出全新的孤立概念,而是**围绕“最终可交付成果包”**,对现有相关理念进行重组,并构建了一套可操作的治理工具。框架的核心是区分两种“残留”: * **成果残留**:指最终提交物中直接来自AI生成或辅助的部分。 * **能力残留**:指在完成工作的过程中,人类实际获得或展现出的理解、判断和迁移能力。 框架的目标不是禁止使用AI,而是确保**能力残留**得到恰当的体现和评估。 ## 框架的四大操作化组件 为了将理念落地,AI to Learn 2.0 框架包含了四个关键的操作化组件: 1. **五部分可交付成果包**:要求最终提交的成果是一个结构化组合,而不仅仅是最终“作品”。 2. **七维度成熟度评估体系**:用于评估AI辅助工作流程的成熟度水平,涵盖了从依赖度到可审计性等多个方面。 3. **关键维度门槛阈值**:在成熟度评估体系的某些关键维度上设置最低要求,作为工作流程是否“可接受”的关卡。 4. **配套的能力-证据阶梯**:一个辅助工具,用于将抽象的人类能力(如批判性思维)与具体、可观察的证据联系起来。 ## 核心原则:开放过程,严控交付 AI to Learn 2.0 框架采取了一种务实且分阶段的管理思路: * **在探索、起草、假设生成和工作流设计阶段,允许使用不透明的AI(如闭源大模型或云API)**。这承认了AI在这些环节提高效率、激发创意的价值。 * **但对最终发布的可交付成果提出了严格要求**:它必须能够在**脱离原大模型或云API**的情况下,满足以下条件: * **可用**:成果本身是完整、可用的。 * **可审计**:其产生过程和决策依据可以被追溯和审查。 * **可迁移**:相关的知识和技能可以清晰地传递给他人。 * **可论证**:成果的合理性和价值可以被清晰地解释和辩护。 此外,**在学习密集型场景中,框架还额外要求提供与情境相适应的、可归因于人类的解释或迁移能力证据**。这直接针对“代理失效”问题,确保评估指向的是人的成长,而非工具的产出。 ## 应用示例与价值 论文通过多个对比案例展示了该框架如何区分不同类型的工作流: * **简单的课程作业替代**(用AI生成答案提交)会被识别为低成熟度、高风险的“抛光替代工作流”。 * 而像**教师审核的国家考试模拟表格**、或**具备确定性质量控制的、自托管的从讲座到测验的生成管道**等,则可能被评估为**有界的、可审计的、且准备好交接的AI辅助工作流**。 这些案例表明,该框架能够有效辨别哪些AI使用是“走捷径”,哪些是构建了可持续、负责任且真正增强人类能力的工作体系。 ## 行业意义与定位 AI to Learn 2.0 被定位为一个**治理工具**,旨在支持需要进行结构化第三方评审的场景。它特别适用于那些**能力保持、问责制和有效性边界至关重要**的领域,例如: * **学术机构**:用于制定课程作业、学位论文的AI使用政策。 * **专业认证机构**:用于评估继续教育或资格认证中的AI辅助项目。 * **企业研发与培训部门**:用于管理内部知识创新和技能培训项目,确保核心能力不因过度依赖AI而流失。 ## 小结 这篇论文提出的AI to Learn 2.0框架,是对生成式AI时代学习与评估范式挑战的一次深刻回应。它没有采取“一刀切”的禁止或放任,而是通过一套精细化的、以最终可交付成果为核心的治理体系,试图在**利用AI提升效率**与**保障人类能力真实发展**之间找到平衡点。随着AI更深地融入知识生产核心环节,此类聚焦于过程治理与证据链的框架,或将成为教育、科研及专业领域不可或缺的“基础设施”。

Anthropic6个月前原文

在AI算法应用日益复杂的今天,如何为特定问题自动选择最优算法一直是计算科学领域的核心挑战。传统方法通常依赖人工设计的特征和大量领域知识,这不仅耗时费力,还限制了方法的通用性。近日,一项名为**ZeroFolio**的新研究提出了一种革命性的解决方案——完全基于预训练文本嵌入的算法选择方法,实现了“零领域知识”的突破。 ## 方法原理:三步流程实现通用选择 **ZeroFolio**的核心创新在于完全摒弃了传统的手工特征工程。其工作流程简洁而高效: 1. **文本序列化**:将问题实例的原始文件(如SAT、MaxSAT等问题的描述文件)作为纯文本读取 2. **嵌入生成**:使用预训练的文本嵌入模型将文本转换为向量表示 3. **算法选择**:通过加权k近邻算法,基于嵌入向量的相似度选择最合适的算法 这种方法的关键洞察在于:**预训练嵌入模型能够自动捕捉问题实例的语义特征**,即使没有任何特定领域的训练数据,也能有效区分不同问题类型。这使得同一套流程可以跨多个问题领域应用,只要实例格式是基于文本的。 ## 实验验证:性能全面超越传统方法 研究团队在**11个ASlib场景**上进行了全面评估,覆盖了7个不同领域: - 布尔可满足性问题(SAT) - 最大可满足性问题(MaxSAT) - 量化布尔公式(QBF) - 答案集编程(ASP) - 约束满足问题(CSP) - 混合整数规划(MIP) - 图问题 实验结果令人印象深刻: - 在**11个场景中的10个**,ZeroFolio使用单一固定配置就超越了基于手工特征的随机森林方法 - 采用双种子投票机制时,**在所有11个场景中都取得了优势** - 性能提升幅度通常相当显著 ## 技术细节:关键设计选择 通过消融研究,研究人员确定了几个关键的设计选择对性能至关重要: - **逆距离加权**:在k近邻投票中,给更相似的邻居分配更高权重 - **行洗牌**:对文本行进行随机重排,增强模型的鲁棒性 - **曼哈顿距离**:作为相似度度量,相比欧氏距离表现更优 值得注意的是,在两种方法都表现良好的场景中,**将嵌入特征与手工特征通过软投票结合**还能带来进一步的性能提升,这表明两种方法可以互补。 ## 行业意义与未来展望 这项研究代表了算法选择领域的一个重要范式转变。传统上,为每个新问题领域开发算法选择器需要大量的领域专家参与和特征工程工作。ZeroFolio的方法则提供了一种**通用、可扩展的解决方案**,大大降低了应用门槛。 在AI模型部署和优化日益重要的今天,这种方法具有广泛的应用前景: - **自动化机器学习(AutoML)**:为不同数据集自动选择最佳机器学习算法 - **优化问题求解**:为工业优化问题选择最合适的求解器 - **代码生成与优化**:基于代码文本选择最佳编译优化策略 随着多模态和大型语言模型的发展,文本嵌入的质量和表达能力不断提升,类似ZeroFolio的方法有望在更多领域发挥作用。这项研究不仅展示了预训练模型的强大泛化能力,也为构建更加智能、自适应的计算系统提供了新思路。 当然,该方法目前主要适用于文本格式的问题实例,对于非文本或高度结构化数据的处理仍需进一步探索。但无论如何,**“零领域知识”的算法选择**这一理念,已经为AI系统的自动化与智能化开辟了一条值得关注的新路径。

Anthropic6个月前原文

在教育AI领域,自动评分系统能为学生提供即时、准确的反馈,但在科学解释评分中,类别不平衡问题——尤其是高级推理类别的样本稀缺——一直是技术落地的关键障碍。最近,一项研究针对基于NGSS(下一代科学标准)学习进程的物理科学评估,探索了多种数据增强与重采样策略,以提升Transformer模型对不平衡学生回答的分类性能。 ## 研究背景与挑战 该研究使用了一个包含**1,466份高中生回答**的数据集,这些回答根据一个包含11个二元分析类别的评分标准进行标注。这个标准识别了六个构成完整解释所需的重要科学思想成分,以及五个常见的不完整或不准确思想。在现实课堂中,学生回答往往集中在基础或中等水平,而体现高级推理的类别样本极少,导致模型训练时面临严重的类别不平衡,影响评分准确性和反馈质量。 ## 实验方法与策略对比 研究以**SciBERT**(一个针对科学文本预训练的BERT模型)作为基线,通过微调提升性能,并测试了三种数据增强策略: 1. **GPT-4生成合成响应**:利用大语言模型生成模拟学生回答,以扩充稀缺类别样本。 2. **EASE(词级提取与过滤方法)**:从现有数据中提取和重组词汇,生成新样本。 3. **ALP(基于词汇化概率上下文无关文法的增强)**:在短语级别进行提取和生成,保持语言结构的合理性。 此外,研究还对比了传统的过采样方法**SMOTE**,以避免过拟合并保留对学习进程对齐至关重要的新手级数据。 ## 关键发现与性能提升 实验结果显示,微调SciBERT已能提升召回率,但数据增强策略带来了更显著的性能改善: - **GPT-4生成数据**在精确率和召回率上均有提升,表明合成数据能有效模拟真实回答分布。 - **ALP增强**在类别不平衡最严重的类别(5、6、7和9)中实现了完美的精确率、召回率和F1分数,显示出短语级增强在捕捉复杂科学思想方面的优势。 - **EASE增强**在所有评分类别中都大幅提高了与人工评分的一致性,无论是科学思想类别(1-6)还是不准确思想类别(7-11)。 ## 对AI教育应用的启示 这项研究不仅证明了**针对性数据增强能有效解决严重类别不平衡问题**,同时保持了概念覆盖的完整性,为科学教育中的自动化学习进程对齐评分提供了可扩展的解决方案。在AI+教育深度融合的背景下,此类技术有助于: - **提升评分公平性**:通过平衡数据,模型能更准确地识别少数但重要的高级推理回答。 - **支持个性化学习**:即时、准确的反馈帮助学生及时调整学习策略,促进科学素养发展。 - **降低教师负担**:自动化评分系统可辅助教师进行大规模评估,释放更多时间用于教学设计。 ## 未来展望 尽管研究取得了积极成果,但在实际课堂部署中仍需考虑数据隐私、模型泛化能力以及跨学科适应性等问题。随着Transformer模型和多模态AI技术的进步,结合课程上下文和学生行为数据的综合评分系统可能成为下一步探索方向。 总之,这项研究为教育AI中的不平衡数据问题提供了实用策略,推动了智能评分工具向更精准、更公平的方向发展。

Anthropic6个月前原文

在AI系统日益复杂、部署环境充满不确定性的今天,如何确保系统在约束条件下保持稳定推理能力,已成为行业面临的关键挑战。近日,一篇题为《推理余量比:约束下推理稳定性的诊断与控制框架》的预印本论文,提出了一种名为**推理余量比(Inference Headroom Ratio, IHR)** 的新型诊断指标,旨在为AI系统的稳定性提供前瞻性的量化评估。 ## 什么是推理余量比? 传统的AI系统评估通常聚焦于输出层面的性能指标,如准确率、召回率等。然而,当系统面临**分布偏移**(即训练数据与真实环境数据存在差异)或**运行约束**(如计算资源、响应时间、安全规则等限制)时,这些指标往往无法提前预警系统可能出现的“推理崩溃”——即系统无法进行有效推理或输出变得不可靠。 **推理余量比** 的核心思想是,将系统的稳定性视为其**有效推理能力(C)** 与**环境施加的总负载(U + K)** 之间的动态平衡。其中,总负载包括**不确定性(U)** 和**约束负载(K)**。IHR是一个无量纲的比值,其计算公式可简化为: **IHR = C / (U + K)** 当IHR值较高时,意味着系统拥有充足的“余量”来应对环境扰动,推理过程相对稳定。当IHR值接近或低于某个临界阈值时,则预示着系统已逼近稳定性边界,崩溃风险显著增加。 ## 研究发现了什么? 论文通过三项受控仿真实验,系统验证了IHR的三大核心功能: 1. **可量化的风险指示器**:研究发现,IHR值与系统崩溃概率之间存在明确的逻辑关系。通过拟合曲线,研究团队估算出**临界阈值 IHR* 约为 1.19**。当IHR低于此阈值时,系统崩溃的可能性急剧上升。这为运维人员提供了一个直观的“安全红线”。 2. **对稳定性边界的敏感指示**:在环境噪声(即不确定性U)增加的条件下,IHR能够比传统性能指标更早、更敏感地反映出系统正在逼近其推理稳定性极限。这有助于实现从“事后补救”到“事前预防”的运维模式转变。 3. **可行的控制变量**:研究进一步探索了将IHR作为主动控制变量的可能性。通过主动调节系统以维持IHR在安全范围内,在300次蒙特卡洛模拟运行中,成功将**系统崩溃率从79.4%降低至58.7%**,同时将**IHR的方差减少了70.4%**。这证明了基于IHR的主动控制策略能有效提升系统鲁棒性。 ## 为何这对AI行业至关重要? 随着AI模型(尤其是大语言模型)被部署到自动驾驶、医疗诊断、金融风控、工业控制等高风险、强约束的真实场景中,系统的可靠性与安全性变得前所未有的重要。一个在测试集上表现优异的模型,可能在真实世界的未知分布和突发约束下突然失效。 **推理余量比** 的提出,为这一痛点提供了新的解决思路。它不再孤立地看待性能或不确定性,而是将它们与系统的内在能力、外部约束整合到一个统一的框架中,评估系统在“压力”下还能保持正常推理的“剩余空间”。 论文作者指出,IHR有望成为现有性能指标、漂移检测指标和不确定性度量指标的有力补充,构成一个更全面的系统级健康度监控体系。它特别适用于那些在**分布偏移**和**多重约束**下运行的AI系统,帮助开发者和运维者估算在发生明显故障前,系统还剩下多少“推理余量”。 ## 小结与展望 这项研究将AI系统的稳定性问题,从一个模糊的定性概念,推进到了可量化、可诊断、甚至可控制的阶段。**推理余量比(IHR)** 作为一个前瞻性的诊断框架,其价值在于: * **预警性**:在系统输出恶化前,提前识别风险。 * **系统性**:综合考虑了能力、不确定性和约束等多维度因素。 * **可操作性**:不仅用于诊断,还可作为控制回路的目标变量。 当然,该研究目前仍处于仿真验证阶段,其在不同类型AI系统(如判别式模型、生成式模型)、不同约束类型下的普适性,以及在实际生产环境中的部署成本与效益,仍有待进一步的探索和验证。然而,其提出的核心理念——**关注推理过程的稳定性余量,而不仅仅是输出结果**——无疑为构建更可靠、更值得信赖的AI系统指明了一个重要的技术方向。

Anthropic6个月前原文