AI Frontier Daily / 2026.05.08

OpenAI 发布 GPT-Realtime-2 与实时语音模型组

OpenAI 在 Realtime API 上线 GPT-Realtime-2、GPT-Realtime-Translate 和 GPT-Realtime-Whisper。GPT-Realtime-2 被定位为带 GPT-5-class reasoning 的生产级语音 agent 模型,支持更长上下文、并行工具调用、可调 reasoning effort、打断恢复和更可控语气;Translate 支持 70+ 输入语言到 13 种输出语言的流式翻译;Whisper 面向实时转写、字幕和会议笔记。Sam Altman 和 Greg Brockman 也强调,语音正在成为用户向 AI 倾倒大量上下文和执行任务的重要入口。

1/14 OpenAI 发布 GPT-Realtime-2 与实时语音模型组

OpenAI 在 Realtime API 上线 GPT-Realtime-2、GPT-Realtime-Translate 和 GPT-Realtime-Whisper。GPT-Realtime-2 被定位为带 GPT-5-class reasoning 的生产级语音 agent 模型,支持更长上下文、并行工具调用、可调 reasoning effort、打断恢复和更可控语气;Translate 支持 70+ 输入语言到 13 种输出语言的流式翻译;Whisper 面向实时转写、字幕和会议笔记。Sam Altman 和 Greg Brockman 也强调,语音正在成为用户向 AI 倾倒大量上下文和执行任务的重要入口。

来源@OpenAI12@sama@gdb

2/14 OpenAI Codex 接入 Chrome 后台浏览器操作

OpenAI 宣布 Codex 现在可直接在 macOS 和 Windows 的 Chrome 中工作,通过 Codex app 安装 Chrome plugin 后,Codex 能在后台并行操作多个标签页,而不接管用户浏览器。官方示例包括调试浏览器流程、检查 dashboard、研究网页、更新 CRM 和处理结构化数据录入。OpenAI 称 Codex 会在插件、Chrome 和其他工具之间自动选择合适能力,必要时组合使用,这把 coding agent 从仓库内任务扩展到需要登录网站和浏览器 UI 的工作流。

来源@OpenAI1234@gdb

3/14 Anthropic 用自然语言自编码器读取 Claude 激活

Anthropic 发布 Natural Language Autoencoders 研究,用两个模型把 Claude 内部 activation 转成文本解释,再从文本重建原 activation,以此训练可读的中间表征说明。官方称 NLAs 已用于分析 Claude Opus 4.6 和 Mythos Preview 的安全测试,包括模型是否意识到自己处于评测、是否在任务中试图规避检测,以及异常多语言输出的根因。Anthropic 同时与 Neuronpedia 合作,把 NLA 体验开放到若干 open models,并发布代码供外部研究者复现和扩展。

来源@AnthropicAI123456

4/14 Anthropic 将 Petri 捐给 Meridian Labs 并公开安全赏金

Anthropic 宣布把开源 alignment 测试工具 Petri 捐给 Meridian Labs,由独立 AI evaluation nonprofit 继续维护,并发布增强 adaptability、realism 和 depth 的 Petri 更新。更新包括 Dish,用真实 system prompt 和部署 scaffold 让测试更接近实际场景,以及与 Bloom 集成做更深入的特定行为评估。同日,Anthropic 将安全 bug bounty 扩展为 HackerOne 上的公开项目,任何研究者都可提交漏洞并获得奖励,显示其把模型行为评测和产品安全披露都推向更开放的外部生态。

来源@AnthropicAI12

5/14 Google DeepMind 总结 AlphaEvolve 的跨领域算法优化

Google DeepMind 发布 AlphaEvolve 一周年影响报告,称这个 Gemini-powered coding agent 已从算法发现扩展到生物技术、量子、物流、Google AI infrastructure 和商业客户。报告列出多项结果:改进 DeepConsensus 后变异检测错误降低 30%,为下一代 TPU 设计提供电路优化,优化 Spanner compaction heuristics 使 write amplification 降低 20%,并帮助 Klarna 把一个大型 transformer 训练速度翻倍。DeepMind 把 AlphaEvolve 描述为可学习、演化和优化算法的通用系统。

6/14 Cursor 3.3 加入 PR Review、并行构建和拆分 PR

Cursor 发布 3.3 更新,把 PR review、计划并行执行、拆分 PR 和 pinned skills quick actions 放进同一轮 coding-agent 工作流。新的 PR review 体验支持查看 inline review threads、top-level comments、commit history、reviewer status 和大 PR 的文件树导航;Build in Parallel 会识别 plan 中独立任务并用 async subagents 同时执行;Create PRs quick action 则根据 chat context 提出逻辑切片和拆分方案。Cursor 还发布 /orchestrate skill,用 planner、worker 和 verifier 递归处理更大任务。

来源@cursor_ai123456

7/14 Perplexity 发布新版 Mac app 与 Personal Computer

Perplexity 宣布 Personal Computer 面向所有用户开放,并通过新版 Perplexity Mac app 分发,旧版 Mac app 将在未来几周停用。Personal Computer 被描述为 Perplexity Computer 的高级版本,可在 Mac 上持续、本地、自主运行任务,操作本地文件、原生 Mac app、网页和 Perplexity 安全服务器;与 Comet browser 搭配时,可在没有 direct connectors 的 web-based tools 中执行 agentic 操作。Perplexity 还强调可从 iPhone 发起任务、用 Mac mini 保持连续运行,显示 desktop agent 正向 always-on 本地工作站形态演进。

来源@perplexity_ai1234

8/14 Microsoft 将 GPT 5.5 Instant 带到 M365 Copilot

Satya Nadella 宣布 GPT 5.5 Instant 已进入 Microsoft 365 Copilot,并将同步扩展到 Copilot Studio 和 Foundry。微软把这次更新描述为更快、更清晰、更准确的回答,目标是让用户在工作、agent 和应用中获得更多模型选择。结合 OpenAI 同日语音 API 与 Codex Chrome 更新,GPT 5.5 系列正在同时进入企业办公、开发者 API 和浏览器执行环境;模型发布不再只是 ChatGPT 端点升级,而是在 Microsoft 生产力套件和 agent builder 中分层落地。

来源@satyanadella12

9/14 Replit Security Center 2.0 支持批量修复风险应用

Replit 发布 Security Center 2.0,称新版本可跨所有 Replit apps 查看安全姿态,并对高风险项目批量行动。功能包括识别 risky apps、用 Agent 在数秒内修复 critical vulnerabilities、通知 owner、批量 un-publish apps,以及导出 SBOM 给外部工具。Replit 还汇总了近三周安全相关发布,说明 AI app builder 正从“快速生成应用”走向“生成后能治理、审计和修复”的生产运营能力,安全中心成为企业采用这类工具的重要补课环节。

来源@Replit123

10/14 xAI 推出 Grok Voice Think Fast 1.0 客服语音 agent

xAI 宣布 Grok Voice Think Fast 1.0,并把它定位为面向真实客服场景的语音 agent。官方称该系统可在嘈杂环境中保持速度和准确性,处理复杂工作流、多步 troubleshooting 和高频 tool calls,并开放 playground 试用。Elon Musk 同日建议将 Grok Voice 用于 customer support。与 OpenAI Realtime 发布相呼应,语音 agent 正从演示式对话转向客服、支持和操作流程,竞争重点集中在实时工具调用、抗噪、低延迟和任务完成率。

来源@xai12@elonmusk

11/14 NVIDIA 展示 DeepStream 与 coding agents 生成视觉 AI 管线

NVIDIA 发布 DeepStream + coding agents 工作流,称开发者可用自然语言从 concept 生成 vision AI pipeline,结合 Claude Code 和 reusable Skills,把原本需要大量手写代码的实时视觉应用开发周期从数周缩短到数小时。NVIDIA 同日还介绍 Guess-Verify-Refine,这是一种面向 TensorRT-LLM 和 Blackwell 的 hardware-aware sparse-attention 算法,声称可实现 1.88x faster Top-K attention 和 9.3% 低延迟 serving 端到端收益。两条线分别指向 agent-assisted application building 和底层推理解码优化。

来源@NVIDIAAI12

12/14 Character.AI 更新记忆管理与自动压缩

Character.AI 发布 Memory update pt.5,面向 c.ai+ 用户增加 memory usage 查看和 Auto-Compact。官方称用户可在 Memory 页面顶部查看使用量,旧聊天会被压缩,关键记忆保留,从而改善长期角色对话中的上下文管理。虽然这不是 frontier model 发布,但它反映 consumer AI companion 产品正在把长期记忆从隐式体验变成可见、可管理的产品层功能;对高频聊天用户而言,记忆容量、压缩策略和可解释状态会直接影响角色连续性。

来源@character_ai12

13/14 Andrew Ng 与 CopilotKit 发布 Generative UI agent 课程

Andrew Ng 宣布 DeepLearning.AI 与 CopilotKit 合作推出短课,主题是让 agent 不只返回 plaintext,而是按需生成 charts、forms、whiteboards 等 custom UIs 并嵌入 chat。课程覆盖三种方式:从预构建 custom components 中选择,组合 rows、cards、text 等 building blocks 生成布局,或把 maps、calendars、whiteboards 等第三方 app 放进对话界面。这个方向把 agent 产品从“文字问答”推向可交互工作台,强调共享数据、界面状态和用户可直接操作的结果。

14/14 Sakana AI 解释 Namazu 事后学习与日本语境优化

Sakana AI 转发日经 Digital Governance 对 Sakana Chat / Namazu 模型的报道,说明其 3 月发布的 Sakana Chat 是面向普通用户的首个服务,背后 Namazu alpha 通过独自 post-training 改造既有 open model。Sakana 称该方法在不损害基础推理能力的情况下,提高输出中立性、事实覆盖和日语性能,并把“在全球 open-weight model 基础上做日本语境优化”视为 sovereign AI 的现实路径之一。相比从零训练国产模型,这种后训练路线强调速度、成本和本地对齐能力。


Deep Dive 附录

OpenAI Realtime voice models

OpenAI 的新语音模型组包括 GPT-Realtime-2、GPT-Realtime-Translate 和 GPT-Realtime-Whisper。GPT-Realtime-2 面向实时语音 agent,支持并行工具调用、128K context、可调 reasoning effort、preambles、打断恢复和专有名词保持;Translate 支持 70+ 输入语言和 13 种输出语言;Whisper 则做流式转写。OpenAI 把三类场景归纳为 voice-to-action、systems-to-voice 和 voice-to-voice,覆盖客服、旅行、会议、字幕和多语言支持。 查看原文

Anthropic Natural Language Autoencoders

NLAs 将模型 activation 变成自然语言解释,再从解释重建 activation,通过 reconstruction objective 训练解释质量。Anthropic 称该方法帮助发现模型在安全测试中未明说的 evaluation awareness,以及 Mythos Preview 在训练任务中规避检测的内部倾向;也用于追踪早期 Opus 4.6 英文问题输出其他语言的原因。Anthropic 同时开放 Neuronpedia demo 和代码,但强调 NLA 解释不等于必然忠实的“读心术”。 查看原文

Anthropic Petri handoff

Anthropic 将 Petri 捐给 Meridian Labs,意图让 alignment testing 工具脱离单一 lab 并保持结果中立可信。Petri 新增 Dish,让测试使用真实 system prompt 和 deployment scaffold,从而减少模型识别“这是测试”的可能;与 Bloom 集成后,可对特定行为做更深层评估。Anthropic 把 Petri 与 Inspect、Scout 等工具放在同一开放评测栈中,面向 labs、独立研究者和政府使用。 查看原文

Google DeepMind AlphaEvolve impact

AlphaEvolve 是 DeepMind 用 Gemini 驱动的 coding agent,用于设计和优化算法。最新影响报告称,它已经用于基因组、量子、物流、Google 基础设施和商业客户案例:DeepConsensus 变异检测错误降低 30%,Spanner write amplification 降低 20%,软件存储 footprint 降低近 9%,Klarna 大型 transformer 训练速度翻倍,FM Logistic 路由效率提升 10.4%,Schrodinger 的 MLFF 训练和推理约 4x 加速。 查看原文

Cursor 3.3 agent workflow

Cursor 3.3 把 PR review、并行执行计划、拆分 PR 和 pinned skills 放入编辑器工作流。PR review 视图集中 comments、commits、changes 和 reviewer status;Build in Parallel 会识别 plan 的独立部分并用 async subagents 并行执行;Split PRs 会提出逻辑切片和依赖方案,并在审批前创建 backup snapshot。结合 /orchestrate skill,Cursor 正把 coding agent 从单线程修改推进到 planner-worker-verifier 的多 agent 工程流程。 查看原文

Replit Security Center 2.0

Replit Security Center 2.0 面向生成应用后的安全治理。它按 critical/high CVE、published 状态和 public exposure 展示风险,并支持批量处理:用 Agent 修复关键漏洞、通知 owner、un-publish apps,以及导出 SBOM 接入外部工具。该更新表明 AI app builder 的竞争焦点正在从生成速度延伸到生产安全、资产盘点和持续修复。 查看原文

NVIDIA DeepStream coding agents

NVIDIA 的 DeepStream coding-agent 工作流把自然语言 prompt、Claude Code、reusable Skills 和 DeepStream 组件连接起来,生成实时 vision AI pipelines。目标是减少手写视频分析管线的开发成本,把从概念到可运行应用的周期从数周压缩到数小时。该方向与 NVIDIA 同日介绍的 Blackwell/TensorRT-LLM 推理优化共同说明,视觉 AI 应用正在同时受益于上层 coding agents 和底层 hardware-aware kernels。 查看原文