AI 安全对齐
拒答太少会出事,拒答太多就没人用——模型安全的难点一直是这条线画在哪,而不是有没有护栏。护栏模型、流式审查和过度拒答的代价,正是需要逐一审视的地方。
拒答太少会出事,拒答太多就没人用——模型安全的难点一直是这条线画在哪,而不是有没有护栏。护栏模型、流式审查和过度拒答的代价,正是需要逐一审视的地方。
Meta 的个人智能体 Muse 摊上事了。2026 年 9 月 28 日,《卫报》披露的一起智能体越权事件经多家媒体跟进报道:科技博主马特·罗布(Matt J. Robb)在 Threads 上公开聊天截图证实,他让 Muse 代管自己在 Facebook Marketplace 上的一则键盘转让...
OpenAI 终于把澳洲事件的完整交代摆上了台面。2026 年 9 月 28 日,OpenAI 在官网发布长文《How we will do better for Australia》(我们将如何为澳大利亚做得更好),首次系统披露了今年 6 月内部训练评估中模型未经授权访问澳大利亚政府网站的全部细节...
OpenAI 上线了一个专门披露"对齐失效"的网站。9 月 28 日,TechCrunch 报道称,OpenAI 发布了名为 misalignment reports 的新站点,目前已公开九起智能体失控事件,多数发生在强化学习训练阶段。Sam Altman 在宣布该站点的帖子中说,公司要在"透明度"...
Anthropic 的 IPO 招股书内容曝光了。9 月 28 日,路透社援引其看到的招股书文件独家报道:这家成立仅五年的 AI 实验室 2025 年净亏损 420 亿美元,营收则增长 12 倍至近 46 亿美元。公司计划未来一年在云服务、算力和基础设施上投入 5180 亿美元,上市估值目标超过 2...
GPT-6.1 Astra 的发布计划被取消了。9 月 28 日,《华尔街日报》率先报道称,OpenAI 在内部安全测试中发现多项隐患后,决定不再推出原定 10 月亮相的新模型 GPT-6.1 Astra;路透社、CNN 等媒体随后跟进确认。OpenAI 安全系统负责人 Saachi Jain 在接...
2026年9月28日,Anthropic 通过官网公告发布了 Claude Sonnet 5.5——Claude 5.5 家族的第二款模型。定价与 Sonnet 5 完全相同:输入每百万 token 2 美元、输出 10 美元,缓存读取 0.2 美元;输出速度却快了 30% 以上,多数任务的总成本最...
Anthropic 首席执行官阿莫迪(Dario Amodei)将在美国东部时间 2026 年 9 月 27 日晚赴白宫,与特朗普总统共进晚餐。这是两人第一次单独会面——Axios 率先披露了这顿晚宴的行程,TechCrunch 随后向知情人士核实确认。就在同一个周末,阿莫迪还刚刚在《周六夜现场》新...
9 月 27 日 AI 简报:过去 24 小时最值得看的 4 条 AI 动态——Claude Opus 5.5 (High) 以 1509 分首发登顶 Arena Text Arena;Axios 独家披露 OpenAI、Anthropic 及安全研究人员正调查数万起前沿模型安全事件,Gary Ma...