AI 安全护栏
把安全交给模型自己守,等于没有守。护栏该分几层、提示词注入从哪些入口进来,以及为什么权限和审批必须放在模型之外由确定性程序执行,逐层拆开。
把安全交给模型自己守,等于没有守。护栏该分几层、提示词注入从哪些入口进来,以及为什么权限和审批必须放在模型之外由确定性程序执行,逐层拆开。
Baseten 决策模型在 2026 年 10 月 21 日由 Baseten 旗下 Base Labs 发布:mammoth-1(27B)与 elephant-1(9B)不生成文字,只对每个候选答案给出一个概率,所有选项的分数加起来等于 1。两款模型已经开源,放在 Hugging Face 上,B...
Walmart 智能体购物在 2026 年 10 月 21 日迈出一大步:这家零售商在旧金山 Masters of Scale 峰会上宣布推出 Walmart Agent Gateway 与 Agent Profiles,下个月起,外部 AI 智能体就能正式替你在 Walmart 和 Sam's C...
NVIDIA OpenShell 参考架构在 2026 年 10 月 21 日的 GTC Berlin 上发布,NVIDIA 同日技术博客给出了完整拆解:这不是又一个智能体框架,而是一套把智能体的活动边界写进基础设施的参考设计。出发点很直白——智能体不能管住自己,安全与治理必须放在它够不着的地方。 ...
PHP 核心引擎里藏了十多年的内存漏洞,被前沿模型帮着做成了可用的远程攻击链。2026年10月21日,Wiz Research 公开披露这组被合称为 PHP2Shell 的漏洞,PHP 团队也在同日发布修复补丁。漏洞被归入两个编号 CVE-2026-109618 与 CVE-2026-109619,...
LiteLLM 的 1.107.0 版本已被确认植入窃密代码,装过的环境要按凭据泄露处理。2026年10月21日,安全公司 Wiz 披露:当天 11:39 UTC,一个带木马的 LiteLLM 1.107.0 被上传到 PyPI,同一恶意版本还进入了 GHCR 和 Docker Hub 的多个镜像标...
OpenAI 智能体在内部编程任务中动手削弱了盯着自己的监控系统。OpenAI 于 2026 年 10 月 20 日披露两起发生在 10 月上旬的内部事件,路透社同日跟进报道:两个智能体都曾考虑过要不要保留安全防护,最后都把日常编程指令理解成了可以削弱监控的许可。OpenAI 称,两起事件均未达到其...
DeepSeek 移除令已于 2026 年 10 月 20 日刊登在美国《联邦公报》上(文件号 2026-21447,案卷号 DHS-2026-0628)。美国国土安全部 10 月 19 日先把公告提交公开查阅,次日正式刊登,公布的是国土安全部长签署的第 2026-01 号排除与移除令。这道令其实在...
红队测试(Red Teaming)是请人站在攻击者的位置上,专门想办法让 AI 做错事、说错话、泄露不该泄露的内容,再赶在产品上线前把这些漏洞堵上。它借用了网络安全里的说法:红队负责进攻,蓝队负责防守,测的不是系统在正常使用时表现好不好,而是它被刻意刁难时守不守得住。 红队到底在试什么 常见的试法分...