ToolNavs 发现实用AI工具
提交工具 登录

AI 安全护栏

把安全交给模型自己守,等于没有守。护栏该分几层、提示词注入从哪些入口进来,以及为什么权限和审批必须放在模型之外由确定性程序执行,逐层拆开。

系统提示词和用户输入同处一个语言环境,注入与诱导都能改写判断,护栏必须落在模型之外:输入查文件与指令、上下文隔离来源、工具调用白名单、高风险动作留人工审批。Constitutional Classifiers++ 把越狱防护的额外算力压到约 1%。护栏拦不住全部攻击,但能把失效关在权限边界内。
10月18日AI简报:世界银行力推小型AI,六款智能体追退款全军覆没

10月18日AI简报:世界银行力推小型AI,六款智能体追退款全军覆没

世界银行力推小型AI,是10月18日AI简报的头条:过去24小时,世界银行在年会上给发展中国家指了一条不拼参数的路线,六款主流模型化身的智能体在一场退款实验里集体翻车,Google开源了专改智能体外围的框架,Cohere和xAI各有一条产品动态。 世界银行力推小型AI:弱网手机能跑,按本地需求来 据...

Admin
96
美国大银行收紧智能体账户权限:花旗跟进,代登录与转账被关门

美国大银行收紧智能体账户权限:花旗跟进,代登录与转账被关门

美国大银行正在收紧第三方智能体的账户权限。2026 年 10 月 16 日,英国《金融时报》报道,花旗成为最新一家限制第三方 AI 智能体访问客户账户的美国大行;美国银行等机构也在收紧同类通道。银行关上的不是聊天窗口,而是最要紧的那道门:智能体不能再拿着客户的登录凭证,替客户进账户、动资金。 关的是...

Admin
123
广东备案大模型增至 195 款:三年涨了 23 倍,安全测评开始跟上放量速度

广东备案大模型增至 195 款:三年涨了 23 倍,安全测评开始跟上放量速度

广东备案大模型数量增至 195 款的消息,在 2026 年 10 月 16 日于广州举行的粤港澳大湾区生成式人工智能安全发展联合实验室成果发布会上正式披露。会上发布的《广东省备案大模型观察报告(2026)》显示,自 2023 年开展备案工作以来,广东的生成式人工智能服务备案量从 8 款增至 195 ...

Admin
90