ToolNavs 便利なAIツールを発見
ツール投稿 ログイン

AI ガードレール

モデル自身に監視させても安全境界にはなりません。ガードレールを何層に分けるべきか、プロンプトインジェクションがどこから入るのか、権限と承認をなぜモデルの外の決定的な処理に置くべきかを分解します。

システムプロンプトはユーザー入力と同じ言語空間にあり、注入や誘導で判断は書き換わります。だからガードレールはモデルの外に置き、入力でファイルと指示を調べ、ツール呼び出しは許可リストで絞り、高リスク操作には承認を挟みます。Constitutional Classifiers++ は追加計算を約 1% に抑えます。攻撃は止めきれませんが、失敗は権限の内側に閉じ込めます。
フロンティアモデルの物理的隔離が再び争点に:科学者406名が既定の断網を求める

フロンティアモデルの物理的隔離が再び争点に:科学者406名が既定の断網を求める

406名の科学者が2026年10月13日に公開書簡を発表し、サイバー攻撃能力を持つフロンティアAIモデルについて、初期段階では外部ネットワークから物理的に隔離(エアギャップ)すること、そして隔離基準を定め重大なセキュリティ事故を登記する国際機関の設立を求めた。署名者は34カ国に及び、Geoffrey...

Admin
144
マイクロソフト社長Brad Smith氏「洗濯機よりAIの方が規制が緩い」:拘束力ある世界ルールを

マイクロソフト社長Brad Smith氏「洗濯機よりAIの方が規制が緩い」:拘束力ある世界ルールを

マイクロソフト社長のBrad Smith氏は、2026年10月12日に公開されたBBCの番組「Big Boss Interview」で、AIの規制の現状を率直に語った。いまや洗濯機の方がAIより多くの安全ルールの対象であり、スーパーの牛乳パックはすべて安全検査を通るのに、それよりはるかに高性能でリス...

Admin
128
Anthropicの蒸留対策が効果:Claudeから抽出される推論量は10〜100分の1に

Anthropicの蒸留対策が効果:Claudeから抽出される推論量は10〜100分の1に

2026年10月12日、Anthropicは公式研究ブログで、ここ数か月で導入した一連の新しい防御策が効果を上げていると発表した。同社のプラットフォーム監視に基づく推計では、蒸留者がClaudeから持ち出すデータ量は約90〜99%減り、抽出される推論トークンの数は従来の10〜100分の1に下がった。...

Admin
112