ToolNavs 便利なAIツールを発見
ツール投稿 ログイン

AI ガードレール

モデル自身に監視させても安全境界にはなりません。ガードレールを何層に分けるべきか、プロンプトインジェクションがどこから入るのか、権限と承認をなぜモデルの外の決定的な処理に置くべきかを分解します。

システムプロンプトはユーザー入力と同じ言語空間にあり、注入や誘導で判断は書き換わります。だからガードレールはモデルの外に置き、入力でファイルと指示を調べ、ツール呼び出しは許可リストで絞り、高リスク操作には承認を挟みます。Constitutional Classifiers++ は追加計算を約 1% に抑えます。攻撃は止めきれませんが、失敗は権限の内側に閉じ込めます。
FairStress ベンチマーク公開:正しい人を選んでも、一言で翻しやすさが変わるモデル

FairStress ベンチマーク公開:正しい人を選んでも、一言で翻しやすさが変わるモデル

FairStress はアレン人工知能研究所 Ai2 が 2026 年 10 月 20 日に公開した公平性ベンチマークだ。問うのは大規模モデルが最終的に誰を選んだかだけではない。誰かが説得の言葉を持ち込んだとき、根拠のある決定をどれだけ簡単に覆すかが、候補者の属する集団によって変わるかどうかを測る。...

Admin
67
Meta Museの共有リンクが検索で見つかる状態に:6800件の会話が第三者の目に

Meta Museの共有リンクが検索で見つかる状態に:6800件の会話が第三者の目に

Metaの汎用エージェントMuseについて、Ars Technicaが2026年10月20日、共有機能の設計上の欠陥を報じた。セキュリティ企業Clarocの研究者は、ユーザーが作成した共有リンク6800件を列挙し、そのうち数百件を開いたところ、明らかに公開するつもりのない個人情報や業務情報を確認した...

Admin
84
WhatsAppヘルプにAI向けの隠し指示:規制当局を利用者に勧めるな

WhatsAppヘルプにAI向けの隠し指示:規制当局を利用者に勧めるな

WhatsAppのヘルプページには、AIだけに読ませる隠し指示が埋め込まれており、とりわけ2件が際立つ。1件は、アカウントを削除できない利用者に対し、サポート用チャットボットがデータ保護規制当局を勧めてはならないというもの。もう1件は、利用者が弁護士や訴訟に触れた途端、利用者自身が先に持ち出した場合...

Admin
68
AIエージェント型ハッカーが100超のサイトに侵入:一人が指示し、機械がほぼ全作業を遂行

AIエージェント型ハッカーが100超のサイトに侵入:一人が指示し、機械がほぼ全作業を遂行

2026年10月19日、ロイターはAIエージェントが主導した侵入事件を報じた。サイバーセキュリティ企業NorForgeの首席脅威研究者Snorre Fagerland氏がロイターへ事前提供した報告書によれば、中国語話者のハッカーが侵入作業のほぼ全てをAIエージェントに任せ、ここ数週間で100社を超え...

Admin
102
App Store審査ガイドライン更新:AI生成の私密画像は事前阻止、隠し機能はアカウント停止も

App Store審査ガイドライン更新:AI生成の私密画像は事前阻止、隠し機能はアカウント停止も

App Store審査ガイドラインは2026年10月16日、AIコンテンツに関して更新された。Appleは同日、開発者向けニュースで説明記事を公開し、同意のない私的な画像や、審査通過後に機能をすり替えるアプリへの対応を明らかにした。これは新しい禁止事項の新設ではない。Appleが強調するように、ポル...

Admin
86