Bloom
Bloomが単一の行動を軸に評価シナリオを自動生成する仕組みを解説。四段階パイプラインの採点とシードによる再現、Petriとの役割分担までをたどる。
Anthropic が公開した自動行動評価フレームワークで、単一の対象行動を軸にシナリオを広げ、発生頻度と強度を定量化する。Bloom は理解・構想・実行・判定の四段階で、生成した状況と対話ターンに審査モデルが採点する。シード設定が行動定義とパラメータを記録し、再現とモデル間比較を容易にする。
Bloomのオープンソースツール解釈:SeedでLLMの行動評価を自動的に生成し、実験を再現します
1. 要旨 BloomはオープンソースのLLM行動評価生成フレームワークです。研究者は「ターゲット行動」と再現可能なシード構成を定義するだけで、Bloomは自動的に多数のトリガーシナリオを生成し、ターゲットモデルとやり取りします。レビューモデルは行動の頻度と強度をスコアリングし、迅速なスケーラブル行...
Admin
176 
Anthropicは、最先端のAIモデルの行動評価を自動的に生成するオープンソースフレームワークBloomをリリースしました
Anthropicは2025年12月19日にBloomをリリースし、オープンソースとしてダウンロード・利用可能です。 Bloomは「自動行動評価」のエージェントフレームワークとして位置づけられています。研究者はまず観察すべき単一の行動特徴を指定し、その後Bloomが多数のシナリオや会話ラウンドを自動...
Admin
215