大規模言語モデル
大規模言語モデルという技術カテゴリを解説:それが何か、どんな能力が AI アプリの基盤となっているのか、選定時に見るべきポイントと能力の限界はどこにあるのか。
大規模言語モデルという技術カテゴリを解説:それが何か、どんな能力が AI アプリの基盤となっているのか、選定時に見るべきポイントと能力の限界はどこにあるのか。
DeepGEM 2.0 は 2026 年 10 月 10 日、広州で発表された。広州医科大学附属第一医院の国家呼吸医学センターが金域医学と共同で発表した肺がん病理・遺伝子マルチモーダル大規模モデルで、鍾南山院士のチームが開発に加わった。狙いは診断そのものの代替ではなく、その手前のボトルネックにある。...
プレトレーニングは大規模言語モデルの最初の訓練段階です。会話やコーディングを覚える前に、モデルは大量のテキストで「次の単語を当てる」ことだけを繰り返します。この段階では礼儀も指示への従順さも教えず、言語の統計的パターン、事実の結びつき、表現の癖をパラメータに刻み込むだけです。おなじみの会話能力や推論...
Yandex は 2026 年 10 月 9 日、ロシアのカルーガ州にある同社のデータセンターがドローン攻撃を受け、複数のモジュールが完全に使用不能になったと確認した。同社のデータセンターが被弾するのは 2 日連続で、このロシアのテクノロジー・AI 企業は負傷者はおらず、一部サービスに影響が出る可能...
Claude Scienceは、Anthropicが2026年10月8日に公開した研究記事の中で、長年先送りされてきた仕事をやり遂げた。ジョンズ・ホプキンス大学の天体物理学者Brice Ménardが、複数の宇宙望遠鏡の紫外線観測をエージェント群につなぎ合わせさせ、初の完全な紫外線全天マップを組み上...
OSS Scannerは、Anthropicが2026年10月8日に開始したオープンソースソフトウェア向けの任意参加型脆弱性スキャンサービスだ。参加したプロジェクトは、Anthropicの最強モデルによる定期スキャンを無料で受けられる。届く報告はすべてモデル生成で、人の確認やトリアージを経ずにメンテ...
OpenAIは2026年10月6日、内部モデルが生成した719本の数学写本を公開した。10月8日、TechCrunchとThe Decoderは、この公開が数学界自身の諮問グループが定めた基準に達していないと相次いで指摘し、一部の数学者は同僚にOpenAIとの協働停止を呼びかけている。争点は証明の正...
自己回帰とは、大規模モデルが文章を生成するときに使う基本的な方式のことです。すでに現れたトークンをもとに、次に来る可能性が最も高いトークンを予測し、新しく生成したトークンを入力の末尾に付け足して、さらに次を予測する、という循環を、終了マーカーが出るか長さの上限に達するまで繰り返します。チャットで回答...
Google AMIE の実際の外来を対象とした研究が 2026 年 10 月 8 日、『ランセット』本誌に掲載された。Google にとって同誌本誌への掲載は初めてである。AMIE は Google の対話型診断研究システムで、今回は模擬症例の試験ではなく、ベス・イスラエル・ディーコネス医療センタ...