複数のAIを並列で走らせる「マルチエージェント」構成は、Anthropicの社内リサーチ評価で単一エージェントを90.2%上回りました。ただしトークン消費は通常のチャット利用の約15倍。性能差ではなくこのコスト倍率が、中小企業にとっての判断軸になります。

この記事の前提:発表者はClaudeの提供者本人である

最初に利害関係を明示します。この記事は Anthropic 社自身による発表であり、同社は本文で論じている Claude および Research 機能そのものの提供者です。つまり自社製品の性能を自社が測って公表した数字であり、第三者による検証結果ではありません。

(出典:Anthropic(Anthropic Engineering ブログ)、2025-06-13、https://www.anthropic.com/engineering/multi-agent-research-system

そのうえで、この記事が読む価値を持つのは、性能自慢だけでなく「向かない用途」「うまくいかなかった点」まで書かれているからです。以下、数字とその条件、そして限界を分けて整理します。

90.2%という数字は、何と何を比べた結果なのか

まず数字の中身を、条件つきで確認します。丸めずに、対象と条件をそのまま並べます。

数字 何を表すか 対象・条件
90.2% マルチエージェント構成が単一エージェントを上回った幅 Anthropicの社内リサーチ評価(外部公開ベンチではない)。リード=Claude Opus 4、サブエージェント=Claude Sonnet 4 の構成 対 単一の Claude Opus 4。例示タスクはS&P500企業のIT部門役員の特定。採点はLLM-as-judgeによるルーブリック(事実正確性・引用正確性・網羅性・情報源の質・ツール効率)
80% 性能のばらつき(分散)のうち、トークン使用量だけで説明できる割合 BrowseComp(Web閲覧エージェント評価)における分散分析。分母は正答率ではなく分散
95% 同じく、トークン使用量・ツール呼び出し数・モデル選択の3要因で説明できる分散の割合 同じくBrowseComp評価。本文は「3要因で95%」と述べるにとどまり、内訳配分は明記なし
約4倍 / 約15倍 通常のチャット利用に対するトークン消費量。エージェントが約4倍、マルチエージェントが約15倍 比較の分母は「チャットでのやり取り」。本文の表現は概算(about)で、測定期間・件数の記載なし
40% ツール説明文を書き直した後、後続エージェントのタスク完了時間が短縮した幅 社内のツールテスト用エージェントが、失敗事例をもとにツール説明文を自動で書き直した場合。比較対象は書き直し前の説明文を使ったエージェント。n数の記載なし
約20件 評価の出発点として用いた、実利用パターンを代表するクエリ数 開発初期段階の評価セット。最終的な90.2%評価の件数として明示されたものではない

対象範囲について正直に書くと、この記事で扱える「n数・期間・対象」は限定的です。明示されているのは開発初期の評価セットが約20件であることだけで、90.2%を出した評価の件数・タスク分布・実施期間はいずれも本文に書かれていません。ここは読者側で割り引いて読む必要があります。

分散の話は誤読しやすいので補足します。80%や95%は「正答率」ではなく「性能のばらつきが何で説明できるか」の割合です。噛み砕くと、成績の良し悪しの大半は、賢さの差ではなく「どれだけトークンを使ったか」で決まっていたということになります。マルチエージェントが強いのは、複数のサブエージェントが同時に別々の文脈を持てるぶん、投入できるトークン総量が増えるからだ、という説明です。

エージェントという構成そのものの基礎は、AIエージェントとは何か で扱っています。

読者への意味:見るべきは性能差ではなくコスト倍率

中小企業の実務に引き寄せると、判断材料は90.2%ではなく約15倍のほうです。Anthropic自身が「マルチエージェントは、増えたコストを払うだけの価値があるタスクにしか成立しない」と限定しています。提供者本人がここまで限定を書いている以上、そのまま導入基準として受け取ってよい記述です。

適合しやすい業務・しにくい業務は、本文の記述からそのまま切り分けられます。

  • 向く:幅広い一次情報を並列で当たる調査業務。競合調査、仕入先や補助金の洗い出し、候補企業のリストアップなど、人が何時間もかけて広く探すタイプの仕事
  • 向かない:社内の定型的な問い合わせ処理や文書要約のように、1件あたりの単価が低い業務。15倍のコストが成果を上回りやすい
  • 向かない:全エージェントが同一の文脈を共有する必要がある業務、およびエージェント間の依存関係が多い業務。本文で現時点では不向きと明記
  • 向かない:コーディング。リサーチほど真に並列化できる作業が少ないと名指しされている

コスト側の考え方は AI導入のコスト構造 と併せて見ると、月額いくらまでなら合うのかの計算がしやすくなります。

投資ゼロで着手できる論点:ツールの説明文を書き直す

もうひとつ、中小企業がすぐ試せる示唆があります。社内のツールテスト用エージェントが失敗事例をもとにツールの説明文を自動で書き直したところ、後続エージェントのタスク完了時間が40%短縮した、という記述です(n数の記載はありません)。

これは言い換えると、AIが読む説明文の書き方が、AIの作業時間を左右するということです。社内でAIに渡している業務マニュアル、手順書、SOP、ツールの使い方メモ。これらを「人が読む前提」から「AIが読む前提」に書き直す作業は、追加のライセンス費も開発費もかかりません。まず着手できるのはここです。

具体的には、次の3点を見直す価値があります。

  • 使う場面と使わない場面を明記する(「見積作成時に使う。請求書には使わない」)
  • 入力と出力の形を具体例で示す(曖昧な説明文ではなく実物の例)
  • よくある失敗と、そのときどうするかを書き添える

TOEの読み筋:TOEでは未実施

先に明記します。TOEではマルチエージェント構成での業務運用は未実施です。以下は本文の記述からの読み筋であり、当社の実測ではありません。

そのうえでの見立ては、中小企業がこの構成を検討する入口は「調査業務のうち、担当者が丸一日かけている作業」に限られる、というものです。仮に社内で半日(4時間)かけている競合・仕入先の洗い出しがあり、それが月に数回発生しているなら、15倍のトークン単価でも人件費と釣り合う可能性があります。逆に、日々発生する問い合わせ一次対応をマルチエージェント化するのは、本文の適合条件に照らして費用倒れになる公算が高いと読みます。

もう一点、実務上見落とされやすいのが評価の作り方です。開発初期の評価セットが約20件だったという記述は、大量の評価データがなくても着手はできることを示しています。自社で試すなら、実際に社内で発生した典型的な依頼を20件ほど集めるところから始めるのが現実的です。評価基準の作り方は 自社の評価基準をつくる が参考になります。

本文が認めている限界と、不都合な結果

提供者本人の発表であることを踏まえ、本文が自ら書いている弱点を列挙します。ここを読まずに90.2%だけ持ち帰るのは危険です。

  • 90.2%はAnthropicの社内リサーチ評価であり、第三者が再現できる公開ベンチマークではない。評価の件数・タスク分布は本文に明記がない
  • 採点はLLM-as-judgeで行われており、人手による全件評価ではない。本文自身も「人が触ると評価では拾えないエッジケースが見つかる」と認めている
  • トークン消費が約15倍になるため、Anthropic自身が「タスクの価値が、上がった性能の対価を払えるほど高い場合にのみ成立する」と限定している
  • リードエージェントがサブエージェントを同期的に実行するため、1つのサブエージェントの待ちでシステム全体が止まるボトルネックが存在する
  • エージェントは長時間動作し状態を保持するため誤りが累積しやすく、同一プロンプトでも実行ごとに挙動が非決定的でデバッグが難しい。本文は「試作から本番までの隔たりは想定より大きいことが多い」と述べている
  • LLMエージェントはリアルタイムでの相互調整・委任がまだ得意ではないと認めている
  • 本文の知見は、Web・Google Workspace・各種連携をまたいで調査するというAnthropic自社のResearch機能の構築経験に基づくもので、業務系の他用途にそのまま一般化できるとは書かれていない

最後の項目は特に重要です。この記事の数字は「調査」という用途で得られたものであり、たとえば見積作成や在庫管理のような自社業務に同じ倍率・同じ性能差が出るという根拠は、本文のどこにもありません。

まとめ

  • マルチエージェント構成は、Anthropicの社内リサーチ評価で単一エージェントを90.2%上回った。ただし公開ベンチではなく、評価件数やタスク分布の記載はない
  • 中小企業が見るべきは性能差より約15倍というトークン消費の倍率。提供者自身が「価値の高いタスクにのみ成立する」と限定している
  • 適合するのは広く一次情報を当たる調査業務。定型問い合わせ処理、文脈共有が必要な業務、依存関係の多い業務、コーディングは不向きと明記されている
  • ツールの説明文を書き直したら後続の作業時間が40%短縮した(n数記載なし)という記述は、社内マニュアルの書き直しという投資ゼロの打ち手を示している
  • この記事はAnthropic社自身による自社製品についての発表であり、同社は当該製品の提供者。TOEでも同構成は未実施のため、本記事の読み筋は実測ではない