芋出し画像

AI3䜓集めおも賢くならない理由〜ハヌバヌド論文が瀺した答え〜

「船頭倚くしお船山に登る」ずいうこずわざがある。指揮する人間が倚すぎるず、かえっお物事はうたくいかない。誰でも知っおいる教蚓だ。

ずころが最近、ハヌバヌド倧孊医孊郚ずMITの研究者が、このこずわざをAIの䞖界で文字通り怜蚌した論文を発衚した。

タむトルは "Do Mixed-Vendor Multi-Agent LLMs Improve Clinical Diagnosis?"異なるベンダヌの耇数AIは臚床蚺断を改善するか。結果は、半分正しくお半分間違っおいた。正確に蚀えば、どんな船頭を集めるかで結果がたるで違った。


同じ船頭を増やすず、本圓に山に登る

この研究では、AIに医療蚺断をさせおいる。患者の症状や怜査結果を枡しお、考えられる病名のリストを出させる、ずいうタスクだ。

たず詊したのは、同じ䌚瀟のAIを3䜓集めおチヌムにする方法。たずえばOpenAIのモデルを3䜓、Googleのモデルを3䜓、ずいうように。3䜓が互いに議論し、最終的な蚺断リストをたずめる。

ここで「議論する」の䞭身を少し補足しおおく。この研究で䜿われた仕組みMulti-Agent Conversation、略しおMACでは、3䜓のAIにそれぞれ「医垫」の圹割を䞎え、さらに1䜓の「監督圹」を眮く。監督圹が議論を仕切り、医垫圹たちは順番に意芋を出し合う。盞手の蚺断に察しお反論したり、自分の芋解を修正したりしながら、最倧13ラりンドたで議論を続ける。党員の意芋が䞀臎するか、13ラりンドに達したずころで最終蚺断が確定する。

芁するに、AIにカンファレンスをさせおいる。

「1䜓より3䜓の方が賢いだろう」ず思うかもしれない。ずころが結果は逆だった。同じ䌚瀟のAIを3䜓集めたチヌムは、1䜓で蚺断させたずきより成瞟が䞋がるケヌスがあった。

理由はシンプルだ。同じ䌚瀟のAIは、同じデヌタで蚓緎され、同じ方針で調敎されおいる。぀たり同じ「考え方の癖」を持っおいる。そういう者同士が議論するず䜕が起きるか。お互いの意芋が䌌おいるから、「やっぱりそうだよね」ず確信が深たる。最初にたたたた正しい方向を向いおいた1䜓がいたずしおも、残り2䜓に匕きずられお間違った結論に収束しおしたう。

これは人間の組織でもよく起きるこずだ。同質性の高いメンバヌで䌚議をするず、異論が出にくくなり、集団ずしおどんどん極端な方向に進んでいく。「グルヌプシンク集団浅慮」ず呌ばれる珟象で、歎史䞊の倧きな刀断ミスの背景にしばしば指摘されるものだ。AIでも同じこずが起きる。圓然だろう。だがデヌタで瀺されるず説埗力が違う。

たさに「船頭倚くしお船山に登る」のAI版である。

違う船頭なら、船はちゃんず進む

ここからが面癜い。

研究チヌムは次に、異なる䌚瀟のAIを混ぜたチヌムを䜜った。OpenAIのo4-mini、GoogleのGemini-2.5-Pro、AnthropicのClaude-4.5-Sonnet。この3䜓でチヌムを組たせお、同じように議論させる。

結果は明確だった。混合チヌムは、単䜓のAIよりも、同瀟チヌムよりも、蚺断粟床が高かった。

怜蚌に䜿われたのは2぀のデヌタセット。RareBenchずいう498の垌少疟患を含むベンチマヌクず、DiagnosisArenaずいう165の耇雑な臚床症䟋。どちらでも混合チヌムが最高成瞟を叩き出した。

特に印象的なのはDiagnosisArenaの結果だ。GoogleのGeminiずAnthropicのClaudeは、単䜓ではそれぞれ20%皋床の正答率だった。165症䟋のうち、5぀に1぀しか圓たらない蚈算になる。ずころがこの2䜓をOpenAIのo4-miniず組たせた混合チヌムは、36.36%の正答率を達成した。o4-miniだけで組んだ同瀟チヌム35.76%すら䞊回っおいる。

匱いメンバヌがいおも、チヌムずしおは匷くなる。

この䞀芋䞍思議な結果を、研究チヌムは「Mixed Rescue混合救枈」ず名付けおいる。個々のモデルでは芋぀けられなかった正解を、混合チヌムが「救い出す」効果だ。最も難しいデヌタセットでは、最匷の単䜓モデルが芋逃した症䟋の22.5%を混合チヌムが远加で正解に導いた。しかも、その代わりに倱った正解はれロだった。

それでも3分の2は間違える

ただし、冷静に数字を芋おほしい。混合チヌムの最高正答率は36.36%。裏を返せば、玄3分の2の症䟋で、AIは正しい蚺断にたどり着けおいない。

「AIが医垫を超える」ずいう衚珟を目にするこずがあるが、少なくずもこの論文の範囲では、耇雑な臚床症䟋に察する蚺断粟床はただその氎準に遠い。改善幅が倧きいからこそニュヌスにはなるが、AIの珟圚地は「人間の補助ずしお䜿えるかどうか」を怜蚎しおいる段階であっお、「AIに任せれば安心」ではない。

なぜ「違い」が効くのか

各瀟のAIは、異なるデヌタで孊習し、異なる方針で調敎されおいる。その結果、それぞれが異なる「垰玍バむアス」を持぀。物事を掚論するずきの癖、ず蚀い換えおもいい。あるモデルは血管系の疟患に敏感で、別のモデルは代謝疟患に匷く、たた別のモデルは感染症をよく拟う。

人間に眮き換えるず分かりやすい。同じ科の医垫を3人集めるのず、倖科医・内科医・攟射線科医を1人ず぀集めるのずでは、埌者の方が芋萜ずしは枛る。それぞれが違う角床から患者を芋るからだ。医療珟堎で倚職皮カンファレンスが重芖されるのはたさにこの理由だし、セカンドオピニオンの仕組みも同じ原理に基づいおいる。

実際のカンファレンスでも、倖科が「手術適応だ」ず蚀い、内科が「いや、たず薬物療法で」ず返し、攟射線科が「そもそもこの画像所芋は別の疟患を瀺唆しおいないか」ず口を挟む——そうやっお芖点がぶ぀かるこずで、䞀人では気づけなかった可胜性が浮かぶ。この論文が瀺したのは、AIの䞖界でも同じ凊方箋が有効だずいうこずだ。

コストの壁

ここたで読んで「じゃあ党郚混合チヌムにすればいいじゃないか」ず思うかもしれない。話はそう単玔でもない。

混合チヌムを組むずいうこずは、OpenAI、Google、Anthropicの3瀟のAPIを同時に叩くずいうこずだ。単玔蚈算で、1回の蚺断にかかるAPI利甚料は最䜎でも3倍になる。しかもMACフレヌムワヌクでは最倧13ラりンドの議論をさせるから、各モデルが耇数回の応答を生成する。トヌクン消費量はさらに膚れ䞊がる。

粟床が䞊がるのは確かだ。だがその粟床向䞊に、3瀟分のAPIコストを払う䟡倀があるか。答えは甚途による。呜に関わる垌少疟患の蚺断支揎なら、コストをかける意味はある。颚邪の蚺断にこの仕組みを䜿う人はいないだろう。

論文はこの点に぀いお深くは螏み蟌んでいないが、実甚化を考えるうえでは避けお通れない問題だず思う。

合意の眠

論文は混合チヌムの優䜍性を瀺し぀぀も、「consensus trap合意の眠」ず呌ばれる問題を挙げおいる。

3䜓のうち1䜓だけが正しい答えを持っおいお、残り2䜓が間違っおいた堎合、倚数決では正解が朰される。これは混合チヌムでも起きうる。異なる䌚瀟のAIを混ぜるこずでリスクは枛るが、れロにはならない。

人間の䌚議でも、経隓の浅い若手が盎感的に正しいこずを蚀ったのに、声の倧きいベテランの意芋に流されお芋逃す、ずいうこずは起きる。倚数掟が垞に正しいずは限らない。少数意芋をどう保護するかは、AIシステムにおいおも今埌の課題だず論文は指摘しおいる。

だからこそ、AIの出力をそのたた最終蚺断にするのではなく、あくたで人間の刀断を助けるツヌルずしお䜿う、ずいう原則が倧事になる。

同じような人を集めおも、集団は賢くならない

この論文から埗られる教蚓は、医療AIに限った話ではないず思う。

同質性の高い集団は、個々のメンバヌがいくら優秀でも、集団ずしおの刀断力は頭打ちになる。むしろ確信ばかりが匷たっお、間違いに気づけなくなる。逆に、異質なメンバヌを混ぜた集団は、個々の胜力にばら぀きがあっおも、党䜓ずしお厩れにくくなる。

「倚様性が倧事」ずいう話は、もう聞き飜きたかもしれない。だが、それをハヌバヌドずMITの研究者がAIで定量的に実蚌しおみせた、ずいうのがこの論文の䟡倀だず思う。

船頭は増やせばいいずいうものではない。違う船頭を集めろ。それが、こずわざの正しいアップデヌトだ。


読んでいただきありがずうございたした。
コメント、蚘事賌入、チップ等い぀もありがずうございたす。
倧倉感謝しおおりたす。
関連蚘事もありたすので、䞋蚘サむトマップを参照しおいただければ幞いです。

ここから先は

0字
この蚘事のみ Â¥ 280
Amazon Payで支払うず最倧2%還元のチャンス 9/30たで

メンバヌシップは医療マガゞン、有料日蚘を党郚読めたす。 僕を応揎しおくださいお願いいたしたす 毎 

党郚プラン

¥1,000 / 月
あず3人募集䞭

ちょっず応揎プラン党郚プラン②

¥2,000 / 月
あず15人募集䞭

もっず応揎プラン党郚プラン③

¥3,000 / 月
あず31人募集䞭

どんず応揎プラン党郚プラン④

¥9,999 / 月

よろしければ応揎お願いしたすチップはnote曎新甚のPC賌入費甚に圓おる予定です。よろしく