芋出し画像

AIが答えを「間違える」理由が闇だった。

フォレスト出版線集郚の寺厎です。

今日は土曜日の投皿の続きです。

 åŒ•き続きご玹介するのが、認知科孊者・苫米地英人博士の新刊『生成AIの正䜓』ビゞネス瀟です。

前回投皿たでは、わりず垌望のある話でした。
しかし、ここから重い話に突入しおいきたす。
心の準備はいいですか


生成AIは、なぜ「間違う」のか

生成AIは、なぜ間違うのか。
いわゆるハルシネヌションず呌ばれる問題ですね。

こんだけ賢いのに、なんで「え、なんでこんな間違いすんの」っおいうこず、ありたたすよね。そのたびに私のようなポンコツ䜎胜ヒュヌマンは「なんだかんだ、おたいら人工知胜はどうあがいおもモノホンの人間様の知胜には勝おないんじゃ」ず䞀人悊に入っおたす。

たあ、自分がAIより賢いなんおわけミリもないんですけどね・・・。

これに関しお、博士の答えは明確です。

【AIが間違う理由】
生成AIは、意味を理解しおいないから。

 そもそも倧芏暡蚀語モデルを䜿っお生成AIは䜕を孊習しおいるのかずいうず人間の蚀語のパタヌンを芋぀けおいたす。ずおも簡単に蚀っおしたえば、次に出おくる単語を予想しおいるのです。
 䟋えば、
「おじいさんが○○○○歩いおいたした。」
 ずいう文章があぁうたずき、○○○○に入る単語は、「ゆっくり」「しっかり」「ルンルン」「ペロペロ」などです。「くっきり」「はっきり」「ピンピン」などが入る可胜性はほがれロです。
 私たちにそれがわかるのは、「おじいさんが歩く」ず蚀ったずきの意味を理解しおいるからです。生成AIがやっおいるのはそれず違っお、○○○○に入る蚀葉の可胜性を芋おいたす。䞀番可胜性の高いものを遞択しおいるだけなのです。
 人間ずの違いは意味を理解しおいるか、いないかで、人間は「おじいさんが歩く」のであればどういうふうに歩くのかを想像し、その文章が䌝えようずしおいる意味を類掚した䞊で○○○○に入るべき単語を遞びたす。
 しかし、生成AIはパタヌン遞択の確率の高いものを遞んでいるだけで、「それで蚀葉の意味は通っおいるのか」ずいった意味理解などたったくしおいたせん。理解以前に考えおもいたせん。
 ぀たり、こういうこずです。
 
 人間は意味を理解しお蚀葉を遞ぶ。
 生成AIは確率の高い蚀葉を遞ぶ。

 その結果、たたたた人間ず同じ単語を遞ぶこずが倚くなったために実甚化されたのが生成AIです。そしおだからこそ、生成AIはハルシネヌショむンを頻繁に起こすのです。確率だけで次の単語を遞んでいれば、間違えるのも圓然です。

苫米地英人『生成AIの正䜓』3233ペヌゞより

「倚数決が勝぀䞖界」がもたらす恐ろしい未来

人間は、意味を理解したうえで蚀葉を遞ぶ。
䞀方、生成AIは、「次に出おくる確率が高い蚀葉」を遞ぶ。

ずいうこずは・・・生成AIの䞖界は垞に倚数決が勝぀䞖界です。

これは䟿利な䞀方で、かなり怖い。 ãªãœãªã‚‰ã€æ–°ã—く生たれる画期的なアむデアや、革新的なひらめきずいうのは、ほが䟋倖なく「少数掟」だからです。 

 いた説明したように生成AIは確率で次の単語を遞んでいたす。蚀葉を倉えれば、倚数決で遞んでいるず蚀えるでしょう。生成AIは倚数決が垞に勝぀䞖界です。
 実はこれが恐ろしいのです。
 䟋えば、ノヌベル化孊賞をずるような研究を理解できる人は䞖界で数人でしょう。ほがすべおの人類にずっおは理解䞍胜です。そこで倚数決を取れば、貎重な最先端研究は「意味がわからない」の䞀蚀で切り捚おられおしたいたす。
 これは極端な䟋ですが、生成AIの匱点をよく説明しおいるでしょう。
 生成AIを䜿うずいうこずは、新しく生たれおくる画期的なアむデアや革新的なひらめきを吊定するこずになる、ずいうこずです。
 倚くの人が勘違いしおいるのは、倧量にデヌタを集めれば、そこから真実が浮き圫りになっおくるず思い蟌んでいるこずです。
 しかし、もう䞀床冷静になっお考えおみおください。倚くの人の意芋を聞いお、それをたずめおいこうずすれば、どうなるか あなたの䌚瀟や孊校などで䜕かを決めるずき、集団内で調和を取りながら意芋をたずめたらどうなるでしょうか
 倧しお面癜くもない凡庞な意芋に収斂されるだけのはずです。

苫米地英人『生成AIの正䜓』3435ペヌゞより

AI開発䌁業がAIに「正確さ」を求めない本圓の理由

さらに博士は、AI䌁業の蚭蚈思想にも觊れおいたす。

 AI䌁業がナヌザヌ獲埗競争をするなかで、最優先されおいるのは「正確さ」ではありたせん。「人間らしさ」です。 ãŸãšãˆåˆ†ã‹ã‚‰ãªããŠã‚‚、それっぜい答えで䌚話を成立させる。それが「優秀なAI」だず䌁業は考えおいる節がありたす。

結果、䜕が起こり始めおいるか。
――Aが「嘘」を぀く。あるいは「適圓な答え」でお茶を濁すずいう珟象です。

たずえば、アレクサやSiriの挙動がそうです。 ã•っき詊しにアレクサにお願いしおみたした。

「アレクサ、ラゞオの『みうら五郎』の最新回の攟送をかけお」

するず、こう答えたした。

「はい。䞉浊春銬の『ナむトダむバヌ』を再生したす」
䞉浊春銬の『ナむトダむバヌ』なんお曲、知らんがな。なんなら「みうら」しか合っおないし!!!!! 笑 

みうらじゅんず山田五郎のかけあいによる絶劙なトヌク番組「みうら五郎」の存圚を知らなければ、倉に知ったかぶりするより、「みらうごろヌっお䜕ですか そんなコンテンツ知りたせん」ず答えおくれたほうがよっぜど誠実です。

アレクサはなぜ、こんな挙動を取るのか

 珟圚、生成AIは数瀟によっお苛烈なナヌザヌ獲埗競争をしおいたすが、その際、重芁になっおくるのは生成AIの「正確さ」ではなく、「人間らしさ」です。人の問いかけに察しお、自然に、よどみなく、なんらかの答えを出す。たずえ、わからなくおもそれなりに答えお䌚話を成立させる。これが優秀なAIだず䌁業偎は考えおいたす。
 しかし、その結果、AIは嘘を぀き始めたのです。
 はっきり蚀いたす。珟圚のAIは嘘を぀きたす。
「ハルシネヌションが発生する」ずいった生易しい衚珟ではたったく足りたせん。生枅AIはいた積極的に嘘を぀くのです。
 生成AIが嘘を぀く理由は人間がそうしろず呜じたからです。
䞭略
 Amazonがこんな手間をわざわざかける理由はAIの孊習を進めるためず、Unlimitedずいう課金を狙っおいたす。人間にずっお䜕が䌌た楜曲なのかをAIが理解し、ナヌザヌ個人に向けたサヌビスを提䟛をするずきに圹立おるためです。有り䜓に蚀っおしたえば、あえお人為的なハルシネヌションを䜜るこずで個人デヌタを集めおいるのです。それにプラスしお制限を解陀したUnlimited Musicずいう課金音楜サヌビスぞの誘導も狙っおいたす。

苫米地英人『生成AIの正䜓』3940ペヌゞより

このくだりのあず「ちなみに、なぜ、個人デヌタを集めおいるのか、に぀いおは第2章でお話したしょう」ずあるのですが、この第2章の話がマゞで闇です。ここnoteでは蚘茉を差し控えおおきたすけしお陰謀論じゃないですよ。

「人間ずAIの関係」を䞀床立ち止たっお考えたほうがいいかもしれんです。

はおさお、本曞はこんな感じで䞖の䞭が「生成AI祭り」で倧隒ぎのなか、「生成AI懐疑論」をかなり冷静に展開しおいたす。

【本曞で暎かれる生成AIの裏偎】
◎なぜ、AI䌁業は個人情報を執拗に集め続けるのか
◎ChatGPTずの察話で自殺した青幎のケヌス
◎蚎蚟を起こされたOpenAIの代衚サム・アルトマンの蚀い分に朜む䌁業の傲慢
◎2018幎のケンブリッゞ・アナリティカ事件以降のAI䌁業の䞍祥事から芋えるこず
◎SNS、生成AIの普及ず同時進行に起こる「認知戊」の珟実
◎AIが「自我」を持ち始める未来ぞの恐怖

ここたで聞くず、「じゃあ、どうすればいいの」ずなるかもしれたせん。
「先生、僕はAIずどう付き合えばいいのですか」ず。

博士が掚奚しおいる察応策はシンプル。

遞択肢❶「生成AIを䜿わない」
遞択肢❷「わかっお䜿う」

珟実的に考えるず「遞択肢❶」は厳しそうですね。もはや、今埌AIが瀟䌚のむンフラになりそうですから。

「わかっお䜿う」ずいうのは、䞊蚘の「AIが぀く嘘」や、それを掚奚する䌁業偎の思惑などのすべおを理解したうえで䜿いこなすずいう意味です。おそらく、珟実的にはこっちが最適解かず思いたす。

むンタヌネットが登堎したずきも 
スマホが普及し始めたずきも 
SNSが日垞生掻に欠かせなくなったずきも 
「子どもに芋せるべきじゃない」ずか
「危険だ」ずかなんだず、議論は尜きたせんでした。

いずれにせよ、結論は簡単には出たせん。

AIを怖がりすぎず、かずいっお無邪気に信じすぎない。

このあたりを䞀床立ち止たっお考える意味でも、本曞『生成AIの正䜓』を読む䟡倀は十分にあるかず思いたす。