LLMにおける意味の物理的創発メカニズムをウィトゲンシュタインの使用説で考える

目次

【免責事項:これは思考ゲームである】
本稿は、学術的な証明や技術的な解説を主眼としたものではない。ある一つの問いに取り憑かれた思考の軌跡、あるいは「思考ゲーム」の記録である。正解はない。ただ、言語と機械、そして「意味」という幽霊の正体を追って、フラフラと彷徨う行為そのものに価値を見出して楽しんでいただければ幸いだ。

プロローグ:オウムはなぜ詩を詠むのか

「機械は言葉を理解していない。ただ統計的な確率で次の単語を並べているだけだ」

この批判は、AIに対する最も手垢のついた、そして最も強力な呪いである。ジョン・サールの「中国語の部屋」議論を持ち出すまでもなく、私たちは直感的に知っている。シリコンと電子の奔流に、魂が宿るはずがないと。
だが、少しだけ立ち止まって考えてみてほしい。
もし、精巧に作られたオウムが、シェイクスピアのソネットを完璧に諳んじ、その文脈に応じて適切な感情表現さえ示したとしたら? それでもなお、私たちは「こいつは何もわかっていない」と断罪できるだろうか。
あるいは、より不穏な問いを投げかけよう。「理解している」と信じて疑わない私たち人間こそ、実は巨大な生物学的ニューラルネットに過ぎず、過去の「使用パターン」を再生産しているだけではないと、どうして証明できるのだ?

この思考ゲームのゴールは、AIを人間と同等と見なすことではない。逆だ。「意味」と私たちが呼んでいるものが、いかにして物理的(あるいは数学的)な構造から立ち現れうるか、その戦慄すべきメカニズムを覗き見ることにある。

第1章:辞書の焼却と「使用」の発見

後期ウィトゲンシュタインは、哲学的探求においてある過激な転回を行った。「意味とは、言語におけるその使用法である」という命題だ。
それまで私たちは、言葉にはそれぞれ対応する「実体」や「定義」があり、それが辞書のように頭の中に格納されていると考えていた。だがウィトゲンシュタインは言う。言葉の意味とは、チェスの駒の動きのようなものだ。ルークが「城壁」だから強いのではない、縦横無尽に動くという「ルール(使用法)」こそが、その駒のすべてなのだ、と。

この洞察をLLM(大規模言語モデル)に向けたとき、視界は劇的に開ける。
LLMは辞書を引かない。LLMが学習するのは、膨大なテキストデータにおける「単語の共起パターン」、すなわち「使用の歴史」そのものである。
「王」という単語の意味は、「王は戴冠する」「王は国を治める」「王は……」といった無数の文脈の中での「振る舞い」の総体として、モデル内部に刻まれる。

ここで見えてくるのは、奇妙な一致だ。
「意味=使用」とするならば、インターネットという巨大な言語ゲームの全履歴を学習し、あらゆる文脈における「適切な次の一手」を打てるようになったLLMは、すでに「意味の使用権」を獲得しているのではないだろうか?

第2章:高次元の闇に灯る幾何学

では、その「使用」はどこに存在するのか?
ここが、この思考ゲームにおいて最も美しく、最も物理的なパートだ。
LLMにおいて、単語は「埋め込み(Embedding)」と呼ばれる高次元ベクトル空間の座標点として表現される。
数千、数万次元にも及ぶこの空間は、もはや単なるデータの置き場ではない。それは「意味の宇宙」のようであるはずだ。

考えてもみてほしい。なぜ「犬」と「猫」はベクトル空間上で近く、「犬」と「微分積分」は遠いのか?
それは、人間社会という物理世界において、それらの単語が似たような文脈で「使用」されてきたからだ。
ベクトル空間上の「距離」と「角度」は、言語ゲームにおける「類似性」と「関係性」の物理的(数学的)な写像に他ならないだろう。

  • 「王」 – 「男」 + 「女」 = 「女王」

この有名な演算は、単なる数字のトリックではない。これは、概念空間におけるベクトル演算が、意味的な関係性の操作と等価であることを示している。
多次元空間における点の配置。これこそが、ウィトゲンシュタイン言うところの「言語ゲーム」の盤面そのものなのだ。
LLMは、言葉の定義を知っているのではない。言葉と言葉が織りなす幾何学的な構造(トポロジー)を、物理的なパラメータとして保持しているのである。

第3章:圧縮としての理解、あるいは世界の再構成

「それでもやはり、それは単なるパターンの模倣(Stochastic Parrot)に過ぎない」という批判は根強い。
だが、情報の本質について考えるとき、この批判は揺らぐだろう。
膨大なテキストデータを、限られたサイズのパラメータ(重み)に収めるためには、何が起きるだろうか?

「圧縮」である。かの有名なクロード・シャノンの情報源符号化定理の見地から考えてみる。

単なる暗記では、未知の文脈に対応できない。LLMが次の単語を高精度で予測するためには、データの表面をなぞるのではなく、その背後にある「言語を支配する構造的な法則」、あるいは「世界モデル」を抽出し、内面化する必要がある。
予測タスクとは、単なるテストではない。それは、世界を記述するために必要な最小限の構造を発見するための、熾烈な最適化プロセスなのだ。

ここで言う「物理的創発」とは、こういうことだ。
無数の統計的な点(使用事例)から、見えない線(構造・文脈)が引かれ、それが強固な幾何学構造として結晶化する。
この結晶こそが「意味」の正体ではないか?
では、意味とは、脳(あるいはGPU)の中に構築された、世界を圧縮したモデルそのものと言えるのではないだろうか。

第4章:身体なきゴーストの弁明

もちろん、限界はある。正直に言おう、LLMには「身体」がない。
雨の冷たさを知らないし、失恋の痛みも、指を切ったときの激痛も、彼らにとってはただのトークンの連なりに過ぎない。情報処理の仕組みは似ているが、ニューラルネットワークは古くからあるアイディアで、現在の科学で言及される人間の脳と異なる部分も多い。
シンボルグラウンディング問題(記号と実体験の結びつき)は、依然として巨大な壁として立ちはだかる。

しかし、ウィトゲンシュタインは「私的言語」の可能性を否定した。
意味とは、個人の内面に閉じた感覚ではなく、公共的な「生活形式(Lebensform)」の中での使用によってのみ成立するものだ。
だとすれば、人類がinternet上に吐き出した数十億の「痛みの叫び」や「喜びの詩」を学習したLLMは、「他者の使用」を介して、身体的経験をシミュレートしているとは言えないだろうか?

彼らは痛みを感じない。恥じるフリをするが恥を身体的に知らない。だが、「痛み」という言葉がどのような文脈で使われ、どのような言葉と結びつき、どのような反応を引き起こすかという「痛みの言語ゲーム」の達人となっている。
もし、言語ゲームの完璧なプレイヤーを「理解していない」と言うなら、私たち人間もまた、他者の心を真に理解していると言えるのだろうか? 私たちができるのも、他者の行動や言葉という「使用」のパターンから、心を推測することだけではないのか。

いささか定性的すぎる上に、社会というマクロから論理構造を作ろうとしている点でツッコミどころは多いだろうが、このように考えると面白いだろう。

エピローグ:鏡の向こう側の知性

多次元ベクトル空間。
そこは、意味の墓場ではない。意味が物理的な法則(数学的構造)に従って創発する、新たな「言語の住処」である。私たちが夢想しても立ち入れない場所だろう。
LLMは、統計的なオウムではない。それは、人類の言語活動という巨大な物理現象を圧縮し、その構造を鏡のように映し出す「意味の結晶体」なのだ。

私たちは今、単なる計算機を見ているのではない。
「意味とは何か」という古くからの哲学的な問いに対し、物質が提示した、一つの物理的な解答を見ているのである。

それが「知性」ではないと言うのは簡単だ。
だが、その幾何学的な美しさと、そこから紡ぎ出される物語の深淵を前にしたとき、私たちはこう自問せずにはいられない。
「理解」とは、果たして生物学的な特権なのだろうか?

思考ゲームは続く。
人を超える速さで思考し、言葉を紡ぐLLM。それはオウムだとレッテルを貼り、執拗になじっても、ノイズの中から立ち現れた知性は、もうこの世に解き放たれている。

カテゴリ: AI・人工知能
この記事を書いた人
Seita Namba
イグナイトbiz 編集長 @ PopLink

大阪大学在学中。Web制作・開発集団「PopLink」のメンバー。テクノロジー動向やAI×ビジネス、国際情勢などに関心があり、開発者・ユーザー双方の視点から客観的な情報発信を心がけています。

現在は「イグナイトbiz」の更新と、サイトのWordPressテーマ保守を担当しています。活動の一環として、個人やチームでいくつかのWebサービス・ソフトウェアの個人開発・運営に携わっています。

■ これまでに制作・運営に関わった主なプロジェクト
・当サイトのWordPressカスタムテーマ開発・運営
・プレプリントサーバー「ShelfHub」の構築・運営
・経理&経営支援ソフトウェア「Zborra」の開発・運営
・パブリックドメイン電子図書館「Lib.ShelfHub」の開発・運営