<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom" xmlns:content="http://purl.org/rss/1.0/modules/content/">
  <channel>
    <title>World Model on Grayrecord Technow Blog</title>
    <link>https://technow.grayrecord.com/tags/world-model/</link>
    <description>Recent content in World Model on Grayrecord Technow Blog</description>
    <image>
      <title>Grayrecord Technow Blog</title>
      <url>https://technow.grayrecord.com/images/Grayrecord-technow.png</url>
      <link>https://technow.grayrecord.com/images/Grayrecord-technow.png</link>
    </image>
    <generator>Hugo -- 0.160.1</generator>
    <language>ja</language>
    <lastBuildDate>Sun, 26 Apr 2026 10:00:00 +0900</lastBuildDate>
    <atom:link href="https://technow.grayrecord.com/tags/world-model/index.xml" rel="self" type="application/rss+xml" />
    <item>
      <title>Lecuns Left and Next</title>
      <link>https://technow.grayrecord.com/post/lecuns-left-and-next/</link>
      <pubDate>Sun, 26 Apr 2026 10:00:00 +0900</pubDate>
      <guid>https://technow.grayrecord.com/post/lecuns-left-and-next/</guid>
      <description>&lt;p&gt;なにげに、シリーズになってしまっていますが。&lt;a href=&#34;https://technow.grayrecord.com/post/metas-turmoil-and-loss-of-talent/&#34;&gt;前回&lt;/a&gt;のところから考えると、Metaの激震の一つは、MetaのAI研究の象徴であった &lt;strong&gt;ヤン・ルカン（Yann LeCun）の辞任&lt;/strong&gt; であるのは言うまでもありません。ルカンといえば、福島先生のネオコグニトロン(1980年)に着想を得て、そこにバックプロパゲーションによる学習を組み込み、LeNet(1989年)という形で、CNNを切り拓いたのは言うまでもありません。&lt;/p&gt;
&lt;p&gt;ルカン氏は、ザッカーバーグが現在「物量(GPU)とデータ」のごり押しで、次世代モデルを作ろうとしているのに対し、一貫して「今のLLMの槍から(次の単語の予測)」では猫程度の知能にも到達できないと、批判してきた人物です。&lt;/p&gt;
&lt;ul&gt;
&lt;li&gt;&lt;strong&gt;Metaの現状&lt;/strong&gt; : ネオコグニトロンから続く「構造による理解」を軽視、ひたすら計算資源を燃やす方向にシフト。&lt;/li&gt;
&lt;li&gt;&lt;strong&gt;ルカンの新天地&lt;/strong&gt; : 5000億円という、Metaの135兆円にくらっべれば、コンパクトな資金で、構造的・因果的な「世界モデル」を実現しようとしている。&lt;/li&gt;
&lt;/ul&gt;
&lt;p&gt;僕なりの考えはすでに、&amp;quot;&lt;a href=&#34;https://technow.grayrecord.com/post/wicked-illustration/&#34;&gt;AI の推論アーキテクチャと「System 2」の誤解&lt;/a&gt;&amp;quot; に示しています。System 2 は、これらの技術進展の延長線上にあるものではなく、全く別の枠組みです。先人がなぜ System 1（直感的・高速）と System 2（論理的・低速）を明確に切り分けたのかを再考すべきです。System 1 をどれほど高度化しても、それは本質的な System 2 にはなり得ません。&lt;/p&gt;
&lt;p&gt;そして、その道標の実験の一つが、Zennで既に公開した、&amp;quot;&lt;a href=&#34;https://zenn.dev/gorn/articles/40264a5d6a42a9&#34;&gt;Mojoで実装する「多世界解釈」並列バックトラック：N-Queen問題を例に&lt;/a&gt;&amp;ldquo;です。&lt;/p&gt;
&lt;p&gt;大雑把に言えば、現在、未解決の問題というのは、いくつかあり、&lt;/p&gt;
&lt;ul&gt;
&lt;li&gt;フレーム問題&lt;/li&gt;
&lt;li&gt;時相倫理&lt;/li&gt;
&lt;li&gt;自我&lt;/li&gt;
&lt;/ul&gt;
&lt;p&gt;などが、知られています。&lt;/p&gt;
&lt;p&gt;Transformerの二乗の呪いは、SSMなどで解決できるかもしれません。しかし、ルカン氏の疑問は、おそらく、そんなところにはないのは明らかです。二乗の呪いというのは、TransfomerのAttention機構のオーダーがコンテキスト長の二乗になる現象です。これは、Attention機構自体に潜んでいます。そして、その解決として、期待されているのが、状態空間モデルを活用した、MambaなどのSSMです。&lt;/p&gt;
&lt;p&gt;しかし、それは、ルカン氏の疑問のそもそも、つまり、次の語の予測では頭打ちではないのかという問題の答えにはなっていません。どう考えても、System 2の理想とは程遠い。&lt;/p&gt;
&lt;h2 id=&#34;lecunの主張&#34;&gt;LeCunの主張&lt;/h2&gt;
&lt;div class=&#34;mermaid&#34; align=&#34;center&#34;&gt;
    
graph TD
    subgraph lecun [LeCunの主張]
        pattern[✖LLMは「テキストの統計的パターン」を学んでいるだけ]
        notworld[✖物理世界の理解がない]
        canot[✖常識推論ができない]
        world[☑必要なのは「世界モデル」]
        phi[☑物理法則、因果関係、時間の概念を理解するAI]
    end

&lt;/div&gt;

&lt;p&gt;先の提起で言えば、フレーム問題、時相論理とは、物理法則、因果関係、時間の概念をそのまま、言い表しています。&lt;/p&gt;
&lt;p&gt;この辺の事情は、&amp;quot;&lt;a href=&#34;https://qiita.com/emi_ndk/items/f3eadd586f356c20ef17&#34;&gt;【激震】ヤン・ルカンがMetaを去った。5000億円で「世界モデル」研究所を設立&lt;/a&gt;&amp;ldquo;がよく纏めています。&lt;/p&gt;
&lt;p&gt;この図を思い浮かべてほしいのです。&lt;/p&gt;
&lt;div class=&#34;mermaid&#34; align=&#34;center&#34;&gt;
    
graph TD
    subgraph Layer3 [Layer 3: Orchestration]
        RAG[RAG]
        ReAct[ReAct]
        MCP[MCP]
        Agents[Agents]
    end
    subgraph Layer2 [Layer 2: Inference Strategy]
        CoT[CoT]
        ToT[ToT]
        Planning[Planning/Search]
    end
    subgraph Layer1 [Layer 1: Architecture]
        Transformer[Transformer]
        SSM[SSM]
        RWKV[RWKV]
        MoE[MoE]
    end
    Layer1 --&gt; Layer2
    Layer2 --&gt; Layer3

&lt;/div&gt;

&lt;p&gt;CoT、ToT、GoTに関しては、&amp;quot;&lt;a href=&#34;https://note.com/green_donguri/n/nb4d0c52b9202&#34;&gt;CoT・ToT・GoTとは？今でも使える理由と使い分け&lt;/a&gt;&amp;quot;、あたりがよく纏まっていると思います。とはいえ、先の図の通り、それだけでは、先の図のLayer 2にすぎません。System 1やSystem 2の別はそれよりも、さらに、上の階層にあります。&lt;/p&gt;</description>
    </item>
  </channel>
</rss>
