Deep Dive

これまで生成AI（特にトークン予測モデルベースのLLM）の限界といった場合、基本的には「世界モデル（World Models）」の不在とか、場合によっては「常識（common sense）の欠如」によるのではないか、といった話題が長らく界隈で議論されてきました。 ただ、実のところそれらは「そういった『生成AIに備わっていて欲しい』能力を技術的にどう表現・実装するか」というアプローチの問題に過ぎないという見方もできます。つまり、ある文脈では「世界モデル」と呼ばれ、また別の文脈では単に「常識」や「外部ツールの活用」、さらには「推論を司るための別個の言語モデル」といった形で、様々なバリエーションで語…