知識格子で推論を確定化させる LatWeave、LLM を使わない QA の話

論文

知識格子で推論を確定化させる LatWeave、LLM を使わない QA の話

スポンサーリンク

LatWeaveは、知識格子で推論を確定化。39,093問で3段階推論の正解率が0.9975。

この記事のポイント

  • 既知と推論を確率計算で混同
  • 知識格子と3演算子で決定論化
  • MetaQA 39,093問 0.9975

数字で見る

この記事に出てくる数字

MetaQA質問数 39,093
3ホップany-hit 0.9975

どこで使えるか

事実に反する回答や監査不能な推論を排除したい人向け。知識が不足した場面での構造的中止にも対応。 arXivで公開済み LLMは構築・計画側のみ、回答生成はゼロLLM

スポンサーリンク

解説

かみくだいて説明します

LLMやRAGは、調べた情報が正しいかどうかが結局わからないですよね?
確かにその通りです。確率で回答を生成する仕組み上、根拠の検証が不可能な状態が常態化しています。
既存の手法だと、知識と推論を混ぜて処理しているから、嘘をついても追跡できないんですよね?
そうです。ナイーブなGPU実装や単なる検索拡張生成では、回答がでたらめでもシステムが自己正当化してしまう壁があります。
arXivで公開されたLatWeaveという手法は、LLMを構築と計画側だけに使い、回答生成パスは完全にゼロLLMにしています。
そのアプローチって、具体的にはどういう仕組みなんですか?
知識を駅伝のリレーではなく、複数のフィルターを重ねる精密な濾過装置のように設計しています。メートで制約を絞り込み、コンペアで順序を比較し、アブステインで構造上回答を拒否します。
確率に頼らず論理演算で答えを導くんですね!
3つの演算子にコンパイルして、答えの生成パスはゼロLLMで監査可能です。
実際の精度はどうなるんですか?
知識が完全なMetaQAでは3ホップ超えでも0.9975を達成し、テンプレート化された2WikiMultihopQAではEM 0.865を記録しています。
従来の構造拡張RAGの再現結果よりも明らかに上回っているんですか?
はい。完全知識環境では教師ありKBQAに匹敵し、情報が不足するIIRCではアブステイン精度0.971、リークレート0.029で構造的に回答拒否を実現しています。
でも、特定のデータ形式に最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
はい。オープンテキストや深い推論が必要なデータセットでは性能が低下します。
実際の試し方はどうすればいいんですか?
公開知識への質問応答は、項目ごとに再現可能であり、回答パス上の各ステップは再計算可能です。
このパラダイムの動作範囲を六つの公開ベンチマークで特徴づけています。
LatWeaveの回答生成パスはゼロLLMで監査可能です。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文