推論の筋道を追って画像編集を評価する基準を広げ、未解決の難しさを示す

論文

推論の筋道を追って画像編集を評価する基準を広げ、未解決の難しさを示す

スポンサーリンク

RISEBench++が画像編集の推論能力を6次元で評価。最强モデルの正解率は56.6%。

この記事のポイント

  • 複雑な指示に従い外見を保つ視覚編集が困難
  • 65タスク型1000件で6次元の推論を評価
  • GPT-Image-2.5 Sunburstが最高精度56.6%

数字で見る

この記事に出てくる数字

ベンチマーク数 1000
評価モデル数 58
最高精度 56.6%

どこで使えるか

複雑な指示で画像を編集したい人向け。推論能力が求められる編集タスクを網羅的に評価 GitHubで公開済み コードとベンチマークデータが同一リポジトリ

スポンサーリンク

解説

かみくだいて説明します

2026-10-09に、Large Multi-modality Models、つまり複数の情報源を扱う人工知能が画像を編集する際、複雑な指示に従うことや外見の統一を保つことがまだ難しいことを検証するベンチマーク、RISEBench++が公開されました。6つの推論の次元と65種類の細かいタスクに分けられ、1000人の専門家が手作業で注釈をつけたテストケースが収録されています。
画像編集の精度を測る基準がこれほど細かく分類されたのは初めてですね。推論の次元が6つあるとのことですが、具体的にどのような切り分けをしているんですか?
時間の変化を追う時間推論、原因と結果をたどる因果推論、場所や配置を考える空間推論、ルールや条件を満たす論理推論、もしもという仮定で考える反事実推論、そしてこれらを組み合わせた複合推論の6つです。
なるほど。外見を崩さずに条件だけを変換する難しさが数値で出せるわけですね。では、その基準で58の手法を評価した結果、最も精度が高かったモデルのスコアはいくつでしたか?
最も精度が高かったのはGPT-Image-2.5 Sunburstで、正確率は56.6%でした。58の手法の中には34のオープンソースモデル、19のクローズドソースモデル、それに5つのエージェント型手法が含まれていますが、正解に最も近いモデルでも半分強の精度しか出せなかったことになります。
最も精度が高い方法でも六割に届かないということは、まだ実用レベルには達していないということですか。
開発者は自前のモデルがどの推論の次元で弱点を持っているかを診断できますし、研究者は65種類のタスクごとの性能差を比較して、次にどの方向性を開拓すべきかの指針にできます。評価は人間と人工知能の両方で行うLMM-as-a-judgeという手法を組み合わせているため、主観が入りにくい数値が得られます。
LMM-as-a-judgeは人工知能が人工知能の回答を採点する仕組みですね。そこがまだ掴めません。もう少しやさしく言うとどうなりますか?
人間が答え合わせをする代わりに、別の人工知能に正解と違う回答を並べて比較させて、どちらが指示通りに編集できているかを判定する仕組みです。試験官が答え合わせをする代わりに、別の先生に採点してもらうイメージです。
別の先生に採点してもらうイメージですね。では、モデルの学習を一切行わないRISE-Agentという手法は、現場の技術者が既存のモデルにどう組み込めるんですか?
学習不要なので、すでに動く画像編集モデルの上に、推論で計画を立て、必要なツールを呼び出して実行し、結果を検証者が修正するまでの流れを自動で回すレイヤーを被せるだけで使えます。複雑な指示を一度に処理するのではなく、段階的に分解して実行する仕組みになっているため、単発の編集では弱いモデルでも精度が上がるケースが確認されています。
段階的に分解して実行する仕組みで精度が上がるんですね。最後に、この分野の今後の展開で、まだ解けていない課題はどのようなものがありますか?
1000件のテストケースを英語と中国語でリリースし、指示推論、外見の一貫性、視覚的妥当性を人間とLMMの両方で評価しました。さらに、推論駆動の計画、ツール拡張実行、検証者による改善を統合したRISE-Agentを導入しました。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文