VLMがダイビングの演技を採点する力を測る実験、スポーツの半自動評価に使えるか

論文

VLMがダイビングの演技を採点する力を測る実験、スポーツの半自動評価に使えるか

スポンサーリンク

VLMのダイビング演技採点力が、アンサンブル学習で相関0.67に向上。

この記事のポイント

  • VLMの単体では相関が0.32未満
  • 4モデルのアンサンブルで0.67を達成
  • テキスト推論が数値サブスコアを上回った

数字で見る

この記事に出てくる数字

VLM単体相関 below 0.32
アンサンブル相関 0.67
モデル数 4

どこで使えるか

GitHubで公開済み 4モデル構成で0.67。VLM単体は0.32未満

スポンサーリンク

解説

かみくだいて説明します

Henry O. Velesacaらの研究チームが、オリンピックの飛込み競技の採点を人工知能で自動判断する手法を、2026年9月17日にarXivに論文として公開しました。専門の審判員が使う評価基準を、映像と文章を同時に読み解くモデルに読み込ませ、採点の相関値を0.67まで引き上げることに成功しています。
専門の審判員に代わるツールになるということですね。このモデルは、飛込みの動作をどうやって点数に結びつけているんですか。
飛込みの動作は着水までの一連の流れを段階ごとに区切り、それぞれの段階で得られる数値と、モデルが文章で説明する理由付けの両方を使っています。数値だけを使うより、文章で書かれた分析の方が採点との一致度が高かったため、複数のモデルの答えを組み合わせる仕組みで最終的な点数を算出しています。
文章で書いた分析の方が数値より正確だと。
単独のモデルでは相関係数がおよそ0.32以下でしたが、4つのモデルを組み合わせることで0.67まで向上しました。相関係数は実際の点数とモデルの点数がどれくらい一致しているかを示す数字で、1に近づくほど正確です。
相関係数が0.32から0.67に跳ね上がったということですね。この手法は、実際に競技の審判を補助する段階まで来ているんですか。
まだ研究段階の検証ですが、モデルが判断の理由を文章で残すため、審判がどこで点数を落としたかを確認する補助ツールとして使える可能性があります。ただし、実際の大会で公式の判定に使うには、まだ解けていない課題がいくつか残っています。
理由を文章で残せるのが強みだと。
論文では飛込み競技専用のデータセットで検証しているため、他の競技への適用についてはそこはまだ分かっていません。飛込みの動作特性に合わせて学習を進めた結果であり、汎用性については今後の検討が必要です。
では、飛込み専用のデータで試した段階だと。
論文の締めくくりでは、判断の根拠を可視化できる半自動の評価支援ツールとしての可能性を強調しています。コードは公開されていますが、実際の大会運用に向けた改良や、他のスポーツへの拡張については具体的な日程や方針は示されていません。
最後に、この研究が競技の審判の現場に与える影響はどれくらいですか。
VLMは説明可能な半自動スポーツパフォーマンス評価のための補助ツールとして強い可能性を秘めています。ただし、Spearman相関係数0.67という結果はあくまで研究段階のものであり、実際の大会で審判を完全に置き換えるものではないという位置づけです。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文