WorldCastが分散型マルチプレイヤーでリアルタイム生成を実現。
この記事のポイント
- 協調型生成はプレイヤー数でコストが増大
- 各クライアントが状態を交換して分散生成
- CS2でリアルタイム・画質安定を確認
どこで使えるか
分散型マルチプレイヤーでリアルタイム生成を組む人向け。長時間ロールアウトでも画質安定。 arXivで公開済み Counter-Strike 2環境での実験結果
スポンサーリンク
解説
かみくだいて説明します
Ziyang Ye たちの研究チームが、arXiv に WorldCast という分散型マルチプレイヤーのワールドモデルを発表しました。従来の手法は参加者が増えるほど計算コストが膨らんでいましたが、WorldCast では各プレイヤーの端末でローカルクライアントを動かすことで、中央のサーバーに依存しない構成を実現しています。
参加者が増えるとコストが膨らむのが従来の課題だったんですね。では、各端末が独立して動く場合、他のプレイヤーの動きや位置情報をどう共有しているんですか?
各クライアントは、動画と操作入力からプレイヤーの位置を推定するステートモデルを内蔵しています。推定した位置情報をカメラ方向に射影したカメラアラインドなプレイヤー状態フィールドを他のクライアントとやり取りする形で、描画の位置と向きを合わせています。これにより、従来の同時多視点生成方式と比べて、プレイヤーの描画レートが 10 倍以上に向上しています。
10 倍以上の描画レート向上ですね。カメラ方向に射影した状態フィールドというのは、空間上のデータをやり取りしているという理解です。
正確にはプレイヤーの座標や向き、そして他のプレイヤーがどこにいるかを示す空間上のデータです。例えば、プレイヤーが壁の後ろに回ったとき、自分の画面では壁しか映っていませんが、フィールドを通じて壁の向こう側に他のプレイヤーがいることが分かれば、その位置を正確に描画できます。共有シーン状態という仕組みでは、各クライアントが生成した映像情報を互いに使い合うため、ラウンド全体を通して空間の見た目が揃うようになっています。
壁の向こう側の情報もフィールドで共有して、互いの映像を再利用するんですね。では、開発者側からすると、この手法は既存のゲームエンジンに組み込みやすい形ですか。
具体的な組み込み手順や既存エンジンとの互換性については要旨に記載がありません。各クライアントはリアルタイムで動作し、プレイヤーの状態とシーンの状態だけをやり取りします。Counter-Strike 2での実験では、1時間を超えるロールアウトでも画質が安定していました。
1 時間以上も画質が安定するんですね。状態情報だけやり取りする設計なら、通信帯域の心配は比較的軽くなりそうです。
通信負荷が抑えられる設計であることは確かです。クライアント間でやり取りするのは状態情報だけであるため、大量の生映像を送信する従来の方式に比べて通信負荷は大幅に抑えられます。
通信負荷が抑えられるなら、開発現場での採用ハードルは下がりそうです。ステートモデルが位置を推定する精度は、実際のゲームプレイでどのくらい正確に追従しているんですか。
学習時には記録されたプレイヤー位置とマップ形状を用いており、生成動画と操作入力から位置を推定する仕組みです。カメラに合わせたプレイヤー状態フィールドにより、他のプレイヤーの描画位置が正確に反映されるようになっています。
最後に、実用化に向けて現時点で最も課題になりそうな点はどこだと考えられますか。
各クライアントは生成映像と操作入力から自分の位置を推定し、共有シーン状態でほかのクライアントの描画結果を使い回して見た目の一貫性を保ち、画像品質は長時間の実行でも安定している。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。