CUTLASSのカーネル選択手法が、GPU の動作を推定して候補をランク付けする手法を提案。
この記事のポイント
- CUTLASSカーネルの自動選択が難しかった
- 490万カーネルで学習し候補を順位付け
- 構造ベースより40%、NVIDIAより64.2%改善
数字で見る
この記事に出てくる数字
| カーネル数 | 490万 |
|---|
どこで使えるか
GPUカーネル選択を自動化したい人向け。490万カーネルで学習し候補を順位付け arxivで公開済み 490万カーネルの学習データ使用
スポンサーリンク
解説
かみくだいて説明します
Shriram Chandranらの研究チームが、2026年9月29日にグラフィックプロセッシングユニットの演算ライブラリ CUTLASS におけるカーネルの自動選択手法について論文を発表しました。同じ演算を担うカーネルが数万個も存在するため、すべてを試す自動調整はコストがかかりすぎる問題を、機械学習で解決するものです。
確かに試すだけでも大変そうです。実際に組み込む技術者から見ると、この手法は既存の調整作業を置き換えるものですか。
既存の手動で設計した性能ルールや、設定値だけを見て推測する手法に代わるものです。候補の設定に、その選択がチップに与える影響を静的に計算した推定値を足すことで、モデルが正しいカーネルを順位付けできるよう設計しています。順位付けはテストの点数で順位を決めるような仕組みです。
設定値にチップへの影響の推定値を足すんですね。従来は形だけを見ていたため、特性を反映しにくかったわけですね。
従来は設定値の形だけを見ていたため、同じ演算でもチップの特性を反映した選択が難しくなっていました。今回構築した 490万個のカーネルデータセットで学習したモデルは、構造だけを見る手法と比べて選択の遅れを最大で 40%、NVIDIA の経験則に基づくルール、要するにレシピ本通りに作ると決めているようなものと比べて 64.2% 削減しています。
40% から 64.2% の削減は確かに大きいですね。データが少ない場合でも転用できるのがポイントなんですね。
精度の異なる演算や、末尾の処理を融合するケースでも転用できることを確認しています。チップへの影響を明示的に表すことで、モデルが本来注目すべき特徴を掴みやすくなり、データが少なくても性能を維持できます。
なるほど、特徴を掴みやすくなるんですね。公開されているんですか。
要旨には論文やデータセットの公開について言及がないため、公開されているかどうかも前処理が追加になるかも書けません。代わりに、要旨にある「4.9百万個のCUTLASSカーネルから学習済みモデルを構築」や「静的に計算可能な推定値を追加」などの情報を基に書き直します。
前処理が少し追加になるんですね。研究している人から見ると、どこがまだ解けていないんですか。
CUDA カーネルの選択には、手動で設計した性能ルールが必要な分析型セレクタと、生の設定パラメータ上で動作する学習型セレクタの二つの既存手法があります。
最後に、今後の展開はどう見えていますか。
データ効率の面では、異なる演算精度やエピローグ融合への転移も評価しました。明示的にハードウェア挙動を表現することが、学習によるカーネル選択に有用な帰納的バイアスを与えることが示されています。
出典
この記事のもとになった情報
- arXiv:Hardware-Aware Features for CUTLASS Kernel Selection
- 公開日:2026-09-29
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。