iCoder-27B、AIが設計を改善する手法、RTL設計とGPUカーネル最適化

論文

iCoder-27B、AIが設計を改善する手法、RTL設計とGPUカーネル最適化

スポンサーリンク

人の関与を絞ったエージェントが自ら実験を選び、GPT-5.5を一部で上回るモデルを作った

この記事のポイント

  • フロントティアモデル開発は難しかった
  • 専門家がスキルを定義しエージェントが訓練
  • 7ベンチでGPT-5.5やC-Opus-4.8と競合

どこで使えるか

フロントティアモデル開発を自動化したい人向け。専門家がスキルを定義しエージェントが訓練する

スポンサーリンク

解説

かみくだいて説明します

AIがAIを作る再帰的開発って、結局のところまだSFの世界ですよね?
確かに小規模モデルや限定タスクでは実用段階に入りますが、最先端モデルのリリースに至るにはまだ壁があります。
既存の自動開発手法だと、結局人間の介入が膨大になりませんか?
人間の介入を高密度・低頻度のインターフェースに集中させることで、最小限の関与で最先端モデルの開発を目指しています。
今回のarXiv論文では、人間の関与を極限まで圧縮する手法を提示しています。
そのアプローチって、具体的にはどういう仕組みなんですか?
専門家が目標や権限境界を再利用可能なリサーチスキルとして定義し、エージェントがそれを実装して実験を選択し、結果を診断して学習戦略を修正します。
人間の指針をスキル化して、あとはエージェントがSFTや自己蒸留、強化学習を自律的に回すわけですね!
その通りです。エージェントは実験の選択、結果の診断、そしてトレーニング戦略の修正を自律的に行い、強化学習へとつなげています。
実際の性能はどうなったんですか?
27BパラメータのiCoderが生成され、RTLLMでGPT-5.5やClaude-Opus-4.8を凌駕し、CVDPとKernelBench L2ではGPT-5.5を16ポイント上回り、TritonBenchでClaude-Opus-4.8と首位タイを記録しています。
7つのベンチマークでこれだけ差がつくのは驚きですが、ベースラインとの比較はどうですか?
ケーススタディでは、反復的なRTL設計やGPUカーネル最適化において、大幅に少ないトークン数で競合的な成果を上げています。
でも、特定の業界コードに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
特定ドメインでの成果は、人間の介入を最小限に抑えた再帰的改善への道筋を示しています。
実際の試し方はどうすればいいんですか?
公開コードはGitHubで入手可能ですので、まずはリポジトリをクローンしてドキュメントに沿って環境構築を試してみてください。
検証範囲は7つのベンチマークに限定されますが、次世代AIがさらに高度な設計者になる道筋は明確に見えています。
iCoderが27BモデルとしてRTL設計とGPUカーネル最適化を実現しました

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文