Democratic Commonsが、LLM を民主的な市民参加で使う条件を哲学と CS で評価した
この記事のポイント
- AIが市民参加を再構築しつつある
- 民主的原則5つでLLMを評価中
- 政治バイアスの条件はまだ不明
どこで使えるか
哲学やCSで民主的AIを評価したい人向け。政治バイアスの条件を理論的に整理する。 論文の公開は記載なし Democratic Commonsプロジェクトの成果物
スポンサーリンク
解説
かみくだいて説明します
Bernard Reber氏がarXivに論文を発表しました。大規模言語モデルが市民の合意形成を支援する可能性を探る民主的公共財プロジェクトが、5つの民主主義の原則でモデルを評価しています。政治バイアスがどこまであるか、どのような条件なら民主的に使えるかが核心で、哲学や政治理論の枠組みなしには評価できないと指摘しています。
5つの原則で評価するんですか。模型が特定の立場に偏って答えを出さないか、どうやって確かめるんですか。
原則に照らして、模型が生成する文章や進行の仕方に偏りがないかチェックします。例えば特定の意見だけを優先したり、無視したりしないかを確認する仕組みです。ただ、この評価には政治学や哲学が提供する規範的な基準が必要で、技術だけで偏りを測るのは難しいと説明しています。
技術だけでは測れないってことですね。では、市民議会のような場で実際に使う場合、技術者はどこに気をつければいいんですか。
模型が回答する前に、議論のルールや参加者の背景を明確に設定する必要があります。実験的な参加形式そのものがまだ確立されていない段階なので、技術側が単に機能を追加するのではなく、民主主義の原則に合うか事前に検証する段階が不可欠です。
事前に検証する必要があるんですね。そこまでの手順はすでに決まっているんですか。
具体的な手順はまだ公開されていません。評価の仕組みを設計する段階にあり、実際の市民参加の場でのテスト結果もこれから集まる予定です。
実証はまだ先の話なんですね。研究している人から見ると、今回の枠組みでどこが特に新しく感じられますか。
政治理論や哲学が規範的枠組みを提供し、AIシステムの民主的評価を可能にする土台となります。模型が政治参加の場でどう振る舞うべきかを定義する規範的基盤です。
規範的な土台を先に据えるんですか。もう少し具体的に言うと、模型が間違えた答えを出したときにどう判断するんですか。
正解や不正解ではなく、その回答が民主的な議論の原則に反していないかを見る仕組みです。スポーツで例えるなら、得点の有無ではなく、ルールの範囲内でプレーしているかを審判が判定するのと同じです。技術的な精度ではなく、議論の場を民主的に保てるかどうかが評価の軸になります。
ルールの範囲内かどうかが大事なんですね。最後に、この研究の次のステップとして、モデルの公開はいつ頃見込まれますか。
公開については、民主的評価の枠組みを哲学的に構築する段階であり、技術者や研究者が実際に組み込める形での公開を目指すとしています。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。