ChatGPTへの指示文の使い方を分析した研究、2年間で間接的になった話

論文

ChatGPTへの指示文の使い方を分析した研究、2年間で間接的になった話

スポンサーリンク

ChatGPTへの指示文が、2年で間接的で簡略な表現にシフトした。

この記事のポイント

  • ユーザーがLLMに与えるプロンプトの言語的特徴は、経験とともに変化する。
  • ChatGPTの公開会話から2023年と2025年のプロンプト各1,000件を分析した。
  • 指示の明示性が低下し、間接的・断片的な表現が増加した。

数字で見る

この記事に出てくる数字

分析プロンプト数 2,000
2023年サンプル 1,000

どこで使えるか

指示文を簡略化してコストを下げたい人向け。推論能力に依存する表現が増えた arXivで論文公開済み データはShareChat公開データセット使用

スポンサーリンク

解説

かみくだいて説明します

私、最近LLMに指示を出す時、わざわざ丁寧語を使わなくなりましたよね?
確かにその傾向は顕著です。日常会話の作法とは異なる、新たな対話リズムが形成されつつあります。
指示が簡略化されるって、結局サボりじゃないんですか?
表面的にはそう見えますが、実はシステムへの理解が深まるほど、余計な情報を削る方向にシフトしています。
arXivで公開された研究では、2023年と2025年の公開チャットログ計2,000件を分析し、この変化を言語学的に検証しています。
そのアプローチって、具体的にはどういう仕組みなんですか?
各プロンプトの言動力や間接性、丁寧語の有無を注釈付けし、年ごとの分布を統計的に比較するコーパス実証分析です。
言語学の手法をAI入力のデータに適用するんですね!
同期のタイミングではなく、発話の構造変化に焦点を当てている点が特徴的です。
具体的な変化の規模はどのくらいあるんですか?
要求動作の明示的指定から推論への依存へシフトした部分が最大で14.9ポイントに達しています。
2年前との差だと、かなり意識的な変化のように感じますね。
従来の細かな指示出しと比較すると、ユーザーがシステムを高度な文脈推論能力を持つ存在と認識している証拠です。
でも、曖昧な指示が増えたら、結局根本的な解決にはなっていないんじゃないですか?
確かに。プロンプトの直接的な指示が減少し、暗黙の推論に依存する方向へ変化しているのは事実です。
自分たちのプロンプトの変化を実際に追跡するにはどうすればいいですか?
公開されているShareChatデータセットを参照するか、自身のチャット履歴を定期的に構造化して可視化してみてください。
2023年と2025年のプロンプトを比較した結果、指示の直接的な表現から間接的な表現への移行が確認されました。
我々がどのような言語を創造してきたか、問うべきです。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文