AIで言語熟練度を制御する新技術
スタンフォード大学とDuolingoの研究者たちは、AI生成コンテンツの言語熟練度を制御するための効果的な戦略を発表しました。
- スタンフォードとDuolingoが新戦略を発表
- CALMモデルで高品質かつコスト削減
- 教育分野での応用が期待される
特に、教育や言語学習の分野では、異なる熟練度レベルに対応することが重要です。
従来の方法では、少数ショットプロンプティング、教師あり微調整、強化学習(PPO)などが用いられてきましたが、これらには高い計算コストやパフォーマンスの限界がありました。これに対し、スタンフォードとDuolingoは、CEFR基準に合わせた言語モデル(CALM)を提案しました。CALMは、微調整とPPOを統合し、コストを削減しながら高品質な出力を維持します。
TinyTolkienデータセットを使用して、さまざまなCEFRレベルの短編小説でモデルを訓練し、最適な出力を選択するサンプリング戦略を採用。評価結果では、CALMはGPT-4と同等のパフォーマンスを示し、コスト効率も向上しています。
自動スコアリングと人間による評価の両方で高い評価を受けており、特に教育や言語学習の分野での応用が期待されています。
参考記事:MultiPlatform.ai
「生成AIを社内で活用したい」「生成AIの事業をやっていきたい」という方に向けて、朝の通勤時間に読めるメルマガを配信しています。
最新のAI情報を日本最速で受け取りたい方は、以下からご登録ください。
また、弊社紹介資料もご用意しておりますので、併せてご確認ください。