米政府公式サイト「America.gov」に搭載されたAI検索機能において、人気ゲーム「Minecraft(マインクラフト)」について問い合わせを行った際、極めて特異かつ不自然な回答が生成される事象が報告されました。調査の結果、この挙動は単なるシステムエラーやバグではなく、現在のAIモデルの設計に起因するものであると分析されています。
問題の挙動は、特定のキーワードに対するAIの応答生成プロセスにおいて発生しています。ユーザーがMinecraftという特定の対象について情報を求めた際、通常の政府広報としての文脈とは異なり、予測不可能な出力が行われることが確認されています。この挙動は、特定の入力に対してモデルがどのように反応するかという技術的な課題を示唆しています。
本件は、大規模言語モデル(LLM)が学習データやフィルタリング設定、プロンプト解釈において特定のトピックをどう処理するかを浮き彫りにしています。政府が運営する公式プラットフォームにおけるAI実装の難しさと、AIの出力における正確性の担保という課題を象徴する事例といえます。
現在、当該AIの運用において、特定の検索クエリに対する応答精度の調整や、安全性・正確性を高めるためのさらなるチューニングが行われる可能性があります。公共機関におけるAI活用において、信頼性とLLMの確率論的な出力の間でどうバランスを取るべきか、今後の挙動改善が注視されます。