OpenAIは、GPT-4の「怠惰」問題を近い将来に修正し、オフライン評価とA/Bテストの後にモデルを更新すると発表した。

IT Homeは12月12日、OpenAIが先週、一部のユーザーから苦情を受けたと報じた。多くのユーザーは、ChatGPTやGPT-4 APIの使用時に、応答が遅い、回答がおざなり、回答を拒否される、会話が中断されるなどの一連の問題に遭遇したと主張した。OpenAIはこの事実を認め、関連する問題を徹底的かつ適切に修正すると主張した。

OpenAIは以前、GPT-4が怠惰になった理由について、11月11日以降OpenAIがモデルを更新していなかったため、GPTモデルが予測不可能になったと説明していた。同社は現在、問題の解決に取り組んでいる。

GPT-4 に表の書き込みを要求したが、モデルは 3 行しか出力しなかったため、ユーザーから GPT-4 モデルが「怠惰」になったという苦情があったと報告されています。コードを入力すると、モデルは一部の情報のみを出力し、残りの部分を入力するようにユーザーに指示します。場合によっては、GPT-4 は「この作業は自分でできます」と伝えることもあります。

OpenAIは後に、モデルが長期間更新されていなかったため、GPTモデルの動作にわずかな変化が生じたが、少数のプロンプトワードが悪影響を及ぼしただけで、GPT-4モデルは全体的なレベルでは依然として適切に動作できたと説明した。

▲画像出典：ChatGPT Xプラットフォーム公式アカウント

IT Homeはまた、OpenAIが徹底的なオフライン評価とオンラインA/Bテストを行った後、できるだけ早くGPT-4モデルを更新し、モデルのパフォーマンスに関するフィードバックをユーザーに積極的に提供するよう奨励すると主張していることにも注目した。

GPT-4モデルの更新停止は、同社の人事混乱と密接に関係している。OpenAIのCEOサム・アルトマン氏の辞任と欧米の祝日が相まって、OpenAIの日常業務は混乱に陥った。GPT-4の定期更新の延期に加え、開発者がモデルを共有するために今年12月初旬に開始予定だったGPTストアも、2024年初頭に延期された。