Appleの研究でAIの論理的推論能力に重大な欠陥があることが判明 from macrumors.com

arXiv の調査によると、Apple は大規模な言語モデルの推論能力に重大な弱点があることを明らかにしました。
この研究では、質問の発音がわずかに変化しただけでも、モデルのパフォーマンスに大きな不一致が生じ、キウイの数を数えるなどの数学的タスクで論理的な一貫性と精度が要求されるシナリオでの信頼性が損なわれる可能性があることが明らかになりました。
「名前を変更するだけで結果は 10% 以上変化する」と研究では付け加えられ、数日間にわたって収集された一部の人々の体格や体重に関する無関係な情報は OpenAI の Llama を使用して修正されました。