AIのしくみ 159生成AIの基本

長い入力の真ん中が読まれにくい

一覧に戻る

長い入力では、答えの資料が真ん中にあると、先頭や末尾より見落とされやすい。33秒の動画で、効果音と画面の字幕だけで進みます。

用語　Lost in the Middle

字幕の全文

  1. Lost in the Middleは、長い入力の真ん中をAIが見落としやすい現象です
  2. 研究者は、AIに資料20件と質問を渡し、答えの資料の位置だけを変えました
  3. 答えの資料が先頭にあると、AIは76%の質問に正しく答えました
  4. 答えの資料を真ん中の10件目に移すと、正しく答えた割合は54%に下がります
  5. 末尾の20件目に置くと、正しく答えた割合は63%まで戻りました
  6. 5件目と15件目も加えて結んだ線は、真ん中がへこんだU字の形です
  7. 下がり方はAIによって違い、差が小さいAIもあります
  8. AIは真ん中の資料を見落とすことがあるので、大事な資料は先頭か末尾に置きます