實驗結果顯示,AI 生成的影片摘要存在顯著缺陷,平均遺漏高達 51.6% 的關鍵事件細節。更甚者,有 95% 的 AI 摘要未能提及事件最核心的情節——汽車撞到行人。這種描述缺陷、反覆的幻覺(hallucinations,指人工智慧模型產生不真實或無關的內容)及系統性遺漏,引發研究人員高度擔憂。
記憶影響方面,閱讀精確摘要的參與者對關鍵場景細節的回憶準確度達 83.6%。然而,暴露於錯誤 AI 摘要的參與者,其回憶準確度卻驟降至 44.8%。這項數據明確指出,誤導性的 AI 資訊能系統性地改變目擊者對過去事件的回憶。
令人意外的是,研究還發現,即使參與者被告知摘要是透過 AI 產生,甚至無論他們對 AI 的熟悉度或信任程度如何,其記憶受污染的程度仍未有差異。這項發現挑戰了「讓人類參與(human-in-the-loop)」能有效防範 AI 錯誤的前提。研究主要作者 Mattea Sim 表示,AI 是傳遞錯誤資訊的新途徑,可能為讀者製造虛假記憶。
研究共同作者 Yael Eiger 憂心,執法部門可能在未經嚴謹測試與了解 AI 生成摘要錯誤程度的情況下,就已在使用影片摘要技術。這項發現深具意義,因執法人員或目擊者在撰寫證詞前若審閱到錯誤的 AI 事件摘要,可能會無意中將這些自動產生的錯誤內化為真實記憶。研究團隊計畫未來進一步探討商業摘要工具如何改變法律訴訟中的官方報告和證人證詞。