Исследователи из США провели эксперимент с айтрекингом и 400 языковыми моделями, доказав, что ИИ не способен объяснить процесс повторного чтения сложных предложений у людей, сообщает сайт infohub.kz.
Ученые из Нью-Йоркского университета и Университета Массачусетса в Амхерсте провели исследование с участием 368 взрослых читателей и более 400 языковых моделей ИИ. Работа, опубликованная в журнале PNAS, показала, в каких именно аспектах механизмы восприятия текста человеком расходятся с алгоритмами нейросетей.
С помощью технологии отслеживания движения глаз исследователи проанализировали процесс чтения грамматически сложных предложений. Выяснилось, что языковые модели хорошо объясняют первичный этап распознавания отдельного слова на основе предсказания следующего элемента. Однако ИИ не способен смоделировать следующий этап - интеграцию слова в общий смысловой контекст фразы.
При столкновении со сложными текстами люди затрачивают значительно больше времени и в 20% случаев возвращают взгляд назад для перечитывания. Авторы работы Уильям Тимки, Брайан Диллон и Тал Линзен отметили, что выводы помогут создать более точные когнитивные модели человеческого мозга.