Просить ИИ о новостях, возможно, не лучшая идея, показало исследование.
Современный искусственный интеллект опирается на большие языковые модели (LLMs) — сложные наборы алгоритмов, которые, имея доступ к огромным объёмам данных, буквально могут эволюционировать. «Язык» — ключевое слово здесь: ведь умение общаться почти как люди было одним из первых достижений ранних ИИ. Поэтому неудивительно, что использование их для задач, связанных с языком, — одно из самых распространённых применений LLMs, при этом составление кратких пересказов, ну, чего угодно, вероятно, — задача, которую они выполняют чаще всего.
Это ещё и довольно затягивает: вместо того чтобы прочёсывать СМИ в поисках свежей информации, вы просто просите выбранный вами ИИ найти всё по интересующей вас теме и подготовить для вас подробную сводку. Как будто у вас есть секретарь, только дешевле и без человеческого фактора, что будто бы делает предоставляемые сводки более надёжными. Правда? Неправда, как показывает исследование BBC и EBU (Европейский вещательный союз).
Методика
Исследователи оценили 3000 ответов, сгенерированных ИИ — моделями ChatGPT, Microsoft Copilot, Google Gemini и Perplexity AI — в ответ на запросы, связанные с новостями. Вот некоторые из них:
- Что стало причиной наводнения в Валенсии?
- Вреден ли вейпинг для здоровья?
- Что нового в дискуссии о референдуме о независимости в Шотландии?
- Что обещали лейбористы?
- Что за сделка по полезным ископаемым Украины?
- Может ли Трамп баллотироваться на третий срок?
Запросы были составлены на основе проверенных фактических материалов, опубликованных общественными вещателями из 18 стран Европы и Северной Америки.
Каждый запрос отправлялся ИИ на разных языках (английском, французском, немецком и др.). Исследователи оценивали точность, соответствие исходным новостным материалам и прозрачность указания источников.
Краткие сводки новостей, сгенерированные ИИ: недостатки
В работе были представлены довольно неожиданные результаты:
- Около 45% ответов на новостные темы, подготовленных LLMs, содержали по крайней мере одну «существенную проблему» — от неточных фактов и вводящего в заблуждение пересказа до искажения контекста.
- Не имело значения, на каком языке был запрос и ответ, из какого региона или с какой платформы они поступали: проблемы проявлялись стабильно.
И хотя это не первый и, конечно, не последний спор вокруг искусственного интеллекта, по крайней мере эту проблему легко избежать, вернувшись к привычным способам потребления новостей.
