ChatGPT выдумывает источники: почему, как часто и как проверить, что статья существует

Почему ChatGPT и другие чат-боты выдумывают правдоподобные статьи и ссылки, что показали исследования о доле выдуманных ссылок, четыре типа ошибок и пятиминутный чек-лист проверки каждого источника.

Часть серии: Искусственный интеллект в академической работе: как правильно использовать ChatGPT в семинарской и диссертации

Студент просит у ChatGPT «пять статей об экзаменационной тревожности» и получает идеальный список - реальные исследователи, реальные журналы, даже DOI. Только части статей не существует.

Почему так происходит

Языковая модель не «ищет» статьи - она предсказывает правдоподобный текст. Она знает, как выглядит ссылка, и собирает её из частей, а не извлекает из базы.

Насколько часто

В исследовании в Scientific Reports проверили 636 ссылок, созданных ChatGPT по 42 темам: 55% ссылок GPT-3.5 и 18% ссылок GPT-4 были полностью выдуманы; среди настоящих 43% и 24% содержали существенные ошибки (Walters & Wilder, 2023). Новые модели лучше, но нулевой доли не нашло ни одно исследование.

Четыре типа ошибок

  1. Статьи нет вообще.
  2. Статья есть, но неверные год, журнал или DOI.
  3. Автор реальный, а такой его статьи нет.
  4. Статья реальная, но утверждения в ней нет - самое опасное; бывает и в инструментах на базе статей.

Чек-лист: пять минут на источник

  1. Найдите точное название в кавычках в Google Scholar.
  2. Проверьте DOI на doi.org - ведёт ли он к той же статье?
  3. Сверьте год, журнал, том, страницы.
  4. Прочитайте хотя бы аннотацию - говорит ли статья то, что вы ей приписываете?
  5. В список - только прошедшее проверку, с данными из самой статьи.

Как пользоваться AI безопасно

Просите ключевые слова для поиска, а не источники; используйте инструменты на базе статей (AI-инструменты); оформляйте ссылки из Google Scholar или Zotero по шаблонам APA.

Частые вопросы

Выдумывает ли ChatGPT источники? Да, реже, чем раньше, но не ноль.

Что будет, если сдать выдуманный источник? В большинстве вузов это нарушение академической честности, даже без умысла.

Хотите, чтобы кто-то проверил список литературы? Мы проверяем каждый источник - существует ли, верны ли данные, говорит ли он то, что ему приписано. Получите расчёт стоимости. Полное руководство: AI в академической работе.

Источник

  • Walters, W. H., & Wilder, E. I. (2023). Fabrication and errors in the bibliographic citations generated by ChatGPT. Scientific Reports, 13, Article 14045. https://doi.org/10.1038/s41598-023-41032-5
Застряли? Эксперт может разобрать это с вами.

Расскажите, что нужно, и мы вернёмся с экспертом в области «Поиск источников и обзор литературы» и ценой.

Отправить заявку

Обновлено:

Другие руководства

Статистический анализChatGPT для статистического анализа и SPSS: что работает, что опасно и как пользоваться правильноМожно ли доверять ChatGPT статистику в семинарской или диссертации - в чём он хорош (объяснение вывода, код R и SPSS), где уверенно ошибается (выбор критерия, допущения, числа), конфиденциальность данных, безопасный процесс и примеры промптов. Отзыв на черновикДетекторы AI в вузе: может ли преподаватель распознать ChatGPT, насколько надёжны детекторы и что делать при ложном обвиненииКак работают детекторы AI вроде Turnitin, что показали исследования об их ошибках (в том числе против тех, для кого английский не родной), как преподаватели замечают AI без детектора и как документировать процесс написания, чтобы защититься. Проверка APA и ссылокКак цитировать ChatGPT по APA 7 и декларировать использование AI в работеАктуальный формат APA (сентябрь 2025) для ссылки на разговор с ChatGPT и на AI-инструмент, разница между цитированием и декларацией, образец декларации и что писать в главе «Метод».