Шесть сгенерированных ИИ исследовательских деталей, требующих проверки

проверяйте личность, написание и авторство

Имена легко «исправить» на более привычный вариант. Инициал второго имени может исчезнуть, фамилия — быть написана с ошибкой, два автора могут объединиться в одного, а организации могут приписать отчет, который она лишь разместила на своей платформе. Похожие имена также могут относиться к разным людям. Это принципиально разные ошибки: написание влияет на идентификацию, а указание авторства — на то, кто именно совершил действие или высказал мысль.

Сверяйте имя непосредственно со страницей источника, особенно со строкой авторства, примечанием об авторе или официальным сайтом организации. Не полагайтесь на сниппеты в результатах поиска или библиографию, скопированную в другую статью. В академической ссылке проверяйте порядок авторов и инициалы так же тщательно, как и написание фамилий: они помогают читателям найти работу. Если в источнике указан коллективный автор, сохраняйте название этой группы, а не пытайтесь угадать отдельных авторов.

**Контрпример:** В источнике «М. Ли» указан как один из четырех авторов. Раскрытие этого инициала до «Майкл Ли» только потому, что на странице сотрудников организации есть Майкл Ли, является необоснованной идентификацией, даже если речь идет об одном и том же человеке.

Реальный пример того, почему правдоподобно выглядящая ссылка заслуживает прямой проверки, дает исследование Уолтерса и Уайлдера (2023 г.), посвященное библиографиям, созданным ChatGPT. Авторы проанализировали ссылки, сформированные в обзорах литературы по 42 темам, и выявили как вымышленные источники, так и ошибки в реальных цитированиях. Исследование касается конкретных протестированных систем и промптов; оно не устанавливает фиксированный процент ошибок для любого инструмента ИИ или любой писательской задачи. ([Исследование в Scientific Reports](https://www.nature.com/articles/s41598-023-41032-5))

разграничивайте событие, публикацию и обновление

Дата может быть точной, но при этом отвечать не на тот вопрос. Страницы исследований могут указывать, когда работа проводилась, когда была впервые опубликована в сети, когда вошла в выпуск журнала, когда обновлялась или когда к ней обращались. Период, охваченный отчетами, также может отличаться от даты их публикации. Если в тексте сказано: «исследование вышло в 2021 году», использование даты более позднего обновления веб-страницы введет читателя в заблуждение, даже если эта дата обновления выделена на самом видном месте.

Сопоставляйте дату с глаголом и существительным в утверждении. «Опубликовано» требует даты публикации; «опрос проведен в» требует периода полевых исследований; «обновлено» указывает на дату редакции. Если в источнике указан только год, не придумывайте месяц или день. Если значение имеют две правомерные даты, укажите обе, а не выбирайте одну из них молчаливо.

**Контрпример:** На странице отчета указано «Обновлено 14 марта 2024 года» и описывается опрос, проведенный в 2022 году. Если назвать его «опросом 2024 года», дата обновления страницы будет ошибочно принята за период сбора данных.

проверяйте единицы измерения, знаменатель и сравнение

Цифры часто сохраняются при пересказе, в то время как их смысл искажается. Проверяйте единицу измерения (люди, статьи, цитаты или ответы), знаменатель дроби, период времени, генеральную совокупность, а также то, является ли число точным количеством, процентом, расчетной оценкой или округленным значением. Затем проверьте контекст сравнения: «выросло на 10%» и «выросло на 10 процентных пунктов» — это не одно и то же. Доля ссылок, содержащих ошибку, — это не то же самое, что доля статей, содержащих хотя бы одну ошибку.

Возвращайтесь к таблице, графику, методологии или фрагменту источника, откуда взята цифра. Пересчитывайте данные самостоятельно только тогда, когда исходные значения и математическая операция предельно ясны; в противном случае приводите цифру так, как она указана в источнике, сохраняя все уточнения. Не превращайте результат узкой выборки в утверждение об общей частоте явления.

Простой пример: 12 из 20 посетителей галереи и 20 из 40 посетителей галереи — это разные абсолютные показатели, при этом первый составляет 60%, а второй — 50%. Сгенерированное ИИ краткое изложение, в котором скопировано только «20 посетителей» или только процентное соотношение, упускает контекст сравнения, необходимый для понимания утверждения. Эти цифры придуманы для наглядности; сверяйте реальные данные с исходной таблицей и примечаниями к ней.

Цитаты: проверяйте формулировки и говорящего

Гладко составленное предложение в кавычках может оказаться точной цитатой, вольным пересказом или текстом, выдуманным моделью. Найдите оригинальный фрагмент и проверьте формулировки, личность говорящего, дату и окружающий контекст. Цитата, приписанная целой группе, могла быть произнесена одним участником; запоминающаяся фраза может быть кратким выводом автора статьи, а не словами респондента.

Если в первоисточнике нет именно таких формулировок, снимите кавычки. Перескажите своими словами то, что на самом деле сказано в источнике, и дайте на него ссылку либо опустите эту строку, если не можете ее подтвердить. Не редактируйте цитату втайне ради более красивого слога, продолжая выдавать ее за дословную.

Названия источников и идентификаторы: сохраняйте возможность найти ссылку

Правдоподобное название статьи не доказывает ее существование. Выполните поиск по точному названию и автору на странице издателя или в библиографическом указателе, затем сверьте DOI, дату и название журнала или книги. Изменение хотя бы одного слова в названии может увести к другой работе или к несуществующему тексту. Поиск по метаданным Crossref помогает найти зарегистрированную публикацию, однако совпадение записи все еще не доказывает, что работа подтверждает стоящее рядом с ссылкой утверждение.

Уолтерс и Уайлдер изучили 636 ссылок в 84 коротких обзорах, сгенерированных GPT-3.5 и GPT-4 в 2023 году. Они зафиксировали как вымышленные ссылки, так и ошибки внутри ссылок на реальные работы. Этот результат относится к тем протестированным версиям и промптам; он служит аргументом в пользу проверки ссылок, а не универсальным показателем ошибок для любого современного инструмента ИИ.

Слова, задающие границы: проверяйте «кто», «где», «когда» и с какой степенью уверенности

Короткие слова способны незаметно расширить смысл утверждения. «Некоторые», «все», «обычно», «вызвало» и «доказало» означают принципиально разные вещи. Если источник сообщает об одном семинаре в конкретный день, абзац обо «всех семинарах» выходит далеко за рамки имеющихся данных. Если два показателя изменялись одновременно, признание одного причиной другого требует куда более веских оснований, чем просто совпадение по времени.

Отмечайте каждую фразу, которая расширяет исходный вывод: более широкая аудитория, более длительный период, новые условия, более высокая степень уверенности или каузальные глаголы. Восстанавливайте в предложении границы, заданные источником. Если в источнике сказано «участники этого испытания», сохраняйте указание именно на эту группу. Если написано «может», не заменяйте это на «будет». Эта проверка помогает понять, что именно подтверждают данные, а не просто звучит ли предложение убедительно.

Финальный аудит шести деталей перед публикацией

Сделайте один отдельный, прицельный проход по тексту, обращая внимание на имена, даты, цифры, цитаты, названия источников и слова, задающие границы контекста. При проверке каждой детали задавайте вопрос: подтверждает ли первоисточник информацию именно в таком виде и сможет ли читатель найти эти данные? Исправьте, сузьте или удалите деталь, не прошедшую проверку. Затем перечитайте абзац еще раз, чтобы убедиться, что исправленные детали по-прежнему поддерживают его общий смысл.

Такой аудит намеренно сфокусирован уже, чем полноценный анализ аргументации или качества источников. Он помогает отловить мелкие фактические искажения, способные сделать ненадёжным даже тщательно подготовленное исследование, оставляя глобальные вопросы концепции и логики для отдельного этапа редактуры.

Продолжить изучение темы