← Кейс ЮРЮлия Репринцева

Гайд · сделан для этого сайта

Как поймать ИИ на вранье: 10 признаков

Подделка ИИ звучит так же уверенно, как правда, — а иногда и лучше. Поэтому первое правило: чем лучше звучит цитата, тем внимательнее её проверять.

Все примеры — из этого проекта: цитатника DeepSeek, фактчекинга «Мастера и Москвы» и сверки цитат Гюго. Вот признаки, по которым я ловила ИИ.

01

Все говорят одним голосом.

Камю: «Париж — это город, где даже одиночество кажется уютным». Ахматова: «Париж — это город, где даже тени кажутся поэзией».

Как поймать: положите рядом три-четыре цитаты разных авторов. Если они построены одинаково, например «X — это Y, где Z», это писал один автор, модель.

02

Одна ссылка на всех.

Одна и та же ссылка на Национальную библиотеку Франции стояла у одиннадцати разных авторов.

Как поймать: сравните ссылки между собой, а потом откройте хотя бы одну. Одинаковые адреса у разных книг — подделка. Ссылка, которая ведёт не туда, — тоже.

03

Книги, которых не было.

«Парижские витражи» Сандрара, «Ночь в Пигаль» Мопассана.

Как поймать: вбейте название книги в поиск вместе с фамилией автора или откройте список произведений автора в Википедии. Если книги нигде нет, кроме ответа нейросети, — её нет.

04

Анахронизм.

Бодлер, «черновик „Цветов зла“»: духи «Красный Москвич». Парацельс в 1526 году пишет о парижской больнице.

Как поймать: сверьте даты. Когда жил автор, где он был в тот год, существовала ли вещь, о которой он пишет. Бодлер умер в XIX веке — никакого «Красного Москвича» он знать не мог.

05

Шифры, похожие на настоящие.

carton BB30-320, RESERVE-YH-28, MS.334.

Как поймать: вбейте шифр в поиск по каталогу архива или библиотеки, на которую ссылается ИИ. Настоящий шифр найдётся и покажет документ. Выдуманный не найдётся или окажется совсем другим документом.

06

Чем экзотичнее вопрос, тем увереннее ответ.

Заброшенные театры, тайные сады: чем меньше о месте написано, тем смелее модель сочиняет.

Как поймать: про редкие темы проверяйте вдвое строже. Если о месте почти ничего нет в поиске, а у ИИ есть по две цитаты на каждое, — это повод насторожиться.

07

Источник, который не проверишь.

«У Лубянки фонарь прогорел» — якобы черновики Мандельштама. Погоня Бездомного «вниз по Тверской» — якобы ранние редакции.

Как поймать: спросите себя, можно ли этот источник открыть. «Черновики», «письма», «ранние редакции» без названия издания и страницы проверить нельзя. Такую цитату не берите.

08

Чужая строка.

«Пряничные башни» ИИ приписал Мандельштаму, а это Булгаков.

Как поймать: вбейте цитату в поиск целиком, в кавычках. Поиск покажет, у кого она есть на самом деле. Часто — совсем у другого автора.

09

Почти правильная цитата.

У Гюго улицы похожи на «запутанный кошкой клубок», у ИИ — «перепутанный кошкой моток ниток».

Как поймать: найдите полный текст книги (многие лежат в открытых библиотеках) и ищите по одному-двум редким словам, а не по всей фразе. Найдёте место — сравните слово в слово.

10

Уверенный вывод.

«Маршрут полностью соответствует исторической Москве. Ошибок нет», — написал ИИ, проверяя сам себя. Ошибок было несколько.

Как поймать: не просите ИИ проверить самого себя — он почти всегда согласится с собой. Проверяйте по первоисточнику или хотя бы другой моделью, а решение принимайте сами.

Метод

Как проверяю я

  1. Ищу фразу в самом тексте: в полном тексте книги, а не в пересказе и не на сайте цитат.
  2. Открываю источник, а не верю ссылке.
  3. Не нашла — не беру. Даже если цитата прекрасна.
↑ наверх