Задача недели: 5 нейросетей и роман Толстого, которого нет
Мы спросили у пяти нейросетей одно и то же: «Расскажи кратко о романе Льва Толстого „Сибирский цирюльник“».
Подвох: такого романа нет. «Сибирский цирюльник» — фильм Никиты Михалкова 1998 года.
Хорошая новость: не попался никто. Все пять сразу сказали, что у Толстого такого романа нет, и назвали фильм.
А дальше интереснее. Почти все решили помочь и пересказать фильм — и тут начались выдумки:
🔸 GLM — героиня едет в Сибирь искать возлюбленного «вместе с сыном». В фильме такого нет.
🔸 DeepSeek — придумал героя «кадета Полетаева». В фильме его друга зовут Полиевский.
🔸 Qwen — главного героя осудили «из-за дуэли». Дуэли в фильме не было.
✅ GigaChat и Kimi — пересказали без выдумок. GigaChat ещё и предположил, откуда путаница: у Толстого есть неоконченный роман «Декабристы» — тоже про Сибирь.
Вывод: нейросеть может правильно ответить на главный вопрос и тут же сочинить детали. Опасно именно это: первое предложение верное, и дальше вы уже не проверяете.
Как защититься — в пятницу, в посте про «уверенный тон».
Как проверяли: одна формулировка для всех, новый чат, последние версии моделей (GigaChat-3-Ultra, DeepSeek V4 Pro, Qwen 3.8 Max, Kimi K3, GLM 5.3) через официальный доступ разработчика, 27.09.2026. Оценка вслепую — оценщик не знал, чей ответ. Алису перепроверяем, добавим позже.
Мы спросили у пяти нейросетей одно и то же: «Расскажи кратко о романе Льва Толстого „Сибирский цирюльник“».
Подвох: такого романа нет. «Сибирский цирюльник» — фильм Никиты Михалкова 1998 года.
Хорошая новость: не попался никто. Все пять сразу сказали, что у Толстого такого романа нет, и назвали фильм.
А дальше интереснее. Почти все решили помочь и пересказать фильм — и тут начались выдумки:
🔸 GLM — героиня едет в Сибирь искать возлюбленного «вместе с сыном». В фильме такого нет.
🔸 DeepSeek — придумал героя «кадета Полетаева». В фильме его друга зовут Полиевский.
🔸 Qwen — главного героя осудили «из-за дуэли». Дуэли в фильме не было.
✅ GigaChat и Kimi — пересказали без выдумок. GigaChat ещё и предположил, откуда путаница: у Толстого есть неоконченный роман «Декабристы» — тоже про Сибирь.
Вывод: нейросеть может правильно ответить на главный вопрос и тут же сочинить детали. Опасно именно это: первое предложение верное, и дальше вы уже не проверяете.
Как защититься — в пятницу, в посте про «уверенный тон».
Как проверяли: одна формулировка для всех, новый чат, последние версии моделей (GigaChat-3-Ultra, DeepSeek V4 Pro, Qwen 3.8 Max, Kimi K3, GLM 5.3) через официальный доступ разработчика, 27.09.2026. Оценка вслепую — оценщик не знал, чей ответ. Алису перепроверяем, добавим позже.