Все уже пошутили и запомнили что если в тексте — , то его писал ChatGPT. А если нет, то человек?

Эта статья - самый подробный гайд в рунете, как отличить текст, сгенерированный Gen AI от текста, написанного человеком и как самому, используя GenAI писать очеловеченный текст. Я разберу реальные приемы, маркеры, ошибки и вооружу вас важными знаниями.

Если хочешь проверить себя насколько ты отличаешь сгенерированный текст - пройди тест https://tally.so/r/w4DZoO!

Подписывайтесь на канал https://t.me/meetdeadlines!

Теория

Как "думает" LLM на самом деле

Это хитрый Т9, он предсказывает следующие слова, а не понимает смысл

Представьте, что вам попался очень наблюдательный собеседник Артем (Артемы часто такие). Он никогда не додумывает за вас, а просто внимательно следит за каждым вашим словом. Артем слышит начало фразы - и на опыте множества лет разговоров с точностью до буквы угадывает, что вы скажете дальше. Ему всё равно, о чём вы на самом деле думаете.

Модель понимает важность слов в тексте по своему

Пока вы разговариваете, этот Артем отмечает для себя не каждое слово, а только те, что чаще всего влияют на ход вашей мысли. Не факт, что они такие же, как выбрали бы вы! Иногда он цепляется за то, что вам кажется неважным, и наоборот может пропустить настоящий подтекст - потому что у него свой взгляд, сложившийся из тысяч разговоров с разными людьми.

Модель не переобучается вашей задачей, для нее это лишь подсказка

Если вы попросите Артёма приготовить паэлью, он сделает её так, как когда-то увидел в Орел и Решка, и даже если вкус не тот - объяснит, почему это нормально. Всё, что вы скажете, для него лишь подсказка, какой ответ от него ждут, но сам Артём ничему новому не учится и не меняет свои привычки.

Задачу которую вы ставите не только не понимают, но и не помнят

Обсудили что-то важное для вас, но у Артема СДВГ и через десять минут он начисто забыл, о чём шла речь в начале. У него феноменальная память только на короткие отрывки и то что он сам когда-то изучал, но если вы с ним болтаете долго, детали первых минут ускользают.

Когда вы задаете роль, ей лишь подражает, а не проживают её

Артем по умолчанию душнила. Он считает себя экспертом во всем, хоть и на самом деле может иметь лишь обрывочное представление потому что любит изучать все подряд. Этот товарищ мгновенно войдет в нужную роль, но у него нет персонально прожитого опыта. Он даже примеры привести не может из жизни, а вот налить воды похожей на правду запросто.

Попросите его быть врачом, блогером или даже волшебником - он моментально войдёт в образ и заговорит нужным языком. Но не обманывайтесь: он ни разу не лечил людей, не вел свой блог и не делал чудеса - просто отлично изображает увиденное и прочитанное

Вас понимают с 1 раза и дальше вы ничего не меняете

Вы можете тысячу раз рассказывать ему о себе и своих предпочтениях, но он никогда не сделает выводов на будущее. Каждый раз всё начинается заново, без учёта прошлых разговоров - только сейчас и здесь. В этом плане он вечный увлектальеный, но новый собеседник.

Сила воображения не в креативности, а в странности

Когда кажется, что Артем вдруг начал шутить или выдавать необычные мысли, это не озарение и не гениальность. Просто в этот момент он решил сыграть в выдавать больше того что первое ему приходит в голову, выбирая все более странные варианты, чтобы удивить вас чем-то нестандартным. Иногда это круто и вызывает вашу улыбку, а иногда недоумение, что он за чушь ляпнул

Итого - никто не учил модель думать, ее учили угадывать

Работа LLM хорошо демонстрируется старой игрой Акинатор https://ru.akinator.com/. Если ты не играл в детсве, сыграй сейчас, после прочтения принцип работы отлично уложится!

Есть очень большая разница в том как мы думаем, говорим и пишем

Когда мы думаем, мысли появляются фрагментами, могут переплетаться, иногда даже спорить друг с другом - это живой внутренний диалог.

Когда начинаем говорить, часто перескакиваем, добавляем эмоции, делаем паузы и сбиваемся, а смысл выстраивается уже по сути дела и может меняться прямо в процессе.

На письме же мы стараемся собрать эти кусочки в более стройный и понятный текст. Что-то убираем, что-то дополняем, упорядочиваем и ищем нужные слова. Компилируем.

В письменной речи появляется структура, но сохраняется ассоциативность и стремление показать глубину мысли, добавить оттенки, примеры, эмоции. В итоге человеческие тексты редко бывают идеально ровными, об них легко споткнуться, но они всегда отражают путь, по которому шла мысль, с поворотами и призмой личного мировоззрения или вкусного вишневого пирога, послевкусие которого еще влияет на изложение.

Почему так сложно имитировать человеческую речь

Человеческое мышление похоже на видение шамана: мы держим в голове много смысловых веток, можем одновременно ощущать эмоции, воспоминания, несвязанные образы и возвращаться к началу мысли. Архитектура LLM оперирует только векторами, где весь текст для модели - это цепочка чисел, разбитая на куски. Такой механизм внимания позволил сделать мощный скачок, но он ограничивает: модель не знает, что такое опыт, вкус, многослойная память, она не может по-настоящему связывать разные пласты разговора, не ощущает глубины.

Модель учит текст как матрицу токенов, в каждом из которых нет настоящего знания, только вероятность встретить один кусок текста рядом с другим. Для неё всё, что выходит за рамки этой последовательности, теряет смысл. В отличие от человека, который создает ассоциации, запоминает и строит новые связи, нейросеть просто движется от одного токена к другому, оценивая вероятности и почти не возвращаясь назад. Но есть те кто думает иначе https://pmc.ncbi.nlm.nih.gov/articles/PMC10068812/

Практика

Теория конечно замечательно, но давай все таки проникнемся ей на практике. Ниже будет простой квиз в форме угадай какой текст написал человек. В каждом разделе будет представлено 2 коротких текста, попробуй догадаться какой составлен человеком, а какой AI.

14 ключевых признаков отличия AI-текста от человеческого

1. Логика развития аргументации

1) Человек не может обойтись без воды, потому что она основной элемент обмена веществ и без нее никак.

2) Пить воду полезно для здоровья, потому что вода важна для всех процессов организма.

2. Распределение акцентов

3) Мой завтрак состоит из овсянки, чая и банана. Овсянка очень полезна, а чай хорошо бодрит утром.

4) Я предпочитаю готовить на завтрак смузи из кефира, овсянки и банана. Это не только быстро и полезно, но и забавно.

3. Выдерживание жанровой принадлежности

5) Не волнуйся, у тебя все пройдет отлично, я же знаю, ты действительно мастер своего дела и если работодатель не слепой, он точно тебя наймет!

6) Желаю удачи на собеседовании, у тебя всё получится, просто будь уверен в себе и подготовься. Помни, собеседование, это как свидание, а в них ты успешен!

4. Личные призмы и опыт, оценочность

7) Моё любимое время года это лето, потому что в это время тепло и можно отдыхать на природе, особенно приятно лежать на траве в парке.

8) Я люблю лето, потому что в это время можно носить меньше слоев одежды и кушать множество фруктов, особбенно люблю с детства кисловатую вишню.

5. Интуитивность

9) Я часто просыпаюсь более поздно, чем нужно и в спешке готовлюсь к занятиям по английскому, после чего бегу за завтроком и подключаюсь на первые рабочие встречи.

10) Утром я просыпаюсь, умываюсь, завтракаю и собираюсь на работу, чтобы начать продуктивный день.

6. Ритмичность и симметрия

11) Я люблю бродить в парке. Там много деревьев, воздух чище, даже как-то ощущаешь себя живее. Прогулки в парке полезны для здоровья и психики.

12) Я люблю гулять в парке. Там много деревьев, свежий воздух и красивые дорожки. Прогулки в парке полезны для здоровья и настроения.

7) Эмоциональная динамика

13) Проснулся - и вдруг этот странный мандраж от капли дождя на окне. Чёрт, как же иногда хочется остановить время, чтобы просто смотреть, как капает, как весь город немного дрожит от мороси. И вроде ничего особенного, но внутри вдруг всё переворачивается. Уже не важно, сколько дел, не важно, что опаздываешь, есть только ты и этот мир, мокрый и чуточку новый.

14) Я проснулся утром и увидел каплю дождя на окне. Это был интересный момент, потому что дождь делает город более прохладным. Мне понравилось наблюдать за этим, и я почувствовал спокойствие. После этого я начал заниматься своими делами и готовиться к новому дню.

8) Речевые привычки

15) Эх, как я люблю переписываться с друзьями по вечерам, мы обсуждаем разные сплетенки и поддерживаем друг друга в трудные моменты, а также регулярно отправляем мемы c коськами.

16) Ну и нравится же мне общаться с близкими друзьями по вечерам. Хоть мы часто лишь перекидываемся парой фраз, мы все равно поддерживаем друг друга в трудные моменты. А еще у нас reelsrelationship.

9. Пространство синонимов и описательных элементов

17) Мой любимый напиток - кофе, потому что он бодрит и помогает проснуться утром.

18) Кофе это обалденный напиток, без него я бы не смог вставать по утрам.

10. Юмор, ирония, провокации, оскорбления

19) Ну ты, лять, как обычно, забыл, да? С утра ждал, думал: ну всё, взрослеет человек, теперь поздравит как нормальный, а в итоге тишина. Уже хотел тебе написать, что если ты вдруг в морге, маякни хоть как-нибудь, а то я тут сижу, свечку ставлю за твою память, а она, не зажигается. Всё, в следующем году сам себе открытку подпишу, а ты потом подпишешься под ней, как всегда через неделю.

20) С днём рождения меня, раз уж никто, кроме пары действительно настоящих друзей, об этом не вспомнил. Ты, кстати, единственный человек, кто может забыть поздравить и даже не почувствовать никакой вины, но я тебя всё равно люблю, спасибо, дура. Жду твой звонок, когда микрокосм в твоей голове накатит апдейт календаря.

11. Подход к компиляции текста

21) Я как обычно перегружен и не успеваю ничего написать по делу поэтому до конца недели буду отбиваться мемами. Выше был запрос на что-то личное. Но я далеко не повод для подражания в ряде моментов. Так я никогда не был в отпуске в своей жизни и работаю официально с 14 лет, неофициально с 11 по мелочи. Шутки про швеца-жнеца-на дуде игреца меня не смешат, я был: промоутером, хостесом, официантом, поваром, администратором кафе, грузчиком, садовником, лесничим, лаборантом в КЛД, сапортом, в коллцентр, продажником, аккаунтом, андроид разработчиком и остановился как ПМ.

22) Я сейчас очень занят и поэтому до конца недели буду отвечать в основном мемами. Ранее был запрос рассказать что-то личное. Я не считаю себя примером для подражания, потому что у меня достаточно необычный опыт: я никогда не был в отпуске и начал работать официально с четырнадцати лет, а до этого с одиннадцати лет подрабатывал. Я пробовал себя во многих ролях: был промоутером, хостесом, официантом, поваром, администратором кафе, грузчиком, садовником, лаборантом, сотрудником поддержки, работал в колл-центре, занимался продажами, был аккаунт-менеджером, андроид-разработчиком и в итоге пришёл к профессии проектного менеджера.

12. Критические ноты (сомнения в себе) и открытость к провалу

23) Мой подход всегда даёт хороший результат, и я уверен, что всё делаю правильно.

24) Мой подход всегда правильный, я не могу ошибиться ни в чем.

13. Грамматическая чистота

25) В основном я работаю ровно столько, сколько указано в контракте. Без лукавства и без фанатизма - восемь часов в день, мне все таки уже не 20 и есть в жизни вещи кроме работы. За исключением, конечно, редких ситуаций, когда "всё совсем горит ***ть" или когда лично обещал что-то C-lvl.

26) В основном я работаю ровно столько, сколько указано в контракте. Без лукавства и без фанатизма — восемь часов в день, мне всё-таки уже не 20, и есть в жизни вещи кроме работы. За исключением, конечно, редких ситуаций, когда всё совсем горит ***ть или когда лично обещал что-то C-lvl.

14. Риторика убеждения, экспертности и авторства

27) Как выбрать компьютерный стул, чтобы спина сказала спасибо: честный разбор от тимлида в возрасте без рекламы

28) Лучшие советы по выбору компьютерного кресла: опыт, факапы и реальные непроплаченные отзывы

Явные артефакты

Рассмотрим популярные и частые артефакты моделей, которые определенным образом могут их выдавать:

1. Кавычки - и хотя это уже пару лет является спорным моментом, потому как нам и самим удобнее использовать “такой формат кавычек”; « нежели такой », разделяя внутри слова пробелами для легкого восприятия информации, но следует также не забывать и об этом;

2. Повтор слов - иногда мы получаем в ответе 5-10-15 “Однако” на один запрашиваемый текст и это - классическая стилистическая ошибка при переводе, ОДНАКО :D уже сейчас модели показывают лучший результат, по сравнению с предыдущими поколениями. Но нужно быть бдительными;

3. Латиница в кириллице - модели иногда (особенно при заполненном контексте чата) могут начать выдавать артефакты на английском, к примеру - “Privet” или “Hello” вместо “Привет”, и создавать подобный ошибки. Зачастую это проблемы с распознаванием текста или кодировки, такие случаи требуют “ручной проверки”;

4. Двойные тире — - модели зачастую используют двойные тире (—), вместо обычного (-) которые мы всегда используем для экономии времени (я лично не знаю как его вообще ставить на клавиатуре);

5. Скобочные метки/цитаты “” () - практически всегда информация в них может искажаться или выглядеть подогнанной под стиль всего текста, хотя берется как цитата или что-то заимствованное/неавторское. Классическая попытка модели подать все под один тон, одни эмоции.

Также есть занятная статья про распространенные выражения в английском, которые часто используют LLM https://www.grammarly.com/blog/ai/common-ai-words/.

Отличие подходов разных LLM

Каждая модель обладает своими особенностями, которые проявляются как в стиле текста, так и в типичных оборотах, клише и подходах к изложению.

ChatGPT обычно вежлив, избыточно аккуратен и очень тщательно избегает любых острых или неоднозначных выражений. Его ответы часто максимально универсальны, и он склонен к подробным, структурированным объяснениям, а также повторяющимся шаблонам вида как я уже упоминал выше или важно отметить

Grok наоборот, старается вести разговор более неформально и провокационно, легко используя юмор и сленг, иногда даже чрезмерно стараясь показать себя «своим» для аудитории. Его фирменный стиль - живые и прямые фразы, слегка нагловатые обороты и попытки иронизировать там, где другие модели пишут нейтрально.

Gemini обычно старается соблюдать баланс между четкостью, информативностью и лаконичностью. Он отвечает компактно и без лишней воды, но иногда этим делает тексты слишком сухими. Gemini чаще других моделей прибегает к техническому стилю и любит показывать краткую и чёткую структуру ответов, избегая эмоциональной окраски.

Claude выделяется тем, что склонен вести долгие, вдумчивые и слегка философские рассуждения, иногда наполняя тексты излишней лирикой. Он часто дает мягкие и чуть расплывчатые формулировки, избегая жестких утверждений и стараясь быть максимально толерантным и корректным, за счет чего иногда теряется конкретика и четкость ответа.

В итоге каждая модель оставляет свои отпечатки в тексте, и научившись различать эти фирменные черты, можно легко угадать, с кем из AI-писателей вы имеете дело. Но в этой статье не хватит место обозреть все особенности, поэтому возможно, в следующе

Заключение

Чек-лист для быстрого аудита подозрительного текста

• В тексте нет опечаток, пропущенных запятых или других мелких ошибок

• Все предложения примерно одинаковой длины и построены похоже

• Текст нейтрален, в нём отсутствуют личные эмоции или субъективные оценки

• Автор не сомневается, не оговаривается и не исправляет себя

• Нет неожиданных перескоков на другую мысль или тему посреди текста

• Используются повторяющиеся слова, обороты и конструкции

• Встречаются необычные символы или кавычки (« », “ ”, —) вместо привычных

Ощущение что текст написал человек

Уверен, у вас возникает ощущение что текст писал выше не человек. Попробуйте его прочитать и самостоятельно найти в ним маркеры, которые позволяют судить об обратном. Что выдает в нем человеческий текст? Подумайте сами. После этого загляните в чеклист

Краткий гид как не палиться, если вы пишите с ИИ

1. Используйте те модели, в которых можно отдельно задавать тональность текста, структуру промпта и добавить персональный контекст. Те же проекты в ChatGPT

2. В качестве контекста подгружайте большие массивы ваших живых текстов - для этого идеально выгрузить все свои старые посты из Телеграма или других соцсетей, заполнить ими хотя бы половину контекстного окна модели (обычно это 200-500 тысяч токенов).

3. Превратите этот текст в вектор через n8n или любой другой доступный инструмент.

4. Если собственных текстов мало - соберите переписки или посты, которые реально писали сами, и загрузите их в качестве базы.

5. Не поленитесь пройти широкий психологический тест на акцентуации и паттерны мышления (например, тест Янга), чтобы зафиксировать свои личностные особенности.

6. Напишите подробный структурный промт по схеме COSTAR: отдельно пропишите цели, ограничения, стиль, типичный тон, особые маркеры речи

7. Обязательно укажите отдельно tone of voice, и нежелание использовать слишком правильную грамматику - пусть в тексте будут сбивчивости, фразы-паразиты и ошибки.

8. Производите постобработку. В каждый текст добавляйте что-то личное, что не может знать ни одна нейросеть - свой опыт, мысли, сомнения, ошибки и странности.

Только так ИИ начнёт звучать действительно по-человечески и перестанет палиться на первых двух абзацах.

Надеюсь этот текст помог вам глубже погрузиться в вопрос житейского распознавания текста без специальных сервисов. Будем рады видеть вас в канале https://t.me/meetdeadlines!

Ответы для самопроверки