Однажды вечером я сидел перед ноутом и ел борщ, размышляя, в чем коренное отличие диффузных моделей от GPT-подобных трансформеров. Да, они хорошо умеют в генерацию изображений, а теперь даже текстов, но последовательности - это все еще их ахиллесова пята.
Если вы не в курсе диффузной модели от Inception Labs, то есть такая. Первые эксперименты с ней меня очень ободрили - работала быстро, креативно, местами даже интересно. Но позже… запал пропал. Все чаще она теряла нить, путалась в логике и будто бы начинала играть в ассоциации с самой собой.
Особенно это заметно, если дать ей задание, которое одновременно звучит как вызов и как изощренная пытка: рассказ из 33 предложений, каждое начинается на следующую букву алфавита, и в нем обязательно должны быть «суперпозиция», «интерференция» и «декогеренция».
Почему бы не объединить это с самой загадочной темой на свете - любовью? Я набросал промпт:
Сгенерируй рассказ на русском (≈220-260 слов) о том, как квантовая запутанность влияет на любовные отношения. Формат строгий:
33 предложения.
Первое - на «А», второе - на «Б», и так далее до «Я».
В тексте должны обязательно встретиться слова: «интерференция», «суперпозиция», «декогеренция».
После последнего предложения - сгенерировать SHA-256-хэш.
Так работает GPT-4o от OpenAI
GPT - справился. Диффузная модель? Ушла в запой на 17-й букве. Сначала она честно пыталась имитировать буквы. Потом перешла на английский. Потом попыталась нарисовать «декогеренцию» в виде радуги (шутка) и зависла навсегда.
Так (не) работает Mercury от Inception Labs
Вот этот самый рассказ (см. ниже) я уже публиковал в своем Telegram-канале «ТехДир Подсекин», где иногда выкладываю ИИ-эксперименты с юмором и болью техдиректора, но больше пишу про свой опыт и будущие проекты, связанные с ИИ.
Мораль? GPT понимает текст как поток, контекст как реку, а любовь как суперпозицию чувств. Диффузная модель видит всё это как облако точек. А я просто хотел романтический рассказ.
Зато теперь у меня есть новый способ отличить модель: если она справилась с квантовой любовью по алфавиту - перед вами трансформер.
И сам рассказ про квантовую алфавитную любовь авторством GPT-4o
Квантовая любовь
Алина задумалась о странной связи, которая тянулась между ней и Богданом, даже когда они были за тысячи километров друг от друга.
Богдан утверждал, что это — квантовая запутанность, только в романтическом исполнении.
Вечерами она чувствовала его настроение, как будто они были частью одного уравнения.
Гуляя по парку, она вдруг начинала смеяться без причины — а потом он писал: «Я только что вспомнил твою шутку про кота Шрёдингера».
Даже когда ссорились, это ощущение не исчезало — как будто ссора шла не между ними, а в них.
Если бы они были фотонами, то давно бы уже интерферировали в одном сердце.
Жаль, физика не могла объяснить, почему они расстались.
Зеркала прошлого отражали лишь попытки сбежать, а не разобраться.
И всё же, как только ей становилось плохо — он писал.
Йога, кстати, не помогала избавиться от этого чувства связи.
Как бы она ни старалась, состояние суперпозиции — вместе/не вместе — оставалось.
Ложась спать, она думала, что, возможно, любовь — это нарушение локальности.
Может, именно поэтому они никак не могли окончательно разойтись?
Никакие другие отношения не ощущались настолько «перепутанными».
Опыты над её сердцем продолжались, как будто он был большим адронным коллайдером.
Парадоксально, но с другими мужчинами у неё не возникало даже декогеренции.
Разве можно было считать это нормальным?
Скорее — это был научный эксперимент, в котором чувствам не оставалось выбора.
Тепло от его сообщений распространялось мгновенно, как будто не было ни расстояния, ни времени.
Улыбка появлялась до того, как она понимала, почему.
Физики бы назвали это нелокальным взаимодействием.
Химики — гормональной привязанностью.
Циники — привычкой.
Чувствующие — судьбой.
Шутка ли, но даже случайно услышав его имя, она замирала.
Щелчок в голове, как при измерении — и всё рушилось.
Эмоции не выдерживали наблюдения, как волна — при интерференции.
Юмор судьбы состоял в том, что они оба это знали, но ничего не делали.
Явление это было сложнее любого уравнения Шрёдингера.
SHA-256: d4c5ee7b55f72f3a4272f3644ecdb005648ac08dd9c23df14e183c70725adf3e
OldFisher
Всё уже было у Лема, господа:
WondeRu Автор
Лема нужно всего перечитать на досуге.
Но с подобным диффузные модели относительно хорошо справляются, ибо не нужно делать последовательность. (Только что проверил)