Публикации с тегом Transformers
Своя GPT-like LLM по WH40K с нуля. Часть 4: Дообучение на вопрос–ответ (SFT) +6
Дообучил pretrain ruGPT3 XL 1.3B до уровня LLM (~2020 год, ChatGPT выйдет через 2 года). Сравнение с Gemma3 1B 2025 года +21
Своя GPT-like LLM по WH40K с нуля. Часть 3: pre-train LLM +8
Своя GPT-like LLM по WH40K с нуля. Часть 2: собираем трансформер +5
Как оценить библиотеку для ИИ-агентов без слепой проверки финального ответа +7
Своя GPT-like LLM по WH40K с нуля. Часть 1: токенизируем Империум +7
Большое обновление Meta-Spider. Ручка неуверенности, сторож и фабрика обвязок, а так же новый модификатор поведения +12
От пульта до полотенца — учим робота искать всё, что угодно +4
Умеют ли трансформеры водить машину +30
Делаем фреймворк Meta-Spider на основе мета-внимания +11
Базовые нейросетевые модели для кредитного скоринга физических лиц +8
meta‑attention is all you need
Клиент — это тоже вектор? Как мы хотели улучшить ML‑модель, а построили similarity engine
Метрика EICS — ищем у трансформера причинное место
