История развития языковых моделей: ч. 2, от ChatGPT до рассуждающего режима +15
Публикации с тегом токенизация
Аномалии DeepSeek-v3 и DeepSeek-r1: глюкнутые токены и чат, теряющий идентичность +31
Почему токенизация – костыль? Передовые подходы для больших языковых моделей следующего поколения +31
Обучение GigaChat с контекстом в сотни тысяч токенов +17
Применение LayoutXLM для извлечения сущностей из чеков +7
Распознавание именованных сущностей: механизм, методики, сценарии использования и реализация
Обработка текста. Модель Sequence-to-sequence
Краткий обзор токенизаторов: что это такое и зачем это надо?
Основы сопровождения токенизации: что нужно знать +3
Вызовы эпохи Web3 для технологии блокчейн и возможные решения -2
Используй ChatGPT правильно, или проблема контекста в больших языковых моделях +1
Как работает SberPay под капотом +15
- IT-компании
- Сбер corporate blog
- Payment systems
- Development of mobile applications
- Finance in IT
- Блог компании Сбер
- Платежные системы
- Разработка мобильных приложений
- Финансы в IT
Как сделать контекстное окно на 100K в большой языковой модели: обо всех фокусах в одном посте +17
- Machine Learning
- Artificial Intelligence
- CPU
- GPGPU
- Машинное обучение
- Искусственный интеллект
- Процессоры
- Natural Language Processing
Как работает веб-браузер (с картинками) +22
Почему Chat GPT говорит по-русски с нейронным акцентом? Специфика токенизации кириллицы нейронной сетью от Open AI +38
