Вы даже не поймете, что он сломан: почему панель мониторинга зеленая, а агент врет третий день подряд +6
- Блог компании Cloud.ru
- Искусственный интеллект
- DevOps
- Анализ и проектирование систем
- Машинное обучение
Публикации с тегом метрики качества
AI‑агенты в проде: как оценивать качество, стоимость и стабильность +5
Почему QA не уменьшает технический долг — и именно поэтому он так важен +2
Как повысить отказоустойчивость сервисов в кластере виртуализации с помощью оптимизации их распределения +3
Месть дата-сайентиста: почему LLM не отменили нашу профессию +12
Как мы научили ИИ-агента отвечать за свои слова: 10 000 сообщений, Венгерский алгоритм и немного магии
От RAG-прототипа к агенту в продакшн: путь по метрикам, а не по моде
- Программирование
- Блог компании LLMStart.ru
- Искусственный интеллект
- 1С
- Будущее здесь
- Машинное обучение
Инженерия качества: Как перестать надеяться на удачу и начать измерять своих ИИ-агентов [Часть 2]
Почему бенчмарки в AI сломались — и что с этим делать в понедельник
Как оценивать RAG-системы: метрики, методы и что измерять в первую очередь +11
Метрики здоровья команды: быстрая диагностика в период кризисов -1
Что значит «отвечать за качество»? +5
Как оценить качество машинного перевода +3
Метрики QA: Анализ, Применение, Внедрение. Часть 2: Эффективность тестирования и производительность тестов
GPT-4o vs YandexGPT: как мы отлаживали метрики в DeepEval из-за требований ИБ +9
