«Переходи на Spark», говорили они. Сравнил pandas, Polars, DuckDB и PySpark на слабой машине +1
Публикации с тегом pyspark
Как превратить LLM‑разметку в универсальный Spark‑пайплайн +8
От legacy до промышленной платформы: инженерная эволюция OSA в «Магнит» +9
4 YAML-файла вместо PySpark: как аналитикам строить пайплайны без разработчиков +4
Как я обрабатываю 15 миллионов GPS-пингов в день для системы транспортной аналитики Ташкента +17
Продвинутый анализ на PySpark: учимся работать с рекуррентными соотношениями +1
Что нового в Apache Spark 4.0 +3
Spark on Kubernetes: наш путь к автоматизации через кастомный оператор Airflow +5
Повышаем эффективность хранения данных до 300 раз с помощью таблиц SCD-2 +4
Опыт Звука: как реализовать рекомендательную систему аудиокниг с использованием больших языковых моделей (LLM) +5
- Блог компании HiFi-стриминг Звук
- Python
- Машинное обучение
- Искусственный интеллект
- Анализ и проектирование систем
Бутстрап в PySpark +7
Оптимизируем Shuffle в Spark
Как упаковать бэкенд-код на Go для аналитики на базе Spark
Как маскировка данных спасает вашу приватность
Spark. План запросов на примерах
