PySpark для аналитика. Как выгружать данные с помощью toPandas и его альтернатив +3
- Анализ и проектирование систем
- Аналитика мобильных приложений
- Блог компании AvitoTech
- Python
- Data Mining
- Big Data
Публикации с тегом pyspark
Паттерны проектирования для систем машинного обучения. Часть 1 +5
Основные инструменты для работы в Data Engineering: введение для начинающих Data Engineer'ов -1
Как мы распараллелили CatBoost на Spark +5
Знакомство с Fugue — уменьшаем шероховатости при работе с PySpark +2
Pyspark. Анализ больших данных, когда Pandas не достаточно +4
Генерация конвейеров обработки данных в Dataflow +27
Как быстро разрабатывать сервисы обработки данных в реальном времени с помощью PySpark Structured Streaming и Kafka +3
Подсчет количества пар товаров в продуктовых чеках с помощью трех инструментов: Python, Spark, SQL +1
Что лучше: Spark Structured Streaming или полное прекращение работы прода? +11
Работаем с большими наборами данных в Spark3.2.0 с использованием Pandas +3
Миграция данных из различных RDBMS в HADOOP +7
Построение архитектуры проекта при работе с PySpark +1
Функции высшего порядка в Spark 3.1 +4
Общего решения из коробки — нет, или Тестируем PySpark MLlib +12
