Последовательное иерархическое распределение сумм между получателями. Постановка задачи. Выбор технологий
Публикации с тегом Spark
Когда автоматизация становится умнее: как трансформеры изменили AutoDL в Альфа-Банке +8
Архитектура Apache Iceberg: модель метаданных, на которой всё держится +1
Volga: движок обработки real-time данных для AI/ML — аналог Spark и Flink на Rust (Arrow + DataFusion) +5
Spark SQL Scripting. Новые возможности для инженеров данных +10
ORC in Hive/Spark — «анатомия» файла, индексация и фильтр Блума +5
CSV в Spark: Искусство правильной загрузки данных +2
Неочевидные оптимизации Iceberg таблиц +1
asapBI: архитектура ETL процессов – Trino, Spark, Airflow и прочий зоопарк +2
Почему Lakehouse нельзя построить без Spark +3
Data Forge: Собираем весь современный дата-стек на своем ноутбуке одной командой +8
Spark Connect. А нужны ли перемены? +12
Spark 4.0 на горизонте: Готовимся к апгрейду или остаёмся на проверенном 3.0? +7
От реляционных СУБД к экосистеме Hadoop +1
От сырого кликстрима к чистым датасетам: как мы в Lamoda Tech варим данные +8
