Совместный доступ к Spark-датасетам из разных приложений — Redis нам в помощь +1 02.12.2022 14:25 MaxRokatansky 0 Хранение данных Блог компании OTUS
Автоматический подбор параметров для Spark-приложений на примере spark.executor.memory +3 24.11.2022 11:41 oneFactor 2 Scala Блог компании Конференции Олега Бунина (Онтико) IT-компании IT-инфраструктура Блог компании oneFactor
Извилистый путь через «скалу» в Spark: как одинэсник стал дата-инженером и полюбил строго типизированные языки +4 22.11.2022 10:00 Tituch 3 Программирование Scala Карьера в IT-индустрии Data Engineering Блог компании Криптонит
Apache Spark на Kubernetes: какие уроки можно извлечь из запуска миллионов исполнителей Spark +3 18.11.2022 13:11 Olga_Mokshina 0 Big Data DevOps Kubernetes Блог компании VK
Автоматический подбор параметров для Spark-приложений +5 27.10.2022 11:12 oneFactor 7 Big Data Машинное обучение Scala IT-инфраструктура Блог компании oneFactor
Realtime-матчинг: находим матчи за считанные минуты вместо 24 часов +35 14.10.2022 12:08 alex_golubev13 3 Обработка изображений Python Машинное обучение Natural Language Processing Блог компании Ozon Tech
Подводные камни Spark: что делать с перезаписью и дополнением в таблицах +7 12.10.2022 11:05 yrepear 0 Администрирование баз данных Хранение данных Big Data Хранилища данных Блог компании VK
Потери данных при репликации в аналитическое хранилище — автоматические сверки и мониторинг качества данных +15 22.09.2022 15:01 gladkikhtutu 19 Администрирование баз данных Хранение данных Big Data Блог компании Туту.ру
Заметки дата-инженера: интеграция Kafka и PySpark -1 05.09.2022 13:07 neoflex 3 Программирование Python Big Data Блог компании Neoflex
Количество партиций в Spark при инициализации Data API: DataFrame, RDD, DataSet +6 02.09.2022 18:17 MaxRokatansky 0 API Блог компании OTUS
Что должен знать дата-инженер. Роадмап для джуниора +21 30.08.2022 11:02 vasenkovid 2 Big Data Карьера в IT-индустрии Hadoop Блог компании Lamoda Data Engineering
Как организовать потоковую обработку данных. Часть 1 +10 25.08.2022 14:00 newnew94 4 Data Mining Big Data Блог компании МТС Data Engineering
Параллельные вычисления в Apache Spark +6 23.08.2022 12:42 X5RetailGroup 10 Big Data Data Engineering Блог компании X5 Tech
Пять советов по исправлению перекошенных соединений в Apache Spark +2 03.08.2022 11:00 1shaman 0 SQL Серверная оптимизация Apache Блог компании FirstVDS
Как реализовать магию Sqoop для загрузки данных через Spark +10 29.07.2022 16:19 Bee_brightside 2 Хранение данных SQL Big Data Hadoop Блог компании Билайн Бизнес