Конференция для разработчиков высоконагруженных сервисов HighLoad++ в этом году получилась просто гигантской. 8 и 9 ноября в СКОЛКОВО приедут 3000 гостей, чтобы вникнуть в тонкости архитектуры, узнать о нововведениях в базах данных, поговорить про микросервисы, облака, большие данные, нейронки и кто знает, в какие еще дебри могут зайти кулуарные разговоры всех этих первоклассных разработчиков.
В расписании 138 докладов основной программы, 14 двухчасовых мастер-классов и несчетное количество митапов (в том смысле, что они будут добавляться по ходу дела, и посчитать мы их сможем только уже по факту). С одной стороны, это все значит, что каждый найдет себе темы по душе и сможет получить ответы на свои вопросы. А с другой — очень сложно выбрать.
Один из вариантов маршрута по конференции — пойти на все самые популярные доклады. Тем более что, работая над расписанием, мы опросили будущих слушателей и составили рейтинг ожиданий. Лидеры голосования выступят в Главном зале (Когресс-холле), который мы по хорошей традиции транслируем бесплатно.
Трансляция будет идти на нашем HighLoad Channel в youtube, чтобы не забыть и не пропустить можно подписаться на канал, на блог или на рассылку — а лучше на всё сразу, у нас все полезное :)
А теперь изучим, что же, собственно говоря, сейчас в тренде, и о чем или кого все хотят услышать.
8 ноября
Вадим расскажет о том, какие метрики собирать с микросервисов на разных этапах, и поделится опытом применения этих метрик для проверки состояния продакшна. В общем, поговорим обо всем, что называется «жизнь после запуска в Kubernetes».
Иван покажет эволюцию приватных облаков в Booking.com, расскажет, на каких технологиях строились разные поколения. Проследим, как внедрение контейнеризированных приложений и SOA заставило перестраивать внутренние процессы и, начинаясь как небольшой проект, в итоге переросло во что-то намного большее.
Николай предлагает познакомиться с концепцией «Помнящей ткани», Persistence Fabric, которая поможет решить массу проблем микросервисной архитектуры с отдельными базами данных для разных сервисов. В докладе поговорим и об элементах ее реализации на графовой СУБД Neo4J.
Дмитрий наконец-то расскажет, можно ли базу в Kubernetes. На конкретных примерах рассмотрим, в каких случаях имеет смысл размещать базы данных (и в целом stateful-приложения) в Kubernetes, а в каких это неоправданно или даже вредно и опасно.
Николай поделится опытом разработки и эксплуатации специализированной timeseries БД, в основе которой лежит Apache Kafka. Главная польза — это то, как можно для данной задачи НЕ реализовывать часть сложнейшей логики, а взять это от Apache Kafka: не делать репликацию своими руками; получить шардинг из коробки; обеспечивать/контролировать целостность данных.
Александр поделится опытом смены технологического стека в системе обработки событий со Spark + Hadoop на ClickHouse. Опыт полезный — это позволило в три раза сэкономить железо и увеличить нагрузку в пять раз.
Алексей в своем выступлении Алексей обещает разобрать ситуации, которые команды разработки видят как решение своих задач, а DBA — как источник потенциальных проблем. Это доклад будет полезен предельно широкому кругу технических специалистов, вовлеченных в разработку ПО и обслуживание баз данных.
Последний доклад первого дня посвящен теме правления разработкой. Антон расскажет об организации инфраструктурной команды и поделится опытом о нюансах и рисках, которые стоит учитывать. Посмотрим, как увеличить командную эффективность, сохранив то же число людей, и как укрепить доверие бизнеса.
А после докладов наступает время вечерней программы — это тот важный нетворкинг, который не получишь через трансляцию. Но вот гвоздь программы — Премию HighLoad++ — смогут увидеть все желающие!
9 ноября
Владимир создает условия для разработчиков, которые очень любят писать тесты. Рассмотрим весь арсенал инструментов, доступных разработчику Badoo для быстрого и удобного написания тестов. Обсудим, какие могут возникнуть проблемы, и как правильно сочетать и использовать инструменты, чтобы поддерживать такое количество тестов.
Олег и Федор считают, что в большинстве случаев так называемый «хайлоад» является сигналом того, что что-то задумано или сделано неправильно. В докладе рассмотрим типичные ошибки архитекторов, разработчиков приложений и администраторов баз данных, которые приводят к неоправданно высокой нагрузке. Помимо этого, конечно, остановимся на тонкостях продвинутых фич PostgreSQL.
Илья подходит к вопросу саморазвития системно, и нас научит. Начиная с того, какие книги обязательно надо прочесть, заканчивая тем, как искать ответы на вопросы, которых в книжках нет и не будет. Пройдем по списку теоретических знаний, которые нужны современному базисту, посмотрим, как поддерживать их up to date. И то же самое сделаем и с практическими навыками.
От кого узнавать, про запросы в ClickHouse, как не от разработчика ClickHouse. Алексей продемонстрирует встроенные в ClickHouse возможности интроспекции производительности запросов и возможности, предоставляемые операционной системой, о которых должен знать каждый.
Юрий подробно объяснит, для чего VK нужен ClickHouse, сколько хранится данных, и многое другое. Пройдемся по пунктам: сбор статистики, конфигурация кластеров, буфер-таблицы, проблемы в эксплуатации, локальный прокси для ClickHouse.
От работы системы уведомлений о нештатных ситуациях вообще-то зависит здоровье людей, которых эта система может разбудить ночью. Когда разрабатываешь систему алертинга, нужно принимать решения, которые находятся на стыке разработки, администрирования и дизайна (в хорошем смысле каждого из этих слов). Об этом и планирует поговорить Алексей на HighLoad++.
Вместе с Алексеем на его докладе проследим весь путь запроса от пользователя к серверам приложений Dropbox. Посмотрим на внешнюю DNS/BGP-балансировку, устройство точек присутствия по миру, трафик внутри дата-центра, трафик между микросервисами бэкенда.
В расписании 138 докладов основной программы, 14 двухчасовых мастер-классов и несчетное количество митапов (в том смысле, что они будут добавляться по ходу дела, и посчитать мы их сможем только уже по факту). С одной стороны, это все значит, что каждый найдет себе темы по душе и сможет получить ответы на свои вопросы. А с другой — очень сложно выбрать.
Один из вариантов маршрута по конференции — пойти на все самые популярные доклады. Тем более что, работая над расписанием, мы опросили будущих слушателей и составили рейтинг ожиданий. Лидеры голосования выступят в Главном зале (Когресс-холле), который мы по хорошей традиции транслируем бесплатно.
Трансляция первого дня HighLoad++
Трансляция второго дня HighLoad++
Трансляция будет идти на нашем HighLoad Channel в youtube, чтобы не забыть и не пропустить можно подписаться на канал, на блог или на рассылку — а лучше на всё сразу, у нас все полезное :)
А теперь изучим, что же, собственно говоря, сейчас в тренде, и о чем или кого все хотят услышать.
8 ноября
10:00 — Что мы знаем о микросервисах? / Вадим Мадисон (Avito)
Вадим расскажет о том, какие метрики собирать с микросервисов на разных этапах, и поделится опытом применения этих метрик для проверки состояния продакшна. В общем, поговорим обо всем, что называется «жизнь после запуска в Kubernetes».
11:00 – Тернии контейнеризованных приложений и микросервисов / Иван Круглов (Booking.com)
Иван покажет эволюцию приватных облаков в Booking.com, расскажет, на каких технологиях строились разные поколения. Проследим, как внедрение контейнеризированных приложений и SOA заставило перестраивать внутренние процессы и, начинаясь как небольшой проект, в итоге переросло во что-то намного большее.
12:00 – Data Discovery в микросервисной архитектуре / Николай Голов (Avito)
Николай предлагает познакомиться с концепцией «Помнящей ткани», Persistence Fabric, которая поможет решить массу проблем микросервисной архитектуры с отдельными базами данных для разных сервисов. В докладе поговорим и об элементах ее реализации на графовой СУБД Neo4J.
13:00 – Базы данных и Kubernetes / Дмитрий Столяров (Флант)
Дмитрий наконец-то расскажет, можно ли базу в Kubernetes. На конкретных примерах рассмотрим, в каких случаях имеет смысл размещать базы данных (и в целом stateful-приложения) в Kubernetes, а в каких это неоправданно или даже вредно и опасно.
14:00 – Apache Kafka как основа для велосипедостроения / Николай Сивко (okmeter.io)
Николай поделится опытом разработки и эксплуатации специализированной timeseries БД, в основе которой лежит Apache Kafka. Главная польза — это то, как можно для данной задачи НЕ реализовывать часть сложнейшей логики, а взять это от Apache Kafka: не делать репликацию своими руками; получить шардинг из коробки; обеспечивать/контролировать целостность данных.
15:00 – Разгоняем обработку событий до 1,6 М/сек / Александр Крашенинников (Badoo)
Александр поделится опытом смены технологического стека в системе обработки событий со Spark + Hadoop на ClickHouse. Опыт полезный — это позволило в три раза сэкономить железо и увеличить нагрузку в пять раз.
16:00 – Топ ошибок со стороны разработки при работе с PostgreSQL / Алексей Лесовский (Data Egret)
Алексей в своем выступлении Алексей обещает разобрать ситуации, которые команды разработки видят как решение своих задач, а DBA — как источник потенциальных проблем. Это доклад будет полезен предельно широкому кругу технических специалистов, вовлеченных в разработку ПО и обслуживание баз данных.
17:00 — «Платформа» в Badoo: как мы построили инфраструктурную разработку / Антон Поваров (Badoo)
Последний доклад первого дня посвящен теме правления разработкой. Антон расскажет об организации инфраструктурной команды и поделится опытом о нюансах и рисках, которые стоит учитывать. Посмотрим, как увеличить командную эффективность, сохранив то же число людей, и как укрепить доверие бизнеса.
А после докладов наступает время вечерней программы — это тот важный нетворкинг, который не получишь через трансляцию. Но вот гвоздь программы — Премию HighLoad++ — смогут увидеть все желающие!
Мы долго к этому шли и наконец раду объявить Премию за вклад в развитие экосистемы интернет-разработки в России. Впервые мы вручим Премию HighLoad++ профессионалам, оказавшим глубокое положительное влияние на развитие экосистемы интернет-разработки в России.
Это благодарность сообщества профессионалов своим лидерам. За труд и самоотверженность, за бессонные ночи и бесчисленные выступления, за веру в свой продукт или технологию. Мы благодарим вас за то, что вы делаете нас сильнее, наши сайты быстрее, а нашу работу легче и продуктивнее!
9 ноября
11:00 — Монолит для сотен версий клиентов: как мы пишем и поддерживаем тесты / Владимир Янц (Badoo)
Владимир создает условия для разработчиков, которые очень любят писать тесты. Рассмотрим весь арсенал инструментов, доступных разработчику Badoo для быстрого и удобного написания тестов. Обсудим, какие могут возникнуть проблемы, и как правильно сочетать и использовать инструменты, чтобы поддерживать такое количество тестов.
12:00 — Как устроить хайлоад на ровном месте / Олег Бартунов и Федор Сигаев (Postgres Professional)
Олег и Федор считают, что в большинстве случаев так называемый «хайлоад» является сигналом того, что что-то задумано или сделано неправильно. В докладе рассмотрим типичные ошибки архитекторов, разработчиков приложений и администраторов баз данных, которые приводят к неоправданно высокой нагрузке. Помимо этого, конечно, остановимся на тонкостях продвинутых фич PostgreSQL.
13:00 — Как стать классным спецом по базам данных? / Илья Космодемьянский (Data Egret)
Илья подходит к вопросу саморазвития системно, и нас научит. Начиная с того, какие книги обязательно надо прочесть, заканчивая тем, как искать ответы на вопросы, которых в книжках нет и не будет. Пройдем по списку теоретических знаний, которые нужны современному базисту, посмотрим, как поддерживать их up to date. И то же самое сделаем и с практическими навыками.
14:00 — Анализ производительности запросов в ClickHouse / Алексей Миловидов (Яндекс)
От кого узнавать, про запросы в ClickHouse, как не от разработчика ClickHouse. Алексей продемонстрирует встроенные в ClickHouse возможности интроспекции производительности запросов и возможности, предоставляемые операционной системой, о которых должен знать каждый.
15:00 — Как VK вставляет данные в ClickHouse с десятков тысяч серверов / Юрий Насретдинов (ВКонтакте)
Юрий подробно объяснит, для чего VK нужен ClickHouse, сколько хранится данных, и многое другое. Пройдемся по пунктам: сбор статистики, конфигурация кластеров, буфер-таблицы, проблемы в эксплуатации, локальный прокси для ClickHouse.
16:00 — Чему мы научились, пока делали собственную систему уведомлений о нештатных ситуациях / Алексей Кирпичников (Контур)
От работы системы уведомлений о нештатных ситуациях вообще-то зависит здоровье людей, которых эта система может разбудить ночью. Когда разрабатываешь систему алертинга, нужно принимать решения, которые находятся на стыке разработки, администрирования и дизайна (в хорошем смысле каждого из этих слов). Об этом и планирует поговорить Алексей на HighLoad++.
17:00 — Трафик-инфраструктура Dropbox / Алексей Иванов (Dropbox)
Вместе с Алексеем на его докладе проследим весь путь запроса от пользователя к серверам приложений Dropbox. Посмотрим на внешнюю DNS/BGP-балансировку, устройство точек присутствия по миру, трафик внутри дата-центра, трафик между микросервисами бэкенда.
Предложить вам лично поприсутствовать мы вряд ли уже можем — СКОЛКОВО оказалось не растягиваемым и не сможет вместить больше 3000 человек. Зато трансляция вполне — следите за бесплатным эфиром или приобретайте полную трансляцию всех докладов.
greendog
HighLoad — мой любимый сериал :)