Привет, Хабр! Меня зовут Максим Губин, и я работаю в компании Visiology. Недавно к нам поступил интересный запрос, и мне с коллегами пришлось сделать демонстрационный дашборд для российского сообщества BI-специалистов. Интересно, что визуализация была сделана не под конкретного заказчика, но зато она позволила специалистам оценить, смогут ли они работать с другой BI-системой, если нужно будет сменить ПО.
Да, многие компании сегодня рассматривают альтернативные BI-системы, но специалисты продолжают сомневаться в удобстве и функциональности российских продуктов и open-source решений. В этом посте я расскажу о демонстрации возможностей отечественных платформ для сообщества российских BI-специалистов (Russian BI Chat), а также покажу, как выглядит интерактивный дашборд от Visiology. Этот пост будет интересен тем, кто рассматривает различные варианты внедрения BI-инструментов, включая российские и open-source системы.
Начнем с небольшой предыстории, чтобы было понятно, откуда возникла идея делать демонстрационные дашборды. Недавно сообщество специалистов по BI организовало свой Telegram-канал под названием Russian BI Chat. В нем обсуждаются возможные альтернативы аналитических платформ, которые можно использовать с заданным уровнем надежности и стабильности. На канале обсуждаются и российские решения в сфере BI, и продукты на базе открытых технологий. Проводятся знакомства даже с китайскими решениями, которые могли бы потенциально стать альтернативой привычным многим дашбордам ведущих компаний. Так что в целом я рекомендую познакомиться с Telegram-каналом, если вы интересуетесь этой темой.
Контрольное задание
Но сегодня хочется предметно остановиться на потребностях BI-сообщества, а точнее на реальных запросах, которые возникают у заказчиков. Так, один из организаторов сообщества попросил всех, кто может предложить альтернативу привычным BI-системам, построить свой собственный дашборд. В качестве тестового задания было предложено проанализировать состояние рынка труда в сфере BI. Надо сказать, что наша команда была очень загружена (да и сейчас работы очень много — ситуация на рынке изменилась, и запросы на определенные доработки и внедрения стали еще более острыми). Но мы все-таки решили сделать демонстрационный дашборд, который показал соотношение количества запросов на бизнес-аналитиков и BI-специалистов по работе с различными BI-инструментами.
Чтобы сравнение было более наглядным, и каждый желающий мог сравнить и сопоставить различный BI-софт, в сообществе решили использовать единую схему работы. Мы взяли открытые данные по существующим вакансиям аналитиков на hh.ru. Их нужно было очистить от мусора, выделить уровень зарплат и формат работы, распределить по требованиям к квалификации и опыту работы в определенных системах и так далее.
Дашборды за один день
Решение этой задачи на базе Visiology требует совсем немного времени. Напомню, что в Visiology нет обязательного ETL-инструмента для извлечения данных, и тут можно было бы выбрать любой из доступных на рынке. Но мы использовали наш бесплатный open-source инструмент ViXtract. В результате на сбор данных было потрачено буквально 10-15 минут. Техническое видео решения задачи (8 минут) доступно здесь.
Аналитическая работа была чуть длиннее. Вот здесь мы записали видео, как делали это на базе Visiology BI. Оно занимает 9 минут, хотя по факту на задачу было потрачено чуть более трех часов. Дело в том, что в данных обнаружились интересные ошибки и несоответствия, сильно влияющие на результат. Увидеть их на этапе ETL без визуализации было практически невозможно, и мы немного покопались, чтобы сделать дашборд более чистым.
Посмотреть на результаты работы можно прямо на интерактивном дашборде. Все нужные разделы кликабельны, а желающие могут даже присмотреть себе вакансии, потому что информация все еще актуальная. :)
Что это значит для рынка?
Во-первых, пока мы делали работу, сами удивились, как много вакансий опубликовано для специалистов с опытом работы с Visiology. Нет, конечно аналитиков для Power BI, Qlik и Tableau требуется намного больше, и количество пока несопоставимо…но за прошедший месяц количество вакансий для специалистов по российским решениям стало намного больше, чем было раньше…и чем мы сами ожидали увидеть.
А во-вторых, дашборд вызвал большой интерес со стороны сообщества, и даже получил позитивные оценки. Например, Алексей Колоколов, основатель Института Бизнес-Аналитики, отметил, что нам удалось приблизиться к “высокой планке” западных систем визуализации.
“Лидеры мирового рынка, такие как Qlik, PowerBI и Tableau, задали высокую планку в вопросах визуализации и разбаловали аналитиков широкими возможностями. Мы привыкли к тому, что в BI-системе можно создать продвинутый дашборд просто в несколько кликов мышкой, не написав при этом ни одной строчки кода. Изучив результаты, представленные Visiology, я отметил, что с этим решением можно прямо “из коробки” собрать дашборд практически по таким же принципам. Благодаря этому платформа позволяет создавать средства визуализации данных достаточно быстро и без длительной переподготовки специалистов, которые привыкли работать с другими решениями,” — сказал Алексей в своих комментариях ИТ-прессе.
Дело в том, что мы давно уже работаем над расширением возможностей кастомизации дашбордов, чтобы аналитики могли создавать свои отчеты и визуализации без привлечения программистов. Работа еще идет, но некоторые возможности уже реализованы. А благодаря этому пользователи, привыкшие работать с другими BI-системами, могут делать в Visiology намного больше, причем при минимальной переподготовке. На одном из последних курсов стажировки специалистам потребовалось для этого буквально несколько дней занятий.
Как мы можем упростить миграцию?
Конечно, смена BI-решения — это сложный процесс, и если у заказчика возникает такая задача, мы стремимся максимально упростить миграцию. Поэтому сейчас команда прикладывает все усилия к тому, чтобы сделать такие переходы проще. Кстати, если у вас уже есть конкретные идеи или “боли”, которые хотелось бы преодолеть в вопросах внедрения или замены BI, поделитесь ими в комментариях или личных сообщениях. Сегодня roadmap продукта может претерпеть большие изменения, и, возможно, как раз ваша идея станет важной его частью.
А если вам нравятся дашборды Visiology, я приглашаю вас принять участие в нашей еженедельной расширенной демонстрации платформы. Записаться на очередной вебинар, можно тут ➡️ : ссылка на вебинар. Кстати, в этом же разделе открыта регистрация на мастер-классы с возможностью самостоятельно руками поработать с Visiology. На этих занятиях я помогаю новичкам разобраться с системой и буду рад видеть вас в числе участников.
Комментарии (9)
namee
12.04.2022 10:05+2Зачем? Если есть весьма годные опенсорсные SuperSet, MetaBase и Redash?
Listen1991 Автор
12.04.2022 14:52+1Спору нет, есть очень много отличных открытых решений. В нашем подходе мы предлагаем не только набор инструментов, но так же экспертизу, сообщество и поддержку. И что особо важно, стараемся делать так, что бы BI включал себя не только набор визуализированных данных, но и был инструментом помогающим принимать решения бизнесу и что бы взаимодействие конечного бизнес пользователя было наиболее простым и эффективным.
OptimumOption
12.04.2022 11:20Мда, типа графики и диаграммы сами себя не нарисуют?... Пардон, такой IT нам не нужен...
PetrUm
12.04.2022 18:42Не, графики и диаграмы можно и в экзеле строить. Но тут ведь речь идет про BI, верно? Про подготовку данных, автоматическую визуализацию и прочее. Так что мне кажется, что Оптимум не так понял...
Ananiev_Genrih
12.04.2022 22:30+1Решил всё таки накомментарить, простите за то что не удержался....
Чуть разговор заходит про BI все начинают отчего-то думать про визуализацию, тайлы, тултипчики да про кроссфильтрацию. Ну и про дизайн ессно.
А в это время "русский биай" на хайпволне импортозамещений конечно пошел во все тяжкие: рвут и мечут в сторону эксплуатации джаваскрипт библиотек, как говорится с "миру-по-нитке" лишь бы побыстрей.
Задумайтесь, почему Qlick, Табло и PowerBI шли к зрелости своих продуктов чуть ли не 10-к лет? Ну серьезно, они все там тупые што-ле?
Да потому что то что пытается предложить сейчас русский биай вендор(ы) - это самый последний слой нормального готового BI продукта, визулизация, рисовалка, раскраска. Зачастую этого достаточно в надежде на то что бизнес или тупой или в шоке от санкций - большая вероятность что купит.
Но продолжительные периоды зрелости той большой тройки как раз связаны не со слоем визуализации а то что идет до этого слоя, а это слой получения данных (коннекторов должно быть 100500 примерно ко всему, включая вашу стиральную машинку), слой ETL (не только No-code но и Low-Code а у некоторых капот при желании легко открывается и там либо свой диалект SQL либо функциональщина для упоротых разрабов) и грааль быстрых откликов на клики юзеров - движок исполнения запросов. Колоночный и бИстрый! И до кучи со своим языком моделирования чтобы самыми извращенными метриками бизнесам наносить пользу.
Но русский биай не имеет столько времени на все это, да и не надо: бизнес лишь потом поймет что что-то пошло не так, но будет уже поздно...........................................................
Я не к тому что продукт Visiology плохой, может и хороший, "книгу не читал но осуждаю" - не про меня. Но то что массово повылезали за 1,5 месяца русские сырые "полубиаи" - печально все это.
GromovBI
14.04.2022 11:28+1да, именно так - рассматривать стоит всю Современную архитектуру хранения данных, а не только визуализацию.
Пока, правда, большинство продуктов построено на стеке СПО, что конечно грустно.
И операционные российские системы - тоже... Но думаю, что санкции подтолкнут к развитию нашу ИТ-отрасль и продукты.
GromovBI
14.04.2022 11:21+1Отвечу на вопрос - да, российские системы могут и станут альтернативами зарубежных BI-систем.
Вам, как вендору нужно фокусироваться на развитии продукта (развивать функциональность + исправлять баги (они кстати у вас есть? :) + развивать партнерскую сеть.
Желаю успеха :)
danial72
Да. Импортозамещение дашбордов - самая актуальная проблема It отрасли.