Привет, Хабр! Этот будет пост о том, как тяжело может идти принятие решения об импортозамещении популярной западной системы. Речь пойдет о замене для PowerBI, который мы только-только начали использовать. Под катом — история с самого начала (в кратком изложении), а также много моих личных страданий и размышлений. Если вы тоже меняли BI, поделитесь своим опытом — может быть он поможет мне или кому-то еще.
Меня зовут Антон, и, если честно, я давно хотел что-то написать здесь. Но никак не доходили руки, не хватало времени или мотивации. Но вот свершилось! Я окончательно замучался с выбором российской BI-платформы. Это и сподвигло написать пост. Я даже нарисовал несколько картинок, чтобы все это было веселее, так что не судите строго за кустарное творчество.
Но поехали. Когда-то я программировал на C#, но уже несколько лет работаю на стыке ИТ и бизнеса и в основном занимаюсь тем, что перевожу с языка руководства на язык ИТ-шников в нескольких компаниях. С той фирмой, о которой речь пойдет сегодня мы успешно прошли этот путь и поняли, что хотят видеть шефы на месте корпоративного портала и системы Service Desk. И вот, наконец, дело дошло до системы BI.
Как хорошо все начиналось…
Приходит начальник и говорит:
— Нам, Антон, нужна такая система, которая будет нам рисовать графики красивые.
— Так у вас же Иван Павлович (имя изменено), уже есть Microsoft Excel…
— Нет, ты не понял…
И вот мы приступили к выбору продукта. Но выбирали недолго. Вместо Microsoft Excel взяли Microsoft Power BI. Дело оставалось за малым (ха-ха) — объяснить разработчикам, передачу каких данных мы настраиваем в PowerBI, а также наладить контакт с теми сотрудникам, которые теперь называются аналитиками.
Хорошо, когда практику BI выстраивает какой-то опытный человек. Но когда компания решает использовать уже имеющиеся кадры, сделав из них аналитиков, все получается намного сложнее.
Директор: — Я хочу видеть ежедневный отчет по выполнению плана во всех подразделениях у себя на рабочем столе (желание хорошее, не спорю).
New-born-Аналитик — Антон, как мне это сделать?
После этого Антон идет разбираться с языком запросов DAX (зачеркнуто) уговаривать руководство, что вместе с Power BI нужен еще и человек, который рубит в этом деле. К счастью, уговоры возымели свои результаты и на испытательный срок был взят настоящий аналитик.
В этот момент я становлюсь еще и переводчиком между начальством и аналитиком.
— Герман (имя изменено), нам нужен такой красивый дашборд, чтобы по нему было понятно, что у нас в филиалах.
— Иван Палыч, что именно должно быть на дашборде?
— Эффективность сотрудников, выполнение плана, цифры из бухгалтерии — все!
— На одном дашборде или на нескольких?
— Я не знаю, спроси Антона, он у нас спец по ИТ…
В результате мы построили несколько дашбордов на PowerBI и наладили интеграцию между платформой и рядом систем — бухгалтерией, складской системой, CRM и немного ERP. Руководство осталось довольно полученным результатом, хотя у меня создалось впечатление, что до полного раскрытия потенциала BI в компании еще далеко. Все-таки, запросы на создание дашбордов у нас происходили в формате “Дайте нам всю информацию по отгрузкам”. Мне кажется, хорошо бы получать задачи с более точными целями, например “построить динамику отгрузок по месяцам и визуализировать отклонения”. Если у кого-то есть понимание, как именно помочь руководителю разобраться с этим, поделитесь какими-нибудь курсами или литературой, пожалуйста.
Тем не менее, результаты были оценены руководством по достоинству:
Мы стали узнавать о различного рода простоях практически сразу, а не в конце месяца, а значит — получили возможность что-то с этим делать.
BI-платформа помогла выявить простаивающие ресурсы (в том числе человеческие).
Сразу вылезли на поверхность слишком затратные и не окупающиеся проекты и инициативы (и были свернуты).
На рабочем столе Ивана Павловича появились красивые картинки, которые радуют его каждый день.
Тут можно было бы завернуть мысль о том, что BI — не такая уж простая штука, и чтобы ей пользоваться нужно самим руководителям понять, как именно они собираются использовать полученные данные. Но тут случилось 22.02.2022, и оказалось, что пользоваться дальше Power BI мы не можем. Точнее может и можем (например. через VPN), но руководство не хочет отвечать за всяческие риски, а к наличию BI уже все привыкли.
Так много русского BI…
Естественно, выбирать российскую платформу для дальнейшего развития BI отправили меня…и тут выяснилось неожиданное. Оказалось, что отечественные разработчики создали множество BI-платформ, которые теоретически (подчеркиваю, теоретически) могут заменить Power BI в цикле сбора данных, аналитики и визуализации. У нас есть даже свой Институт Бизнес-Аналитики, в котором проходят тренинги и подготовка аналитиков для работы с разными системами. Чудеса да и только.
Впрочем, первое, что мне попалось на глаза — это исследование с очень забавным названием: Круг Громова. Ну почему бы и нет: вместо Квадрата Гарнтера — Круг Громова. Импортозамещению подвергается не только Гартнер, но и сам квадрат.
Сначала мне попался выпуск за 2021 год. Читаю исследование. Оказывается, что у нас в России как минимум 9 BI-платформ корпоративного (Enterprise) уровня и еще 5 платформ категории SaaS. Не говорю уже о “нишевых” решениях, которых в исследовании Громова приведено еще штук 20 — даже считать не стал.
Уже избалованное красивыми графиками, сравнениями и диаграммами начальство хочет видеть у себя сравнение всех этих 14 платформ. К счастью, в самом Круге Громова есть сравнительная табличка, которая помогла мне, честно, спасибо г-ну Громову, как-то ранжировать системы и сразу же обоснованно отсечь неподходящие нам решения.
В итоге было решено рассмотреть те платформы, у которых нет оценок “1” и “2”. А это — Форсайт, Visiology, а также Polymatica и Luxms BI, у которых “кол” стоит за “расширенное обнаружение данных”. Но мы, собственно, ничеого такого не планируем и в итоге начали рассматривать 4 системы.
Чуть позже мне подвернулся материал эксперта по BI Евгения Стучалкина, который раньше работал с Qlik Sense. Он говорит, что в сущности не важно, какую BI-платформу вы используете — главное перейти к нормальной модели данных и внедрить Loginom для работы с данными. Концепция интересная, но она одновременно наводить на мысль, что Loginom сам по себе не очень в качестве BI-платформы. А кроме того наше руководство больше всего любит BI именно за визуализацию и графику. Так что мы, вероятно, правильно не взяли его в сравнение.
Тем временем, мне попадается Круг Громова 2022 года. Судя по синопсису, в нем серьезно изменилась методология, однако сохранилось количество систем, участвующих в тесте — их снова 14! Хотя часть “игроков высшей лиги” выбыла, а на их место были приняты другие платформы. Но, к счастью, наши 4 лидера по-прежнему там, и у них по-прежнему неплохие оценки. Вытираю пот со лба и иду к начальству без изменений в концепции по этому поводу. А наш аналитик…
…наш аналитик Герман, который уже полюбился начальству как и красивые графики, тоже подготовился и сообщает, что не будет работать ни с чем другим кроме DAX, потому что он привык писать запросы в такой форме. Не буду приводить разговор дословно, но смысл был в том, что при замене на несоответствующее решение, дашборды буду делаться медленнее, пострадает оперативность, а значит BI станет менее эффективным.
“BI станет менее эффективныым!”
Эта фраза захватывает внимание начальства, и я начинаю думать, что поиск внешнего аналитика, который отлично владеет DAX-ом и уже умееет работать в PowerBI может быть была не такой хорошей идеей. Может быть стоило вырастить кадры внутри…но уже поздно.
Я захожу в поисковик, чтобы доказать, что это невозможно и с удивлением для себя нахожу, что с осени 2022 один из российских вендоров Visiology собирается поддерживать DAX. Эх, жаль, что не к осени 2021! Но новость интересная, воспринимается нашим руководством и аналитиком с большим энтузиазмом, и мы начинаем ждать новую версию платформы, чтобы попробовать ее в деле.
Кажется, все успокоилось, мы поняли, куда переезжать с PowerBI, но тут в СМИ выходит новость: IconBoard (я так понял, учрежденная АО “Глонасс”) щедро предлагает рынку свою BI-платформу, которая уже использована для трекинга автомобилей, подключенных к системе ЭРА-Глонасс. В пресс-релизе сказано, что это “редкий вид BI-систем Enterprise-уровня”, который позволяет делать все в реальном времени.
На меня начинают сыпаться все шишки: как же я недосмотрел, что у нас в России есть “уникальная BI-система корпоративного уровня. И от меня требуют добавить к сравнению и это решение. Но проблема в том, что я не нашел почти никаких подробностей про эту BI-платформу и про компанию, которая ее выпускает. Естественно, блога на Habr у нее нет. Про руководителя и идеологи известно, что он 20 лет работает в банковской сфере и цифровых платежах. А сама платформа, насколько я понял, была опробована только для одной задачи…может быть поэтому она “редкая”? :)
Мои аргументы о том, что вряд ли IconBoard поддерживает DAX никого не убедили, и теперь мы снова находимся в точке, когда нужно выбрать BI-платформу, но какую именно? Вот скажите, доколе будут всплывать из-под плинтуса все новые и новые отечественные BI-решения?
Кстати, серьезно, если вы знаете еще 1-2 российских BI-платформы, подскажите, пожалуйста! Может быть я сразу добавлю их в сравнение, и мы проще пройдем этот этап, от успешного заверения которого зависит моя премия…
Комментарии (31)
mentin
31.08.2022 22:29+1получать задачи с более точными целями
Не видел такого :). Это в принципе ваша задача на стыке IT и бизнеса: выяснять бизнес процессы, как их можно улучшить, какие метрики для этого нужны, какие уже есть, садиться с начальником на час-два в неделю и обсуждать всё это. Чтобы от начальства приходили точные цели какие метрики показать - не видел.
H737
01.09.2022 05:44+1“Дайте нам всю информацию по отгрузкам”. Мне кажется, хорошо бы получать задачи с более точными целями, например “построить динамику отгрузок по месяцам и визуализировать отклонения”. Если у кого-то есть понимание, как именно помочь руководителю разобраться с этим, поделитесь какими-нибудь курсами или литературой, пожалуйста.
Вспомнилось, как аналитик 20+, принятый на работу после защиты кандидатской диссертации, стал внедрять свои знания и применил методику для оптимальной загрузки фуры. Но директор по закупкам 40+ не смог осилить ее и продолжил работать в Excel. )
И еще:
не каждый способен понять, что "Хочу, чтобы было красиво" - очень многовариантно, мягко говоря )
K0styan
02.09.2022 10:34Потому как правильнее спрашивать не что хочется видеть, а какую боль это решение закроет. Что болит или мешает так или иначе любой человек может рассказать (хотя вытаскивание первопричин тоже отдельных скиллов требует). А вот сделать переход от боли к решению - это точно подумать отдельно требует.
Mudrist
01.09.2022 05:54Жаль, что сегодня не все руководители понимают, что внедрение BI - это скорее о методологии. И если в "довесок" с системой нет практик, толку от нее будет не много, на мой взгляд...
MentalSky
01.09.2022 14:37Потому что решение о покупке и внедрении BI-систем принимают вовсе не те, кто ей реально будет пользоваться, т.е. - ощущать пользу от интерактивного взаимодействия с ней.
"BI - это просто визуализатор" конец цитаты
А вот если делать, как Вы пишете - сначала внедрить data-driven процессы и методики - тут и получается, что BI-систему можно использовать почти что любую, т.к. она - лишь в поддержку, для сокращения временных издержек во время следования по кольцу измерение-анализ-решение-воздействие-вернуться_к_началу_цикла
bisufferer Автор
01.09.2022 16:44+2С одной стороны да. Тут даже попался пост на глаза, в котором рассказывают о том, что можно любую BI пришить к правильной модели данных - https://habr.com/ru/company/visiology/blog/678346/. Но с другой стороны, хочется чтобы платформа и не тормозила, и позволяла натягивать новые дашборды, подключать новые данные без привлечения (или с минимальным) кодеров, а главное - максимально быстро и просто. Так что в целом не соглашусь с вами. BI становится больше, чем просто визуализатор, если копать глубже и использовать шире.
MentalSky
02.09.2022 12:47Так что в целом не соглашусь с вами. BI становится больше, чем просто визуализатор, если копать глубже и использовать шире.
так я то в курсе, и нисколько не отрицал полезность BI, я привел пример уровня использования этих систем
diogen4212
01.09.2022 12:51китайский Fine Report/FineBI не рассматривали?
bisufferer Автор
01.09.2022 16:40Не понятно, кто по ним будет оказывать поддержку и помогать внедрять. Так что не зашло. :( Но думали о них, да.
economist75
01.09.2022 16:38Назову не отечественные, но зато сразу две свободные не то что BI-платформы, но пригодные для создания BI-дэшбордов не хуже PowerBI/Qlik/Tableau, к концу третьего дня работы с ними:
Apache Superset
Streamlit
И если Superset прямо сложный и большой (и сразу в Docker), то Streamlit - простой и вполне легко осиливается средним бизнесом (это который до 100 млрд выручки в год, что примерно соответствует нижней части списка Top-100 РФ РБК, с численностью в таких компаниях 2-5k человек). Именно этот средний бизнес и является основным мотором экономики, именно он дремуче-бумажен, именно ему так не хватает "живого" BI, не отягощенного многомиллиоными платежами за лицензионное ПО и откат-консалтеров.
Сама аналитика (SAC, OLAP) для построения дэшбордов - легко собирается в тетрадках/блокнотах Jupyter на Python+Pandas по данным 1С, с небольшой примесью чистого SQL для получения данных из всевозможных CRM/СКУД/SCADA, в это обязаны уметь все современные экономисты (и многие уже умеют). Использование Python часто идет под флагом прототипирования/MVP, но почему-то все чаще оказывается вполне "продактским" и не падает годами. Видимо дэшборды и их созерцание - неспешно-медитативны , и оптимизаций, которые все ломают, тут никто не просит и не делает.
bisufferer Автор
01.09.2022 16:40Ну вот в том и дело, что "поделку" нет возможности развивать. Нужно что-то более-менее готовое, так сказать, с уже устоявшимися практиками.
AndrewBond
01.09.2022 16:38Зашел в надежде наконец узнать, что это за IconBoard глонасовская. Оказывается, информации даже меньше, чем я думал.
bisufferer Автор
01.09.2022 16:39Ну, жаль, что не оправдал ваши ожидания. Но я....тоже не нашел! :)) И потому пост именно о том пути, который пришлось пройти, а вовсе не IconBoard. Такое ощущение. что их функционал -- вообще военная тайна.
Delaila84
02.09.2022 08:48+2Многие думают, что BI - это рисование графиков. А что под каптом у этого - не важно. Поэтому и развелось чертова куча типа-BI платформ, которые на самом деле и правда рисовалки. А нужна действительно рабочая система. Вот Qlik Sense явно не за пару лет создавали. Но это мое мнение.
GromovBI
02.09.2022 10:38+2спасибо за прекрасный текст :) Я тот самый Громов. :) после создания рейтинг 2022 года уже добавилось еще 5-8 BI систем в шорт лист. Скажу сразу - везде надо будет серьезно программировать, причем на другом уровне. Да, можно посмотреть FineBI, мы сейчас очень плотно работаем с этим вендором, поддержку оказываем и думаю через год-другой она может стать лучше (есть уже крупные клиенты и есть роадмап доработок продукта под Россию). Можете написать нам запрос через https://datafinder.ru/ . Кстати, скоро будут рейтинги по ETL продуктам и по СУБД. Пишите и мне лично - тоже готов отвечать на вопросы и помогать. Из того чего нет в исследовании - Insight BI, да интересно посмотреть на Магрепорт (от Магнита ПО - рассылка и конструктор отчетов).
bisufferer Автор
02.09.2022 11:22Ого, тот самый Громов - это круто! Мне правда очень приятно, что вы тут написали. Может быть вы прольете все-таки свет на IconBoard? И что скажете про InsightBI, раз уж его нет в исследовании? Заранее спасибо. :)
GromovBI
02.09.2022 13:00в Iconboard направили запрос и если они дадут информацию и будут сотрудничать - то мы все узнаем о них больше. По Insight - 1) на нашем Youtube канале через месяц будет разбор их системы. 2) мы знали о них до исследования 2022 года и они не попали туда по конкретным причинам (технологическим). Сейчас за год они сообщили, что сделали существенный апгрейд продукта и будем изучать их и в следующем обзоре они скорее всего будут.
Ivan_2424
02.09.2022 11:38Задам прямой вопрос...а если вы теперь становитесь представителем FineBI, можно ли далее считать ваши исследования объективными, ведь тогда вы аффилированы с этой компанией? Или нет?
GromovBI
02.09.2022 13:02Иван, конечно можно! Обзоры мы делаем для души и от чистого сердца. После событий последних месяцев основной бизнес компании по Qlik/Tableau/PowerBI изменился кардинально и мы стали и партнерами основных российских BI-систем и в т.ч. FineBI. Это был вопрос выживания (иначе разошлись бы по домам). Дополнительно сообщу, что наши планы сделать полноценную исследовательскую компанию (уже делает не 1, а 3 исследования) и будет еще больше. По сути делаем российский Гартнер. И это самостоятельная единица не привязанная к рынку BI (будем исследовать и ERP и CRM и многое другое). Но быстро конечно это не получается.
pvdubinin
02.09.2022 11:15A DataLens смотрели? Недавно про него как раз был пост: https://habr.com/ru/post/674038/
denspbru
02.09.2022 11:15Есть ещё малоизвестная но весьма перспективная платформа: Навигатор https://navplatform.ru
Отличная визуальная часть и из коробки клиенты для всех платформ: IPhone/IPad/Android
Платформа работает на старом добром SQL без заморочек.
Innocenceu
02.09.2022 11:23Автор - научитесь писать заголовки, причем тут ГЛОНАСС и ваш выбор BI. Как любая уважающая себя компания, Вы можете обратиться к разработчику и попробовать демо/взять пилот, а не строить "теории заговора" и копать инфу об ген.дире компании.
bisufferer Автор
02.09.2022 11:26+2Читатель, не учите меня писать заголовки, научитесь сами их читать. Я в лиде четко рассказал, о чем будет пост. О моих страданиях. :) Не интересно, не читайте. А насчет обратиться к разработчику - это отличная идея! Когда "гребаные пасатижи", этих BI - платформ чертова куча, и очередная заявляет себя "лучшей и уникальной", прикрываясь брендом ГЛОНАССа...я так понимаю, ни для чего больше не использовалась. Непонятно ничего - ни политика лицензирования, ни возможности, ни наличие кейсов и практик. Может быть вы из этой компании? Так чем стыдить меня за заголовок, напишите что к чему...простите за прямоту, наболело уже.
Innocenceu
02.09.2022 14:19я не работаю в этой компании - работаю в банке и у нас знают что такое Vendor Management. Не всегда компания дает разрешение вендору опубликовывать использование их ПО, т.к. это может понести риски - ИБ, репутационные и т.д.
имхо: не нашли ничего о продукте - идете к вендору
TheBloodofAnother
02.09.2022 11:32+2Феерия возможных вариантов действительно сегодня впечатляющая. :) Мы в итоге после длительных раздумий выбрали Visiology. Хотя честно признаюсь, перевесило в первую очередь не поддержка DAX в версии 3.0, а наличие какого-никакого сообщества в России, быстрой реакции поддержки и готовности вендора реагировать на запросы и допиливание функционала.
chvugn
02.09.2022 13:49Очень странно, что аналитик так сильно влияет на то, какая BI будет установлена и в довесок категорично отказывается работать с тем продуктом, где нет DAX, если бы не Visiology, он бы просто сказал ну всё, для меня в этой стране больше работы нет?
PlayTo
02.09.2022 14:00+1Судя по всему сегодня много аналитиков продолжают работать с PowerBI через одно vpn-ное место. Это, конечно, не может продолжаться вечно...но пока работает...
dmyudin
Я сегодня видел пост, что "Магнит" предложил свою BI-систему тоже для всех и каждого. Надеюсь, ваше начальство этого не видело. )