Команда Business Intelligence GlowByte приветствует всех читателей сегодняшнего гайда по обработке данных в FineBI 6 версии. Меня зовут Александр Ларин, руководитель центра поддержки и обучения BI-решений в GlowByte, и в этой статье я поделюсь полезными функциями, которые облегчат вашу работу по подготовке данных для их последующего анализа.
Гайд включает в себя пять уроков, которые помогут вам ближе познакомиться с инструментами редактирования данных в FineBI. Этот материал будет полезен начинающим BI-разработчикам. Если после прочтения вы захотите разобраться со всеми особенностями платформы, закрепить базовые знания и прокачать навыки создания сложных визуализаций, приглашаю на наши курсы.
Урок 1. Быстрая очистка и простая сортировка данных
Как правило, при анализе используемые нами данные представляют собой неочищенные таблицы: могут встречаться пустые значения, дубликаты, а может появиться необходимость в изменении типа полей и их фильтрации. Для таких случаев в FineBI есть удобные функции редактирования, такие как:
Настройка полей (Field Settings) – позволяет изменить тип данных, переименовать поля таблицы, а также убрать ненужные для анализа столбцы.
Например, если мы хотим отобрать только интересующие нас поля из таблицы:
Выбираем "Field Settings".
Убираем выбор всех полей через "Deselect all".
Выбираем столбцы, которые нам нужны для анализа. На этом же этапе мы можем поменять тип данных на текст, значение или дату, а также задать новое наименование столбца.
Фильтрация (Filter) – помогает в фильтрации полей по заданному условию или формуле расчета
Попробуем отфильтровать поле «City» из предыдущего примера по заданному условию «City» = «Mandalay».
Для этого используем инструмент «Filter».
Добавляем условие через «Add Condition», выбираем столбец «City» и сам город «Mandalay», по которому нужно вывести результат. Нажимаем «ok».
Сортировка (Sort) — включает в себя сортировку по выбранному пользователем полю.
Сделаем сортировку полученного результата фильтрации по полю Итоговой стоимости (Total)
Выбираем «Sort» в панели управления.
Добавляем поле, по которому будет происходить сортировка. В нашем случае это «Total». При необходимости можно поменять тип сортировки: по возрастанию (Ascend) или по убыванию (Descend).
Удаление дублей (Delete Duplicate Row) — также выполняется по выбранному полю.
Все перечисленные инструменты доступны в интерфейсе редактора данных и помогают быстрее справиться с первичной обработкой.
Урок 2. Различные способы объединения таблиц
Если при работе с данными вы сталкиваетесь с необходимостью объединить таблицы, то в FineBI вы можете решить эту задачу тремя способами: через «Union all», «Join» или «Column from Other Tables». Разберем подробнее, в чем же их отличие между собой.
Union all
Самый простой способ объединения таблиц в FineBI осуществляется с помощью функции «Union all». Важно, чтобы столбцы и структура выбранных таблиц были одинаковыми, поскольку происходит их вертикальное сведение. При таком способе объединения количество строк увеличивается, однако число столбцов остается одинаковым.
Представим некую торговую корпорацию, которая ежемесячно готовит таблицу о продажах товаров. Для составления ежегодного отчета ей необходимо объединить все таблицы за каждый месяц года через функцию «Union all».
Column from Other Tables
Теперь представим, что в одну из таблиц для ежегодного отчета добавили новый столбец с оценкой покупки от клиентов (Rating). Для того, чтобы он появился в анализируемой таблице, воспользуемся инструментом «Column from Other Tables», который работает по принципу функций «Vlookup» и «Sumif» из Excel. Это значит, что «Column from Other» может агрегировать (Sumif) или искать соответствующие измерения из других таблиц и объединять их с текущей таблицей (Vlookup).
Join
Для тех, кто привык работать с SQL и знаком с операторами типа left join, right join и т. д., функция «Join» в редакторе данных FineBI может быть более интуитивно понятной. Эта функция ведет себя аналогично SQL‑операторам и может быть легко освоена теми, кто уже знаком с базовыми принципами SQL.
Функция «Join» FineBI может добавить информацию об измерениях или же проанализировать какой‑то показатель из другой таблицы.
Урок 3. Гибкая обработка данных и упрощение их структуры
Column to Row
Если в ходе работы с данными вам попадаются двумерные таблицы, которые обычно имеют фиксированное количество строк и столбцов, и если они неудобны для произведения ваших расчетов и агрегаций, вы легко можете их преобразовать через функцию «Column to Row». Она позволяет выбрать нужные нам поля и отобразить их построчно в одном столбце.
На примере следующей таблицы продаж, где даты зафиксированы отдельными столбцами и представляются неподходящими для вычислений, воспользуемся «Column to Row», чтобы привести ее в удобный для анализа вид.
Row to Column
Для случаев, когда расчет подразумевает использование одномерной таблицы вместо двумерной, в FineBI предусмотрена другая, противоположная предыдущей, функция «Row to Column». Как вы уже могли догадаться, она позволяет преобразовать данные из строки в столбец.
Например, на основе следующей таблицы нам требуется рассчитать, какой продуктовой линии (Product line) отдают большее предпочтение покупателей‑женщин и покупателей‑мужчин. На первый взгляд таблица сложно воспринимается для целей расчета, поэтому преобразуем данные с помощью функции «Row to Column».
Group summary
Многофункциональный инструмент «Group summary» может быть полезен не только в группировке отдельных столбцов и строк таблицы, а также в быстрых расчетах и фильтрации благодаря трем дополнительным опциям. Рассмотрим их подробнее.
Для начала выберем функцию «Group summary».
После первичной группировки наша таблица выглядит следующим образом:
Однако возможности функции «Group summary» на этом не заканчиваются. Далее попробуем настроить группировку внутри поля Payment через Customize Grouping.
Создадим две группы чеков, нажав на Add Group: электронные (e_check), которые отправляются за платеж по электронному кошельку или по карте, и обычные (check) — за оплату наличными. В каждую группу добавим соответствующие поля Payment (Ewallet, Cash, Credit card).
Следующая опцияфункции «Group summary» — выполнение быстрых расчетов для каждого значения (Total) из выпадающего списка.
И наконец, завершим действия добавлением фильтрации. Данная опция позволяет учесть в быстрых расчетах вводимые пользователем условия. Так мы можем указать критерий — вывести значения валового дохода (gross income) только при оплате наличными (Payment — Cash).
Урок 4. Добавление новых показателей
Когда вы подготовили структуру данных и объединили несколько таблиц, важно остановиться и подумать о проблеме, которую исследуете. Проверьте, есть ли в ваших таблицах необходимые показатели для решения задачи или нужно добавить новые вычисления или аналитические показатели.
Formula Column
Например, в таблицах продаж обычно отсутствует такой показатель, как доля выручки, — приходится самостоятельно его высчитывать, чтобы оценить рентабельность товара/предприятия на основе данных объема продаж и издержек производства.
Для таких случаев в FineBI существует функция «Formula Column», которая позволяет работать так же, как обычные формулы в Excel.
Summary Column
Затем с помощью функции «Summary Column» мы можем легко рассчитать сумму выбранного поля.
Assignment Column
Функция «Assignment Column» позволяет создать группы внутри одного поля через распределение значений. Например, сформируем группы столбца Rating, где каждая оценка покупателя будет иметь свое наименование: Fail, Satisfactory, Good или Excellent.
Урок 5. Добавление шагов обработки данных
Добавление и удаление шагов обработки данных
Одним из ключевых преимуществ FineBI является возможность посмотреть историю изменений данных. Если вы что-то не поняли или хотите увидеть логику вычислений, вы всегда можете отследить шаги преобразований в правой боковой панели.
Пользователь может добавлять, удалять или временно отключать выбранные шаги. Это не только облегчает индивидуальную работу, но и значительно упрощает коллективный анализ данных, делая процесс более прозрачным и доступным для всех участников.
Копирование шагов обработки данных
И наконец, заключительная на сегодня опция FineBI — копирование шагов обработки данных и их перенос в другие датасеты. Если в работе вы встречаетесь с повторением всего процесса анализа при каждой смене данных, то теперь вам не придется проводить все операции заново с нуля. Достаточно скопировать те шаги, которые необходимо произвести на других датасетах, и перенести их.
Наш этом наш вводный урок по редактированию данных подошел к концу.
Датасеты для тренировки можно скачать по ссылке.
Свои вопросы можете смело задавать в самом крупном сообществе FineBI в России.
Пользуясь случаем, хочу пригласить всех на образовательный ретрит GlowByte и DataYoga по работе с BI-инструментом FineBI! ?
10 дней теории, практики и вдохновения от ведущих российских компаний. Узнайте о возможностях анализа и визуализации данных в FineBI, а также получите практические советы по оптимизации BI-практики от GlowByte.
Программа подходит для всех, кто работает с данными, от разработчиков до руководителей.
Регистрируйтесь по ссылке
По всем вопросам о продукте, ценах на лицензии, миграции пишите: bi@glowbyteconsulting.com