Как студенческое исследование по оценке репутации контрагентов с использованием открытых данных переросло в реальное ИТ-решение представителя среднего бизнеса.

История моей ИТ-инициативы началась с университетского проекта по управлению рисками, который был выполнен на кафедре «Бизнес-информатика» Финансового университета. Одновременно я занимался оценкой благонадежности контрагентов и рисков сотрудничества с ними в реальном бизнесе.

В рамках университетского исследования изучены взаимосвязи между различными корпоративными данными, включая факторы риска, и результатами сотрудничества с контрагентами. В исследованиях выявил взаимозависимость репутационных рисков с банкротствами аффилированных лиц, политическими взглядами учредителей и судебной активностью, при этом благонадёжность определяется устойчивым развитием, участием в госзакупках и политических кампаниях.

Руководству были представлены результаты исследования взаимосвязей между репутацией и благонадёжностью контрагентов. На основе проведённого исследования было принято решение внедрить ИТ-решение по автоматизации анализа и визуализации данных с использованием открытых данных из источников, таких как ФНС, Право.ру и СКБ Контур, доступных через открытые API. Так, функционал этих инструментов начал применяться в реальном бизнесе для оценки благонадёжности контрагентов.

Университетский проект с использованием открытых данных

На первом этапе университетского проекта я проанализировал динамику публикаций по темам репутационных рисков, автоматизации финансового анализа и визуализации данных. Методом экспоненциального сглаживания был спрогнозирован рост интереса к этим темам в ближайшие годы.

Динамика публикационной активности по темам ‘Data Visualization’ и ‘Financial Data Automation’ в 2009–2024 гг. с прогнозом до 2027 г.
Динамика публикационной активности по темам ‘Data Visualization’ и ‘Financial Data Automation’ в 2009–2024 гг. с прогнозом до 2027 г.

Затем был проведен анализ различных аспектов, влияющих на репутацию контрагента, чтобы найти связь между репутационными рисками и статусом благонадёжности. Используя открытые данные из ФНС, Право.ру и СКБ Контур, я собрал информацию о банкротствах аффилированных лиц, судебной активности и политических взглядах учредителей. К примеру, собраны и проанализированы экспертные мнения — данные из различных источников, включая новости о банкротстве аффилированных лиц, судебной активности и политических взглядах учредителей.

Методы сканирования/анализа:

Метод

Характеристика

Визуализация динамики упоминаний

Отображение частоты упоминаний конкретной темы и/или ученых/экспертов в разных источниках за определенный период

Сравнительный анализ

Оценка упоминаний контрагентов в различных СМИ

Идентификация трендов

Представление изменений исследовательского интереса к теме

Что сделано на первом этапе перед автоматизацией

  • Анализ частоты упоминаний тем исследования с помощью расширенного поиска для понимания степени изученности проблемы;

  • Ручной сбор данных из различных источников;

  • Сравнительный анализ упоминаний контрагентов и их учредителей в СМИ на основе открытых данных.

Результат — настройка персонального анализа данных позволила оценить репутацию действующих контрагентов — производителей нефтехимической продукции — и представить результаты анализа в наглядной форме.

Динамика публикационной активности о крупных производителях химической продукции за 2021–2024 гг.
Динамика публикационной активности о крупных производителях химической продукции за 2021–2024 гг.

Определение зависимостей и закономерностей

Далее поставил собой задачу обосновать связь между репутационными рисками сотрудничества и благонадёжностью контрагентов. Предположения о зависимостях между этими переменными были сделаны на основе доступных данных.

Методы определения закономерности и зависимости:

Аспект

Метод

Характеристика

Частота упоминаний в СМИ и арбитражных делах

Корреляционный анализ

Высокая частота новостей с негативной тональностью о контрагенте прямо коррелирует с низкими стандартами качества продукции.

Связи с организациями

Сетевой анализ

Аффилированность контрагента с прямым конкурентом или банкротство аффилированного юридического лица с значительной задолженностью повышают репутационные риски

Финансовая стабильность

Регрессионный анализ

Высокая частота арбитражных дел указывает на несоответствие действий контрагента договорным обязательствам и снижение ликвидности в среднесрочной перспективе

Юридические риски

Дисперсионный анализ

Несоответствие ОКВЭД деятельности, высокая исковая нагрузка относительно оборотов и неуплата НДС влияют на вероятность юридических проблем

Анализ рисков контрагента

Для исследовательского проекта и рабочих задач я оценивал риски сотрудничества с контрагентами — поставщиками нефтехимической продукции — и формировал рекомендации для снижения рисков работы с ними. Анализ был проведён с применением открытых данных.

Что было сделано:

  • Анализ финансовой отчётности и судебных дел контрагентов с использованием данных из ФНС, Росстата и Право.ру;

  • Выявление и оценка типовых рисков сотрудничества с контрагентами; ориентировочная оценка их уровня критичности с использованием индексов, доступных в открытых источниках;

  • Формирование рекомендаций для коммерческого и юридического отделов, а также отдела закупок.

Основной сложностью был сбор и анализ данных о контрагентах из различных источников. Чтобы упростить этот процесс и избежать сложных процедур ETL, я использовал открытые API, предоставляемые такими сервисами, как ЗачестныйБизнесСБИС, Спарк.Скан, Контур и Spectrumdata. Эти сервисы хранят актуальные и структурированные данные о юридических лицах и индивидуальных предпринимателях, в том числе информацию из ЕГРЮЛ, ЕГРИП, финансовую отчетность, сведения о судебных разбирательствах и другие важные показатели для бизнес-аналитики.

Интеграция с этими API значительно ускорила процесс сбора данных и повысила их точность, и можно было сосредоточиться на анализе информации и принятии обоснованных решений без необходимости тратить время на трудоёмкую процедуру преобразования данных.

По результатам проектного исследования я составил перечень риск-факторов и соответствующих им показателей. Основными категориями оценки благонадёжности поставщиков стали платежеспособность, судебная активность, финансовая устойчивость и новостной фон. Все эти данные доступны в открытых источниках, которые наполнили хранилище данных как файловой системы и BI-приложения как экспресс-инструмента для оценки критичности тех или иных риск-факторов, а также для формирования рекомендаций в формате обоснованных управленческих решений.

При определении влияющих на благонадёжность факторов мне было важно автоматизировать ручной ввод данных и упростить сбор данных о контрагентах для коллег, не имеющих времени для изучения и доступа к системе. Наиболее удобным способом автоматизации сбора данных и представления их коллегам оказалась выгрузка их из открытых источников в Excel. Затем, в контуре реального бизнеса, появилась возможность сохранять данные о контрагентах в едином хранилище данных и визуализировать в BI-приложении.

Рекомендации по работе с контрагентами по результатам проектного исследования

По результатам проектного исследования сделаны выводы о том, что использование открытых данных обладает высоким потенциалом в части повышения эффективности управления рисками компании. К примеру, при мониторинге одного из контрагентов выявлены риски:

  • Финансовые — низкие показатели автономии, рентабельности и ликвидности, отсутствие государственной поддержки контрагента с учетом прекращения публикации бухгалтерской отчетности после 2020 года.

  • Репутационные — контрагент был ответчиком в арбитражных делах на сумму более 2,6 млн рублей в 2023–2024 гг., аффилирован с прямым конкурентом в отрасли.

Рекомендации отделу продаж:

Рекомендации отделу закупок:

Отгружать продукцию по предоплате.

Оплачивать продукцию после проверки качества на складе.

  • Юридические — несоответствие ОКВЭД деятельности в контексте статуса правоотношений, непрозрачность обязательств контрагента в случае порчи или утраты продукции, а также неуплата НДС согласно выписке за текущий год. 

  • Репутационные — значительная судебная активность контрагента на рубеже 2023–2024 гг., при этом контрагент проиграл или частично проиграл как ответчик в 12 экономических спорах с коммерческими организациями на сумму 47 млн ₽. за отчетный период.

Рекомендации юридическому отделу:

Рекомендации отделу закупок:

1. Известить поставщика о необходимости добавить ОКВЭД на осуществление химической деятельности для долгосрочного сотрудничества

2. Проверить условия ответственности контрагента за порчу, утрату, кражу продукции (п. 4.5 в типовой форме Договора). Также необходимо предварительно установить четкий перечень документов для представления, оговорить сроки в случае утраты, недостачи или повреждения ТМЦ по вине контрагента, в том числе порядок действий в спорных случаях.

1. Начать сотрудничество с закупки  продукции небольшого объема и на короткий срок;

2.  Все сделки только на условиях полной отсрочки платежей за готовую продукцию после отгрузки на склад грузополучателя.

Данные таблицы ниже представляют индексы для поставщиков нефтехимической продукции, в том числе поставщиков из приведенных выше примеров.

Контрагент, #

ИРР

∆ ИРР за посл. мес

Упоминаний

% рисковых упоминаний

ИДО

ИПД

ИФР

1

0

0

6

0%

58

2

18

0

12

0%

100

3

12

-2

32

3%

78

4

18

0

73

0%

81

Диапазоны допустимых значений индексов не подлежат разглашению. В учебных проектах и минимально жизнеспособных продуктах (MVP) можно основываться на общем правиле Парето (20/80), к примеру, при достижении индекса репутационного риска значения более 20 следует принять меры по их минимизации — так называется митигация (контроль) рисков в риск-менеджменте. При этом чем выше риск, тем более сдерживающим ожидается набор контролей. Важно учитывать, что различные виды контролей взаимодополняют друг друга, при этом не являясь взаимозаменяемыми. Например, контроль условий рамочного договора юридическим отделом может повлиять только на ответственность контрагента, в то время как контроль платежей отделом закупок — на время и сумму транзакций: перед поставкой или после, без аванса или авансом, и т.д.

Что было сделано:

  • Анализ финансовой отчетности и судебных дел контрагентов;

  • Формирование рекомендаций для коммерческого отдела и отдела закупок;

  • Глубокое исследование судебной активности.

Актуальный анализ рынка ИТ-решений в области BI

Для определения оптимальных способов автоматизации проведён экспресс-анализ рынка BI-решений. В ходе исследования собраны данные о популярности и репутационных рисках IT-компаний, а также отслеживал изменения индексов репутационного риска за последние два месяца.

Анализ статистики позволил выделить 2–3 наиболее надёжных поставщика. Однако в целом популярность отечественных интеграторов и поставщиков оставляет желать лучшего, а данные демонстрируют нисходящую динамику запросов на BI-решения от отечественных поставщиков. Всё это говорит о необходимости поиска альтернативных решений на отечественном рынке.

№ поставщика BI-решений

ИРР

∆ ИРР за посл. 2 мес

Упоминаний

% риск-упоминаний

ИДО

ИПД

ИФР

1

20

↑1

213

2%

2

16

↓2

116

0%

3

18

95

1%

4

24

↑1

92

0%

5

20

↑1

35

0%

6

18

29

0%

7

19

28

0%

8

18

27

7%

9

19

↓2

25

0%

10

21

↓1

24

4%

11

14

↓4

23

0%

12

20

20

0%

13

21

8

0%

14

0

2

100%

100

15

18

↑18

2

0%

88

16

20

1

0%

Динамика упоминаний поставщиков (вендоров/интеграторов) BI-систем и решений в течение 2020-2024 гг.
Динамика упоминаний поставщиков (вендоров/интеграторов) BI-систем и решений в течение 2020-2024 гг.

В связи с этим было предложено разработать внутреннее решение (инхаус-разработку) в рамках компании с использованием внешних информационных сервисов. Основная цель такого подхода — снизить нагрузку на специалистов по закупкам, упростить сбор данных и сократить время на документооборот. Таким образом, работа над исследовательским проектом в университете подтолкнула меня к реализации новых возможностей анализа данных в компании. Для расширения объема реального проекта были организованы встречи с заинтересованными коллегами, сформированы бизнес-требования, предложены потенциальные источники, модель данных и архитектура решения. 

По результатам предварительного рассмотрения руководство компании приняло решение о реализации проекта по автоматизации финансового анализа и визуализации данных с помощью BI-приложения на локальном сервере в контуре бизнеса. В качестве рабочего IT-решения было выбрано хранение данных в файловой системе с последующей синхронизацией в BI-приложении. В целом, это гибкая и масштабируемая система без зависимости от конкретных интеграторов и вендоров.

Комментарии (2)


  1. parus-lead
    20.01.2025 20:10

    Очень интересная статья!
    Скажите, а в дальнейшем Вы планируете развивать Ваше решение?


    1. ShilovskyAnton Автор
      20.01.2025 20:10

      Спасибо за интерес к статье! :)

      Да, планирую продолжать развитие этой инициативы и детально описывать этапы этого ИТ-решения в блоге, конечно, при соблюдении условий соглашения о неразглашении (NDA) конфиденциальной информации. В целом, концептуально проект легко масштабируется, напишу о прогрессе этого процесса по факту реализации.