BI-системы: основные задачи, состав, виды и сравнение популярных решений

BI-системы – это инструменты аналитики, помогающие компаниям принимать управленческие решения на основе данных. BI-системы позволяют преобразовывать данные из различных источников в визуальные панели, выдавая понятную аналитику для решения различных задач: управления компанией, финансовом планировании, выстраивании стратегии продаж, прогнозировании, управлении цепочками поставок и логистикой, работе кадровой сферы.

Чтобы обеспечить получение данных, BI-система интегрируется со всем ИТ-контуром компании: ERP, CRM, WMS, HRM и другими системами. Сложности возникают на этапе сбора данных и консолидации информации, так как учет в компаниях может противоречить друг другу в различных системах.

• структурирует информацию, представляя ее наглядно;
• сводит консолидированные данные, позволяя объединять внешние и внутренние источники;
• служит отдельным хранилищем данных;
• отображает в режиме реального времени текущую ситуацию в компании;
• прогнозирует возможные сценарии развития событий на основе исторических данных;
• создает среду обучения для сотрудников и вовлекает их в принятие решений на основе аналитики;
• позволяет управлять планированием и оценивать динамику выполнения;
• выявляет различные зависимости и тренды;
• работает инструментом фокусной аналитики.

Основной целью является автоматизация отчетности, накопление историческихданных и их объединение для последующего управления на основе
визуализированной информации.
Архитектура BI-систем состоит из следующих блоков:

• Инструменты интеграции и очистки данных: ETL- и ELT-системыБазы данных для консолидирования и анализа информации: корпоративное хранилище данных DWH
• Интеллектуальный анализ данных для выявления трендов и зависимостей: средства Data Mining
• Инструменты оперативного анализа данных: OLAP-кубы
• Средства визуализации данных: инструменты подготовки пользовательских отчетов

Прежде всего системы классифицируются по типу использования хранилища данных: с собственным хранилищем и без. Конкретный выбор решения зависит от задач и финансовых возможностей.

Основные различия BI-платформ:

• Использование инструментов Self-Service BI, которые позволяютпользователям быстро получать доступ к данным и самостоятельно создавать отчеты.
• Возможности подключения к внешним источникам данных и готовые коннекторы: БД, корпоративные системы, файлы и другие.
• Наличие механизмов Big Data (способность быстро извлекать разрозненные сведения из классификаторов, баз данных больших объёмов).
• Облачное хранилище для быстрого, надёжного доступа при построении прогнозов или использование локального (включая серверное) место хранения, часто по требованиям политики безопасности компании.
• Наличие расширяемых модулей при необходимости, плагинов, дополнительных схем гибкой настройки.
• Лицензионная политика вендора: пользовательские и корпоративные лицензии, поддержка, обновления.

Согласно исследованию Gartner «Magic Quadrant for Analytics and Business IntelligencePlatforms», квадрант лидеров международного рынка BI-систем выглядит так:

• Microsoft Power BI
• Tableau
• Qlik
• ThoughtSpot

Gartner – это международная исследовательская компания, которая ежегодно публикует отчеты и исследования, позволяющие оценить возможности продукта и характеристики разработчика в целом. Квадрант Gartner выделяет лидеров рынка, претендентов, дальновидных и нишевых игроков.

Среди основных российских вендоров, по статистике аналитического портала Tadviser, можно выделить следующие системы:

• Loginom
• Форсайт
• Visary

Популярные BI-системы поддерживаются российскими интеграторами. Они сразу предлагают решение под ключ. Это настройка серверной инфраструктуры, аудит, стратегия, поддержка, развитие. Данный чарт журналисты приводят, соблюдая условие добровольного предоставления информации о количестве проектов. Поэтому часть данных, находящихся под жёстким NDA, исключены из него. Некоторые из указанных систем также ориентированы на западный рынок. Количественная, качественная аналитика между системами проводится на основе целей и задач. Аудитории, состоящей из программистов, не будет критичным отсутствие WYSIWYG-инструментов. Указать цифру оплаты только за использование некорректно: стоимость рабочего места должна включать затраты на внедрение, обучение. Конечная цена зависит от курса валют, условий, политики производителя.

Название	Интерфейс	Особенности встраивания	Пробная бесплатная версия	API	Мультиплатформенность
Power BI	Хорошо знакомыйпо иным продуктам Microsoft.	"Родные" механизмы интеграции Azure Cloud Service, SQL Server, табличных процессоров.	Доступна	+	Не поддерживаетMacOS без эмуляции.
QlikSense	На начальном уровне рекомендуется знакомство SQL.	Через ODBC DB OLE к любым поддерживающим механизм БД.	Доступна	+	Только Windows.
OracleBI	Drag&drop без навыков, пространственная аналитика, интеграция с ГИС.	Oracle BI Serverподдерживает консолидацию с любыми источниками данных.	Доступна	+	Да
Tableau	Использует специальный механизм «естественного языка» дополнительного описания запросов, что помогает пользователю.	Можно одновременно забирать данные плоского файла и реляционного источника.	Доступна	+	Только Windows,MacOS.

Комплексное бизнес-решение от Microsoft, которое собирает данные из разрозненных источников для последующего анализа данных и построения необходимой отчетности.

Решения Microsoft позволяют построить информационно-аналитическую систему,заточенную под потребности бизнеса:

• Оперативная загрузка данных в систему анализа,
• Агрегация данных: предварительная обработка, создание связей между массивами данных,
• Визуализация данных для удобства восприятия.

Microsoft Power BI позволяет визуализировать практически любые данные и обновлять дашборды в режиме реального времени:

• Тысячи комбинаций представления данных,
• Мгновенный пересчет показателей в зависимости от выбранных фильтров,
• Добавление интерактивных объектов (карты, 3D визуализация и т.п.),
• Адаптивность для работы с данными с мобильных устройств.

Облачная архитектура Microsoft Azure значительно ускоряет обработку данных и не требует значительных финансовых инвестиций: компаниям не нужно создавать собственные ЦОД, покупать серверы, программное обеспечение или сетевое оборудование для обработки массивов данных.

Из других преимуществ системы бизнес-аналитики от Microsoft можно выделить следующие:

• Возможность бесшовной интеграции с решениями экосистемы Microsoft, в том числе ERP-системой Microsoft Dynamics 365
• Доступные решения глобальных партнеров (Microsoft AppSource), в том числе разработки Columbus для аналитики финансов, закупок, продаж, производства, товарно-материальных активов.
• Автоматизация выполнения рутинных операций при помощи роботов (например, создание задач в Microsoft Planner при получении письма с определенной темой в Outlook).
• Простой переход от дашбордов к детальным данным через анализ в Excel.

Исследователи Gartner в своем отчете выделяют следующие характеристики современной BI-платформы:

1. Простота в использовании системы: от подготовки данных до визуального исследования,
2. Self-service BI и расширенная помощь пользователям,
3. Облачное развертывание,
4. Машинное обучение,
5. Искусственный интеллект.

Также Gartner обозначил новый ориентир развития для BI-платформ – Augmented Business Intelligence (ABI), который предполагает добавление в систему дополненной, виртуальной реальности и искусственного интеллекта.

В отчете «Top 10 Strategic Technology Trends in Data and Analytics-2020» Gartner рассматривает новые векторы развития для BI-систем:

• Развитие ИИ.
• Переход от дашбордов к истории данных.
• Увеличение количество аналитиков в штате компаний, специализирующихся на моделировании принятия решений (Decision Intelligence).
• X-аналитика - анализ разного типа контента, как структурированного, так неструктурированного, из разных источников, таких как видео, изображения, текст и т.д.
• Расширенное управление данными на основе метаданных.
• Переход в облако.
• Расширение аналитических возможностей в другие корпоративные бизнес-приложения.
• Маркетплейсы и биржи данных.
• Блокчейн в аналитике.
• Взаимосвязи как новая ценность в аналитике.

Эксперты российского рынка BI выделяют следующие тренды развития BI-платформ: переход от традиционных BI к системам Self-service BI, рост спроса на low-code платформы, облачное развертывание BI-систем, применение искусственного интеллекта и машинного обучения, рост популярности мобильной аналитики. Перед внедрением BI-системы необходимо определить ряд технических и функциональных характеристик будущей платформы. В список требований также
стоит включить все корпоративные источники данных для того, чтобы будущая система имела готовые коннекторы для подключения к источникам данных. Следует также описать нагрузочные минимумы, максимумы и варианты развертывания системы. Собрать список пользователей, у которых должен быть доступ к системе и на каком уровне, чтобы определить количество лицензий. Заранее необходимо продумать уровни безопасности для данных.

Важно заранее определить конкретные цели и задачи продукта, будет ли система использоваться как генератор отчетов или же для прогнозирования. Финансовая сторона вопроса будет зависеть от выбранной платформы, тщательности проработки технического задания. Актуальность информации также приоритетна, иначе эффект внедрения снижен: нет смысла в анализе просроченных, недостоверных сведений.

• Сколько сотрудников планируется подключить, какие права им нужны, круг обязанностей, сфера деятельности.
• Сроки расширения возможностей, или основополагающий круг целей, которые будут меняться от одного отчётного периода к следующему.
• Как часто меняются сотрудники, их роли, взаимозаменяемость.
• Требования к визуализации, что именно необходимо выделить отдельными потоками обработки при выставлении приоритетов.
• Сколько планируется внедрить внешних, внутренних источников, какие из них будут обновляться или отключаться.
• Сколько этапов внедрения будет, как они будут соотноситься по времени
• Насколько удалены сотрудники друг от друга, корректность масштабируемости системы, когда речь идёт о тысячах пользователей.
• Для роста скорости отображения нескольких отчётов следует заранее спрогнозировать, на чьей стороне будет проходить обработка.
• Производственная мощность прочего используемого ПО. Служебное оборудование, его характеристики, соответствие современным стандартам, требованиям BI.

• Корпоративная инфраструктура, её описание. Готова ли она использовать одну из готовых схем работы или необходима доработка.
• Как часто обновляются аналитические массивы данных, как это происходит, круг ответственных лиц.
• Потребуется ли дополнительная обработка этих массивов.
• Как зоны риска, определённые политикой безопасности, затрагивают внедрение BI-системы, как полно описаны процессы с точки зрения интересов её защиты.
• Какие классификаторы, справочники ведутся, насколько полно они вмещают требуемый перечень.
• Уровень работы поддержки, сообщество с решением проблем.
• Нужен ли BI-консультант, обучение персонала по использованию системы.

• При использовании на российском рынке следует уточнить наличие интеграций с 1С или другими специфичными для РФ системами.
• Нужна ли настройка единого отображения визуальных данных под требования корпоративного стиля отчётности.
• Необходимость дополнения Decision Support System (в противном случае делегирование принятия решений на сторону).

Чтобы заранее сказать, какая именно система подойдёт для выбора, необходимо ответить на все вопросы, связанные с обработкой, хранением, передачей данных, решить, насколько ёмким на стороне клиента стоит сделать дашборд. А также решить, кто конкретно отвечает за её внедрение, как с технической стороны, так и с административной.