Разработчики: | СИГМА (Санкт-Петербург) |
Дата последнего релиза: | 2021/02/09 |
Технологии: | MDM - Master Data Management - Управление основными мастер-данными |
Содержание |
Основная статья: Управление данными (Data management)
СИГМА.МДМ – система управления основными данными предприятия. Решение позволяет предприятиям разных отраслей повысить качество информации, с которой они работают. СИГМА.МДМ дает возможность консолидировать данные и вести коммерческую деятельность на основе точной, проверенной и оперативно доступной информации, повышая эффективность всей организации.
Ключевые возможности и особенности внедрения «СИГМА.МДМ»
Чем больше данных накапливается в информационных системах, тем сложнее определить, насколько они качественные. Это важно, так как даже небольшая неточность в описании детали или информации о потребителе может привести к серьезным потерям – финансовым и репутационным. Снизить эти риски помогают МДМ-решения, рынок которых в последние годы начал расти и в РФ.
Качество данных – не абстракция
Основная проблема получения качественной и верифицированной информации в крупных компаниях, использующих большое количество автоматизированных систем, специализированных под работу с данными в различных бизнес-процессах, – отсутствие единого сквозного идентификационного ключа.
При этом различные системы и приложения работают на разных программных платформах и используют разные локальные справочники, не связанные между собой. Все это приводит к появлению ошибок в наименованиях, описаниях и параметрах записей и, как следствие, получению данных низкого качества, недостаточного для принятия оперативных и оптимальных управленческих решений, а также к существенному затруднению единого учета и консолидации данных, что в конечном итоге сказывается на деятельности всей организации.TAdviser выпустил Гид по российским операционным системам
Значительно утяжеляет процесс получения качественных данных архитектура, построенная по принципу «паутины»: для выполнения локальных оперативных задач в ней присутствует огромное количество связей типа «точка-точка» между системами. Подобные взаимодействия влекут за собой нарастающий снежный ком ошибок в данных, и определить их источник не всегда удается. Помочь в решении этих проблем призваны MDM-системы (master data management), которые представляют собой совокупность процессов и инструментов непрерывного управления основными данными предприятия. Многие зарубежные вендоры создают такие решения уже десятки лет, но российский рынок MDM-систем сравнительно молод. С появлением санкционных рисков при работе с зарубежными продуктами многие государственные компании пришли к решению об импортозамещении MDM-систем, что и дало важный импульс развитию этого рынка.
Один из ключевых проектов СИГМЫ – внедрение разработанного МДМ-решения в одном из крупнейших энергетических холдингов, работающих в РФ, странах Европы и СНГ. Деятельность заказчика охватывает производство электрической и тепловой энергии, энергосбыт, международный энерготрейдинг, инжиниринг, экспорт энергооборудования, управление распределительными электросетями.
Переход на российское решение
Более 5 лет заказчик использовал для управления основными данными решение зарубежного вендора. За время эксплуатации оно неоднократно дорабатывалась, чтобы соответствовать специфике бизнес-процессов. Однако в 2019 году из-за существенных лицензионных ограничений и рисков санкций заказчик принял решение переходе на российское решение. Для внедрения была выбрана СИГМА.МДМ с учетом высокого уровня доверия к разработчику – компании «СИГМА», уже реализовавшей для заказчика ряд ИТ-проектов, и глубокой отраслевой экспертизы.
Перед нашей командой стояла очень серьезная задача – за полтора года пройти сложный путь импортозамещения одного из самых развитых продуктовых решений в мире и создать полноценную российскую ИТ-систему для энергетического сектора. Для подобных масштабных проектов это категорически мало. Но мы справились благодаря слаженной работе, оперативности разработчиков и качественному взаимодействию с заказчиком. Хотелось бы отметить профессионализм команды: очень высокий уровень как личной, так и коллективной ответственности. Подтверждением этому стал не только успешный проект, но и включение в Реестр российского ПО: «СИГМА.МДМ» входит в него с 30 декабря 2020 года, – отметил руководитель проекта Андрей Хлестов. |
«СИГМА.МДМ»: внимание к деталям
Решение СИГМА.МДМ – это платформа для управления основными данными производственного масштаба. Основные функции системы – очистка, обогащение и контроль качества данных на полноту, целостность и непротиворечивость, поиск и объединение дубликатов, а также отправка данных в сторонние информационные системы.
Программа была зарегистрирована в Федеральной службе по интеллектуальной собственности в октябре 2019 года, и с этого момента начался путь ее доработки до корпоративного решения, которое позволит обеспечить эффективность управления энергоактивами и сохранить позиции в российской электроэнергетике.
Технологический стек «СИГМА.МДМ» составляют решения на базе свободного ПО:
1. Java – cреда исполнения серверного приложения, представляющая собой открытый пакет реализации Java OpenJDK (java development kit).
2. База данных PostgreSQL, которая используется для хранения бизнес-данных и метаданных конфигурации самой платформы.
3. Поисковая система Elastic Search – используется как основа для построения поискового индекса платформы. Обеспечивает горизонтально масштабируемый поиск и поддержку многопоточности.
4. Распределенный кэш сервера приложений Hazelcast (работает как вычислительная платформа, которая управляет данными в операционной памяти и организует обработку в параллельном исполнении для достижения наибольшей скорости и легкости масштабирования).
Ядро системы – подсистема управления мастер-данными, отвечающая за хранение всех данных о «золотых записях», истории изменений.
Ядро управляет остальными модулями:
- Модуль качества данных.
- Модуль выполнения бизнес-процессов.
- Модуль управления НСИ.
- Модуль исполнения автоматических бизнес правил.
- Система управления метамоделями.
Основные возможности системы:
- Управление данными справочников и реестров,
- связь с транзакционными системами.
- Автоматизация сбора данных для построения и корректировки отчетности.
- Централизованный сбор данных и приведение к единому виду.
- Обогащение данными из открытых и регулируемых источников с использованием готовых адаптеров.
- Гибкая настройка и изменение бизнес-процессов управления данными без доработки.
- Открытые API (application programming interface), обеспечивающие возможность обмена данными с другими системами предприятия.
СИГМА.МДМ поддерживает замкнутый цикл управления данными после их получения из различных внешних источников. На этапе сбора данных производится их очистка, профилирование и обогащение. Далее в рамках формирования мастер-данных выстраиваются связи и иерархии между данными и их классификация. Рассылка данных во внешние источники может происходить в режиме реального времени, по расписанию или по точечной подписке по настраиваемым параметрам.
Внедрение: надежная классика
Внедрение «СИГМА.МДМ» состояло из нескольких этапов. В рамках формирования целевой организационной структуры ведения НСИ было проведено обследование существующих бизнес-процессов и систем, работающих с НСИ – в том числе внешних, использующих эталонные данные.
По итогам обследования было сформировано техническое задание на систему, разработано проектное решение на систему, подготовлена модель данных, реализована доработка модулей системы и настройка компонентов.
Далее была проведена миграция данных из существующей системы во внедряемую. Стоит отметить, что помимо основных данных были перенесены и заявки – как исторические, так и активные. Далее мы обучили пользователей работе в системе и проведи ряд испытаний, начиная с предварительных и заканчивая опытно-промышленной эксплуатацией. Во время последнего этапа «историческая» система была полностью отключена: пользователи полноценно работали уже в новой.
В итоге в конце 2020 года система была принята заказчиком в промышленную эксплуатацию. Таким образом, достигнуты основные цели проекта:
- отказ от зарубежного решения в пользу импортозамещеннного,
- исключение санкционных рисков,
- отказ от лимитированного количества лицензированных пользователей: в СИГМА.МДМ лицензируются предметные области (домены основных данных), а не пользователи.
С точки зрения бизнеса МДМ-система обеспечивает постоянную оперативную актуальность информации за счет применения последних методов хранения, ведения и сопровождения. С ней интегрировано 16 локальных информационных систем, которые в режиме реального времени получают все публикуемые изменения. На март 2021 года это реализовано по двум предметным областям – контрагенты и МТРиУ (материалы, товары, работы и услуги). Данные по контрагентам и МТРиУ используются в бизнес-процессах закупочной деятельности, управленческом и бухгалтерском учете, а также в процессах технического обслуживания и ремонта.
Поскольку СИГМА.МДМ – это универсальное и легко масштабируемое решение, в перспективе планируется расширение состава справочников и обеспечение нормализованными данными ключевых бизнес-процессов заказчика: инвестиционная деятельность, бюджетирование, управленческая структура, ведение производственных активов, а также энергосбыт.
Подрядчики-лидеры по количеству проектов
Datareon (Датареон) (272)
Axelot (Акселот) (155)
Цифра (31)
HFLabs (ХФ Лабс), ранее HumanFactorLabs (25)
АйТи Про (IT Pro) (21)
Другие (278)
Datareon (Датареон) (37)
Axelot (Акселот) (25)
Commvault (5)
АйТи Про (IT Pro) (4)
AnalyticsHub (АналитиксХаб) (2)
Другие (35)
Datareon (Датареон) (41)
Axelot (Акселот) (32)
Цифра (7)
HFLabs (ХФ Лабс), ранее HumanFactorLabs (5)
Софрос (Sofros) (4)
Другие (21)
Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров
Datareon (Датареон) (2, 418)
Цифра (2, 36)
Axelot (Акселот) (1, 30)
HFLabs (ХФ Лабс), ранее HumanFactorLabs (5, 26)
Informatica (14, 21)
Другие (303, 228)
Datareon (Датареон) (1, 60)
Commvault (2, 5)
АйТи Про (IT Pro) (1, 4)
ЮниДата (UniData) (1, 3)
Цифра (1, 2)
Другие (25, 25)
Datareon (Датареон) (1, 71)
Цифра (1, 7)
HFLabs (ХФ Лабс), ранее HumanFactorLabs (3, 5)
Axelot (Акселот) (1, 5)
Платформа больших данных (Platforma) (1, 2)
Другие (15, 16)
Datareon (Датареон) (1, 57)
Axelot (Акселот) (1, 6)
Цифра (1, 4)
Naumen (Наумен консалтинг) (1, 3)
Тандер Сеть магазинов Магнит (2, 2)
Другие (15, 16)
Datareon (Датареон) (1, 30)
Data Sapience (Дата Сапиенс) (2, 3)
HFLabs (ХФ Лабс), ранее HumanFactorLabs (1, 2)
Axelot (Акселот) (1, 2)
Nexign (Нэксайн) ранее Петер-Сервис (1, 1)
Другие (15, 15)
Распределение систем по количеству проектов, не включая партнерские решения
Datareon Platform - 418
Цифра: Диспетчер Система мониторинга промышленного оборудования и персонала - 36
1С:MDM Управление нормативно-справочной информацией (1С:MDM Управление НСИ) - 30
HFLabs Единый клиент - 23
АйТи Про: BI.Qube - 18
Другие 218
Datareon Platform - 60
АйТи Про: BI.Qube - 4
Commvault Complete Data Protection - 4
ЮниДата Платформа управления данными - 3
Alation Data Catalog - 2
Другие 27
Datareon Platform - 71
Цифра: Диспетчер Система мониторинга промышленного оборудования и персонала - 7
1С:MDM Управление нормативно-справочной информацией (1С:MDM Управление НСИ) - 5
Полином:MDM - 2
Platforma и HFLabs: Технология безопасного метчинга данных - 2
Другие 17