Финансовая группа БКС внедрила каталог данных Arenadata Catalog

Финансовая группа БКС совместно с группой компаний IBS успешно реализовала проект по внедрению каталога данных Arenadata Catalog. Этот шаг помог БКС выйти на новый уровень цифровой зрелости и более чем в пять раз сократить время поиска и поставки данных.

О финансовой группе БКС

Группа БКС — один из крупнейших частных финансовых институтов страны с 28-летней историей. Компания предлагает полный комплекс услуг частным, корпоративным и институциональным клиентам. В состав группы входит брокер, страховая и управляющая компании, форекс-дилер, розничный и корпоративно-инвестиционный банк.

БКС стабильно входит в число лидеров по объему торгов на российском рынке акций, валютном и срочном рынках, а также является одним из ключевых организаторов IPO и других типов сделок на рынках акционерного капитала. Почти 6000 сотрудников группы обслуживают более 1 млн клиентов. Офисы компании расположены по всей России (более 40 городов присутствия). Надежность подтверждена ведущими рейтинговыми агентствами: высший рейтинг надежности на уровне ААА от Национального рейтингового агентства, рейтинг кредитоспособности на уровне ruА- от RAEX («Эксперт РА»).

Предпосылки внедрения каталога данных

На фоне значительного роста клиентской базы у ФГ БКС в начале 2023 года возникла потребность в доступности данных для различных бизнес-процессов. Для компании особенно важным стала систематизация накопленных данных и эффективное их использование для увеличения прибыли.

Мы понимали, что перед нами стоит амбициозная задача — трансформация работы с данными. При этом рынок уже накопил определенную экспертизу и практики, лучшие из которых можно применять. Артур Аверьянихин, CDO финансовой группы БКС.

Разрабатывая стратегию трансформации работы с данными, команда офиса CDO БКС прежде всего руководствовалась метриками внутреннего клиента: временем поиска и поставки данных; простой ролевой моделью и процессами получения доступа; согласованностью данных между собой.

Достигать этих целей специалисты БКС предполагали как заменой технологического стека существующих решений, так и через создание принципиально новых, например, каталога данных и бизнес-глоссария. В основу разработанной стратегии легло предварительное исследование, с помощью которого обнаружились внутренние полезные практики. Таким образом, стоит скорее говорить не о трансформации как таковой, а об эволюции работы с данными.

Основная задача аналитики данных — быстро понять, что нужно бизнесу и предоставить ему информацию, необходимую для принятия решений. Это во многом связано не только с поиском и правильной интерпретацией данных, но и с их обработкой, а также демонстрацией результатов. Как видим, эти задачи хоть и связаны, но требуют различных навыков, поэтому на практике они выполняются командой специалистов. И ошибочно думать, что для их решения достаточно просто собрать вместе профессионалов. Им также необходимо предоставить инструменты, помочь с коммуникацией. Поэтому к реализации этого проекта мы подошли со зрелым запросом на Data Governance — организация и управление данными. Артур Аверьянихин, CDO финансовой группы БКС.

Выбор каталога данных

Компания БКС изучила представленные на рынке продукты и, в результате конкурсного отбора, остановилась на бизнес-глоссарии Arenadata Catalog. Решающую роль сыграла его зрелость, количество крупных заказчиков и внятная карта развития на ближайшие годы. При этом к дата-каталогу предъявлялся ряд требований. Он должен был физически отражать модель данных, которая применяется в информационных системах БКС. Необходимо было реализовать возможность поиска активов данных (в том числе с фильтрацией по параметрам), их просмотра, редактирования описания, визуализацию Data lineage, а также назначение ответственных за активы данных.

Проект внедрения Arenadata Catalog наглядно демонстрирует, насколько необходим бизнес-глоссарий компаниям по мере роста объема и сложности накопленных данных. Внедрение Arenadata Catalog помогает решить множество сложностей на этом пути и становится первым этапом в построении эффективных процессов Data Governance и оптимизации работы с хранилищами данных, Иван Новоселов, генеральный директор «ДатаКаталог».

Внедрение Arenadata Catalog

Работа над проектом стартовала в июле 2023 года. Решение задачи внедрить Arenadata Catalog в БКС было предоставлено команде IBS, уже знакомой с ИТ-ландшафтом заказчика. IBS разработала для БКС стратегию управления данными, в которой были детально описаны ключевые шаги для перехода компании на новый уровень цифровой зрелости. Одним из основных технологических пунктов этой стратегии был проект внедрения и наполнения каталога данных.

Для IBS этот проект стал одним из ключевых по внедрению систем такого класса. В качестве программного решения для каталога данных был выбран продукт российского вендора Arenadata — Arenadata Catalog. Команда IBS развернула дата-каталог и интегрировала его с информационными системами компании БКС. Помимо выстраивания технологической архитектуры, мы разработали методологию и всю необходимую документацию для работы с каталогом. Сотрудники БКС уже начинают им пользоваться. В компании определены ответственные, которые будут следить за актуальностью данных. Ожидается, что реализация этого проекта позволит БКС снизить затраты времени на создание отчетов и аналитики, а также повысит прозрачность данных, используемых компанией. Михаил Рощин, зместитель директора отделения управления проектами и архитектуры IBS.

Как работает Arenadata Catalog в БКС

В ФГ БКС бизнес-глоссарий Arenadata Catalog находится в высокой степени интеграции с аналитическим хранилищем, которое само по себе построено на гетерогенной основе. Он дает синергию при взаимодействии команд, работающих с данными, за счет того, что модель данных, их описание, разметка, владение и т. д. состоят в одном инструменте. При этом инструмент позволяет компании выполнить крайне важную цель: правильно выстроить приоритизацию подключения систем и описание показателей, чтобы избежать хранения избыточной и невостребованной информации.

• Бизнес-глоссарий позволяет объединить, централизовать, унифицировать понимание всех терминов, чтобы между подразделениями не было расхождений в понимании одного и того же.
• Data Lineage помогает проследить, откуда происходят данные, как они трансформируются, агрегируются и где их можно отслеживать.
• Описание данных и терминов дает возможность понимать, какими данными обладает компания.
• Определение и фиксация owners-активов данных — это единая точка входа для понимания и сбора данных, которые есть у компании.

Достигнутые результаты

На текущий момент проект по внедрению Arenadata Catalog переведен в опытно-промышленную эксплуатацию. Он стал частью новой программы ИТ-эволюции БКС, рассчитанной на ближайшие три года и призванной воплотить в жизнь более 170 запросов от бизнес-подразделений компании для улучшения процессов каждого из них.

Несмотря на то, что опытно-промышленная эксплуатация каталога данных и бизнес-глоссария только начата, офис CDO уже получает от бизнес-подразделений комплементарные отзывы в адрес продукта, а время поиска и поставки данных удалось сократить более чем в пять раз.

Внедрение Arenadata Catalog, на мой взгляд, — это лучший проект за 2023 год в офисе CDO БКС. Сейчас мы находимся в процессе заполнения дата-каталога, но уже описаны роли людей, которые с ним работают. Это позволит нам ускорить аудит хранилища прежде всего с точки зрения работы с критическими данными. Раньше это производилось вручную, а, как известно, фактор человеческой ошибки стоит дорого. Артур Аверьянихин, CDO финансовой группы БКС.

В ближайшее время команда БКС собирается подключить к Arenadata Catalog дополнительные источники данных, включая ClickHouse, Kafka и Airflow.

Проект по внедрению бизнес-глоссария Arenadata Catalog — это один из этапов большого проекта БКС по повышению эффективности управления данными, в рамках которого в настоящее время проходят пилотную апробацию еще ряд продуктов Arenadata.