Заказчики: СКБ Контур Екатеринбург; Информационные технологии Подрядчики: Ижинформпроект Продукт: DeductorДата проекта: 2010/12
|
Технология: Data Mining
Технология: Data Quality - Качество данных
|
Содержание |
Профиль клиента
Производственная фирма "СКБ Контур" является крупнейшим в России специализированным оператором связи в области защищенного документооборота. Предприятие обеспечивает сдачу налоговой, пенсионной, статистической и прочей отчетности в контролирующие органы через интернет во всех регионах страны.
Управление Регионального Развития (УРР) предприятия состоит из высококвалифицированных специалистов, аналитиков и топ-менеджеров. На управление возложены задачи адресной работы с регионами, контроль сервисных центров, разработка моделей поведения фирмы в каждом регионе.
Цель проекта
Перед УРР регулярно возникают задачи, требующие сводных показателей из нескольких баз данных. Большинство таких данных отделу предоставляет служба технической поддержки в виде таблиц и диаграмм Excel. Запросы у отдела каждый раз уникальные, единого стандарта нет, есть только перечень показателей, которые часто используются в отчетах.
Отдельной проблемой, усугубляющей ситуацию, является большой объем накопленной информации, которая хранится в десятках баз данных на разных физических серверах, её выборка и обработка все сложнее дается отделу технической поддержки, а проверка результата становится объективно сложным мероприятием для УРР.
Таким образом, можно выделить две задачи, которые были поставлены в процессе выполнения проекта:
Систематизация и консолидация данных. Все контролируемые показатели, которые регулярно задействуются при построении отчетов и прогнозов, должны быть собраны в одном месте и быть оперативно доступны.ИТ-директор «Роснефти» Дмитрий Ломилин выступит на TAdviser SummIT 28 ноября
Задача автоматизации процессов обработки и анализа данных. Построенная система должна усовершенствовать применяемые методы обработки и анализа, давать возможность сотрудникам отдела манипулировать с данными во множестве разрезов на понятном им языке. Решение
На базе программного комплекса Deductor компанией ООО НПП «Ижинформпроект» была разработана система, позволившая решить задачи, поставленные выше.
ООО Научно-производственное предприятие «Ижинформпроект» работает на рынке информационных технологий с 1992 года и предлагает широкий комплекс методов, продуктов и услуг, необходимых для автоматизации управления на предприятиях. Бизнес-партнёр BaseGroup. В виду того, что объем обрабатываемой информации составляет более 35 миллионов записей, а количество новых данных ежегодно увеличивается в 1,5-2 раза, загрузка данных реализована в несколько шагов, с многоуровневой очисткой и предобработкой.
Аналитическая система распределена на несколько физических серверов. Первый сервер занимается сбором информации с множества баз данных, первичной очисткой данных и расчетом массивов обновления. Новые массивы данных включаются в обработку на втором сервере, после чего актуальные хранилища данных копируются на третий сервер, на котором работают пользователи.
Результат
Внедренная система позволяет аналитикам отдела УРР получать информацию из различных источников данных, приведенную к единому формату. В системе заготовлено более 80 форм отчетов, каждый из которых был согласован с пользователями системы. Время на построение некоторых отчетов сократилось с нескольких дней (при традиционном способе построения) до нескольких минут, в худшем случае – до одного-двух часов.
Параллельная работа системы на трех серверах, продуманный расчет массивов обновлений и понятные структуры хранилищ данных позволили достигнуть трехдневной актуальности данных, при этом учитываются все необходимые показатели по регистрации клиентов, сдаче отчетности в контролирующие органы, работе удостоверяющего центра, ведении бухгалтерии и вознаграждении агентов.