Татнефть консолидирует серверы оперативной обработки на платформе Microsoft SQL Server

Фундамент ИТ-структуры компании Татнефть в виде корпоративной информационной системы АРМИТС послужил основой для перехода от распределенной к централизованной архитектуре, консолидируя серверы оперативной обработки данных на платформе Microsoft SQL Server, сообщила компания-интегратор Microsoft Consulting Services 24 декабря 2012 года.

Основа

Корпоративная информационная система АРМИТС (автоматизированные рабочие места инженерно-технологической службы) - ключевое ИТ-решение для компании «Татнефть», ей более 20 лет.

Система охватывает все основные бизнес-процессы компании, связанные с добычей нефти: с ней работают практически все структурные подразделения и службы «Татнефти». Ее пользователями (3,5 тыс. человек) являются специалисты самых разных уровней и профилей — от работников цехов добычи до топ-менеджмента компании.

Основная задача КИС - учет и анализ потоков жидкости из скважин при нефтедобыче. Система собирает большие массивы данных от АСУТП и систем телемеханики непосредственно в цехах добычи нефти и позволяет на основе их анализа определять ключевые плановые показатели работы компании. Чекап для искусственного интеллекта: зачем и как тестировать ИИ-решения?

Со временем распределенная архитектура КИС АРМИТС начала тормозить развитие системы, затрудняя расширение функционала в новые подразделения и исполнительный аппарат компании, ограничивая поддержку растущего числа пользователей, сдерживая решение сложных аналитических задач на основе данных, собираемых в разрозненных СУБД. Технические проблемы следовали: для нормальной работы системы структура баз данных на всех серверах должна быть идентичной, но за время эксплуатации в схемах баз данных появились расхождения из-за того, что некоторые модификации таблиц и индексов проводились вручную.

Возникла настоятельная потребность перехода от распределенной к централизованной платформе в масштабах всей компании.

Решение

Процесс перевода корпоративной системы «Татнефть» на новую централизованную платформу проходил в два этапа: на первом была выполнена консолидация оперативных баз данных нефтегазодобывающего управления (НГДУ), а на втором построено единое хранилище исторических данных компании.

Логическая схема взаимодействия оперативной части и хранилища FastTrack DWH «АРМИТС»

Проект по консолидации серверов баз данных реализован с конца 2010 года по февраль 2011 года силами консультантов Microsoft Consulting Services (MCS) при активном участии ИТ-специалистов «Татнефти». В рамках проекта в центре обработки данных компании развернута отказоустойчивая конфигурация из четырех серверов HP ProLiant, на базе которой работает СУБД SQL Server 2008 R2 Data Center.

В ходе проекта по консолидации баз данных специалисты предложили техническое решение по реализации хранилища данных на базе архитектуры Microsoft FastTrack Data Warehouse. Помимо хранилища в «Татнефти» разворачиваются аналитические сервисы на основе инструментов Microsoft SQL Server 2012 Reporting Services, Microsoft SQL Server 2012 Analysis Services, Microsoft Office SharePoint Server 2010 (MOSS) и MOSS PowerView.

Проект по созданию хранилища данных начат весной 2012 года, в июле систему передали специалистам «Татнефти» в опытную эксплуатацию. В компании рассчитывают, что работы по наполнению хранилища и формированию аналитических приложений будут завершены к концу 2012 года, после чего система может быть переведена в производственную эксплуатацию.

«Моим принципиальным выбором стали именно технологии Microsoft в качестве основы нашей корпоративной системы. Многие тогда говорили, что надо переходить на Unix-серверы, однако уровень задач, которые мы решали, не предполагал наличия большой команды технических специалистов по сопровождению, без которой было бы не обойтись в случае работы с Unix-платформой. Нам было необходимо строить систему таким образом, чтобы минимизировать затраты на поддержку, и СУБД Microsoft в этом отношении полностью соответствовала нашим запросам», — подчеркнул Айрат Хуснутдинов, заместитель директора Инженерного центра по инновационному развитию.

Результаты внедрения

Первый этап (консолидация девяти БД НГДУ)

• Многократно сократилось время, затрачиваемое на построение сводной отчётности по всем консолидированным НГДУ.
• Повысилась доступность консолидированной оперативной части системы АРМИТС до 99,9% (допустимый простой до 8,76 часов в год) за счет внедрения 4-узлового SQL-кластера.
• Уменьшилась нагрузка на CPU с 70 до 35% в среднем в рабочие часы, что позволило обеспечить запас производительности при прохождении пиковых нагрузок.

Второй этап (построение хранилища данных)

• Существенно разгружена оперативная часть АРМИТС за счет «вынесения» нагрузки по построению BI-отчетности на уровень хранилища данных DWH.
• Внедрена платформа для построения и регламентированного доступа к аналитическим отчетам с использованием привычных пользователям интерфейсов Excel и портала SharePoint 2010 SP1.
• Создана возможность динамического управления загрузкой данных (ETL процессы) на уровень хранилища DWH, включая подключения и загрузку данных из разных источников.

Программное обеспечение

• SQL Server 2008 R2
• SQL Server 2012
• FastTrack Data Warehouse 3.0
• Office SharePoint Server 2010
• SQL Server Reporting Services 2012
• SQL Server Integration Services 2012
• SQL Server Analysis Services 2012
• MOSS Excel Services 2012
• MOSS PowerView 2012