Татнефть консолидирует серверы оперативной обработки на платформе Microsoft SQL Server

Фундамент ИТ-структуры компании Татнефть в виде корпоративной информационной системы АРМИТС послужил основой для перехода от распределенной к централизованной архитектуре, консолидируя серверы оперативной обработки данных на платформе Microsoft SQL Server, сообщила компания-интегратор Microsoft Consulting Services 24 декабря 2012 года.

Основа

Корпоративная информационная система АРМИТС (автоматизированные рабочие места инженерно-технологической службы) - ключевое ИТ-решение для компании «Татнефть», ей более 20 лет.

Система охватывает все основные бизнес-процессы компании, связанные с добычей нефти: с ней работают практически все структурные подразделения и службы «Татнефти». Ее пользователями (3,5 тыс. человек) являются специалисты самых разных уровней и профилей — от работников цехов добычи до топ-менеджмента компании.

Основная задача КИС - учет и анализ потоков жидкости из скважин при нефтедобыче. Система собирает большие массивы данных от АСУТП и систем телемеханики непосредственно в цехах добычи нефти и позволяет на основе их анализа определять ключевые плановые показатели работы компании. Витрина данных НОТА ВИЗОР для налогового мониторинга

Со временем распределенная архитектура КИС АРМИТС начала тормозить развитие системы, затрудняя расширение функционала в новые подразделения и исполнительный аппарат компании, ограничивая поддержку растущего числа пользователей, сдерживая решение сложных аналитических задач на основе данных, собираемых в разрозненных СУБД. Технические проблемы следовали: для нормальной работы системы структура баз данных на всех серверах должна быть идентичной, но за время эксплуатации в схемах баз данных появились расхождения из-за того, что некоторые модификации таблиц и индексов проводились вручную.

Возникла настоятельная потребность перехода от распределенной к централизованной платформе в масштабах всей компании.

Решение

Процесс перевода корпоративной системы «Татнефть» на новую централизованную платформу проходил в два этапа: на первом была выполнена консолидация оперативных баз данных нефтегазодобывающего управления (НГДУ), а на втором построено единое хранилище исторических данных компании.

Логическая схема взаимодействия оперативной части и хранилища FastTrack DWH «АРМИТС»

Проект по консолидации серверов баз данных реализован с конца 2010 года по февраль 2011 года силами консультантов Microsoft Consulting Services (MCS) при активном участии ИТ-специалистов «Татнефти». В рамках проекта в центре обработки данных компании развернута отказоустойчивая конфигурация из четырех серверов HP ProLiant, на базе которой работает СУБД SQL Server 2008 R2 Data Center.

В ходе проекта по консолидации баз данных специалисты предложили техническое решение по реализации хранилища данных на базе архитектуры Microsoft FastTrack Data Warehouse. Помимо хранилища в «Татнефти» разворачиваются аналитические сервисы на основе инструментов Microsoft SQL Server 2012 Reporting Services, Microsoft SQL Server 2012 Analysis Services, Microsoft Office SharePoint Server 2010 (MOSS) и MOSS PowerView.

Проект по созданию хранилища данных начат весной 2012 года, в июле систему передали специалистам «Татнефти» в опытную эксплуатацию. В компании рассчитывают, что работы по наполнению хранилища и формированию аналитических приложений будут завершены к концу 2012 года, после чего система может быть переведена в производственную эксплуатацию.

«Моим принципиальным выбором стали именно технологии Microsoft в качестве основы нашей корпоративной системы. Многие тогда говорили, что надо переходить на Unix-серверы, однако уровень задач, которые мы решали, не предполагал наличия большой команды технических специалистов по сопровождению, без которой было бы не обойтись в случае работы с Unix-платформой. Нам было необходимо строить систему таким образом, чтобы минимизировать затраты на поддержку, и СУБД Microsoft в этом отношении полностью соответствовала нашим запросам», — подчеркнул Айрат Хуснутдинов, заместитель директора Инженерного центра по инновационному развитию.

Результаты внедрения

Первый этап (консолидация девяти БД НГДУ)

• Многократно сократилось время, затрачиваемое на построение сводной отчётности по всем консолидированным НГДУ.
• Повысилась доступность консолидированной оперативной части системы АРМИТС до 99,9% (допустимый простой до 8,76 часов в год) за счет внедрения 4-узлового SQL-кластера.
• Уменьшилась нагрузка на CPU с 70 до 35% в среднем в рабочие часы, что позволило обеспечить запас производительности при прохождении пиковых нагрузок.

Второй этап (построение хранилища данных)

• Существенно разгружена оперативная часть АРМИТС за счет «вынесения» нагрузки по построению BI-отчетности на уровень хранилища данных DWH.
• Внедрена платформа для построения и регламентированного доступа к аналитическим отчетам с использованием привычных пользователям интерфейсов Excel и портала SharePoint 2010 SP1.
• Создана возможность динамического управления загрузкой данных (ETL процессы) на уровень хранилища DWH, включая подключения и загрузку данных из разных источников.

Программное обеспечение

• SQL Server 2008 R2
• SQL Server 2012
• FastTrack Data Warehouse 3.0
• Office SharePoint Server 2010
• SQL Server Reporting Services 2012
• SQL Server Integration Services 2012
• SQL Server Analysis Services 2012
• MOSS Excel Services 2012
• MOSS PowerView 2012