305. Организация хранилища промысловой и геолого-геофизической информации

ПОКАЗАТЕЛИ ПРОЕКТА

• Заказчик: НК «ЛУКОЙЛ»
• Период проекта: 2007-2020
• ИТ-решение: «ИСОХО ГГПД»
• Линейка приложений: «Платформа АТОЛЛ» версии IV.3.

ОБЩИЕ ЦЕЛИ

Целями программы проектов обозначены:

• Организация единого хранилища промысловой и геолого-геофизической информации;
• Унификация механизма и регламента сбора информации из первоисточников;
• Управление качеством наполнения Хранилища;
• Унификация механизма и регламента предоставления информации Потребителям информации;
• Контроль за регламентом наполнения и использования информации в Хранилище.

ОПИСАНИЕ ДЕЯТЕЛЬНОСТИ

В крупных вертикально-интегрированных компаниях стоит проблема наличия большого количества вертикальных информационных потоков с пересекающимся набором показателей производственной деятельности.

Источником такой информации являются региональные подразделения или приложения, обеспечивающие автоматизацию отдельных бизнес-задач.

НК «ЛУКОЙЛ» определила интерес в создании единого хранилища «золотых записей», хранящих данные об активе с максимальной достоверностью. Хранилище должно быть поставщиком «единой» версии правды для любого потребителя этих данных.

Проектная деятельность была инициирована в декабре 2006 года в проектном офисе НК «ЛУКОЙЛ», согласно действующей ИТ-стратегии.

«ПРОЕКТИРОВАНИЕ»

Детальная проработка технических проектов является ключевой особенностью ИТ-проектов ЛУКОЙЛа – это позволило на последующих годах реализации КИС РРЭМ внедрять подсистемы с максимальной скоростью реализации (в пределах нескольких месяцев). Функциональные рамки технических проектов подвергались минимальным изменениям, что соответствовало текущим естественным изменениям бизнес-процессов и характеризовало первоначальные технические проекты как глубоко проработанные и учитывающие первоначальные интересы бизнес-пользователей. 

С июня 2007 года по август 2007 года был сформирован технический проект, в рамках которого определены:

• архитектура ИТ-решения в целом;
• основные механизмы хранилища;
• унифицированы типы данных и их атрибутов;
• сформированы правила проектирования структур хранилища.

«РАЗВЕРТЫВАНИЕ»

В рамках данного этапа необходимо было получить ИТ-решение с загруженным объемом исторической информации.

Осенью 2007 года было развернуто ИТ-решение (на основе Платформы АТОЛЛ IV.0):

• структура хранилища;
• механизмы интеграции;
• механизмы загрузки архива.

До конца 2007 года выверялись и унифицировались справочники, создавались перекодировочные таблицы, выполнялись  первоначальная загрузка исторической информации из смежных систем. Геолого-геофизическая информация загружалась, в том числе, из Petrovision.

С декабря 2007 года хранилище запущено в опытно-промышленную эксплуатацию и начало свое тиражирование по регионам.

В 2008 году ИСУ ГГПД/ИСОХО ГГПД было запущено в промышленную эксплуатацию.

Результатом мероприятий 2007-2008 года являлись:

• развернутое хранилище промысловой и геолого-геофизической информации в составе:
  • БД в корпоративном центре и в каждом регионе;
  • механизм репликации между региональными БД и БД корпоративного центра;
  • интеграционные потоки (механизмы и настроенные задачи с правилами) по регламентной загрузке данных в ИСУ ГГПД;
• загруженный архив по 80 типам данных;
• проектная и эксплуатационная документация:
  • ER-диаграммы БД «ИСУ ГГПД» по каждому типу информации;
  • описание интеграционных потоков, как на уровне типов данных (разработаны блок-схемы), так и на уровне атрибутов (документы по маппированию);
  • описание основных правил отклонения, удаления и обновления информации и контроля загружаемых данных на соответствие Корпоративным справочникам;
  • описание механизма преобразования локальных справочных значений в корпоративные при загрузке данных;
  • описание механизма обновления корпоративных справочников в БД «ИСУ ГГПД» в соответствии с пополнением и уточнением корпоративных справочников.

Архитектура функционирования функциональных приложений сориентирована на потребление информации из хранилища, обеспечивая единые исходные данные для решения задач своих бизнес-пользователей.

В региональные хранилища были сведены информационные потоки подразделений и приложений соответствующих уровней.

Унификация информации поддерживается использованием единых между всеми узлами хранилища справочников корпоративной нормативно-справочной системы (КСС).

«УПРАВЛЕНИЕ КАЧЕСТВОМ ИНФОРМАЦИИ»

В конце 2008 года в Хранилище был накоплен значительный объем промысловой и геолого-геофизической информации, обновляемой на регулярной основе. 

Следующим шагом после накопления информации была поставлена задача контроля за качеством и регламентом поступления информации, а также выверка качества данных в самом Хранилище.

Специалисты АО «ОТ-ОЙЛ» в течение октября 2008 года выполнили следующие задачи:

• Развернут модуль «Диспетчерская»:
  • описание задач на интеграцию
  • планирование заданий на проверку правил;
  • просмотр регламент выполнения задач;
  • просмотр журналов выполнения задач
• Развернут модуль «Качество Данных»:
  • описание предметной области бизнеса в объектов и отношений;
  • анализ текущих закономерностей в БД;
  • описание бизнес-правил и правил проверки;
  • интеграция со сторонними системами загрузки данных и др.
• Проведена опытно-промышленная эксплуатация развернутых сервисов с демонстрацией возможностей:
  • Создание метамодели бизнес-объектов;
  • Создание иерархии групп бизнес-правил;
  • Создание бизнес-правила на основании диаграммы;
  • Создание бизнес-правила на основании sql-запроса;
  • Создание задачи проверки бизнес-правил;
  • Создание регламента проверки бизнес-правил;
  • Визуализация всех серверов  ИСУ ГГПД;
  • Визуализация потоков данных к центральному серверу от региональных и наоборот (репликация);
  • Визуализация текущего состояния контрольных точек доставки информации на региональном уровне;
  • Визуализация текущего процесса проверки данных центрального сервера;
  • Визуализация всех потоков информации до регионального сервера (загрузка), и от регионального сервера до центрального (репликация);
  • Механизм управления  потоками данных методом контрольных точек.

В конце 2008 года развитие направления по управлению данными в ИСОХО было приостановлено (в 2015 году, это направление было стартовано под новой концепцией в рамках проекта СУД БС ГИД). Приоритет получили задачи на загрузку появляющихся новых типов данных и поддержка ИТ-решения в промышленной эксплуатации.

В 2010 году АО «ОТ-ОЙЛ», совместно с ЛУКОЙЛ-ИНФОРМ подготовила концепцию принципиально нового хранилища с сервисами управления данными, отвечающего современным требованиям к архитектуре, сервисам и потребностям бизнес-приложений. В 2015 году, это новое ИТ-решение стартовало свое внедрение под именем СУД БС ГИД .

«ТЕХНИЧЕСКАЯ ПОДДЕРЖКА»

Начиная с 2008 года по 2013 год специалисты АО «ОТ-ОЙЛ» выполняли техническую поддержку ИТ-решения (удаленно и в проектном офисе):

• В 2008 году:
  • создание проектного офиса АО «ОТ-ОЙЛ» в НК «ЛУКОЙЛ» с целью повышения оперативности внедрения ИТ-решений из линейки продуктов «АТОЛЛ IV», а также решения задач по загрузке архивов информации;
  • оказывается поддержка уровня: Base, Silver, Gold (в том числе, дозагрузка архива информации в Хранилище);
  • проведен детальный аудит всей ИТ-инфраструктуры подсистем КИС РРЭМ. Реализация полученных рекомендаций повысила эффективность хранения информации и скорости доступа к данным на отдельных направлениях до 5 раз.
• В 2009-2014 гг:
  • работы уровня base, gold выполнялись сотрудниками АО «ОТ-ОЙЛ»;
  • в мае 2009 реализован прототип интеграции ИСУ ГГПД и одной из подсистем ИСУ ГГПД с использованием продукта DataStage компании IBM;
  • в 2012 году подключен новый регион РИТЭК;
• В 2014 году Техническая поддержка ИТ-решения передана в структуры НК «ЛУКОЙЛ» вместе с ресурсами проектного офиса АО «ОТ-ОЙЛ».

РЕЗУЛЬТАТЫ ПРОЕКТА

Результатами создания и эксплуатации ИТ-решения стали:

• Концепция Хранилища промысловой и геолого-геофизической информации;
• Хранилище накопленной структурированной выверенной промысловой и геолого-геофизической информации по более чем 100 типам данных;
• Механизмы загрузки и проверки промысловой и геолого-геофизической информации;
• Регламенты загрузки, проверки и обновления информации;
• Регламенты и правила предоставления информации в приложения по запросу;
• Механизмы репликации между узлами ИТ-решения в КЦ и регионах.

ОСОБЕННОСТИ ПРОЕКТА

К особенностям проекта можно отнести:

• наличие совместного проектного офиса на территории заказчика нивелировала риски постоянного изменения ТЗ на ИТ-решения и позволило удержать проект в приемлемых бюджетных рамках;
• внесение изменений в структуру хранения данных, отличных от структур хранения в Платформе АТОЛЛ увеличило сроки и трудоемкость проекта, однако позволило Заказчику выполнять расширение проекта собственными силами (с учетом передачи исходных кодов согласно условиям договора);
• заложенная архитектура ИТ-решения предусматривала ссылку на онтологическую модель, что позволило в дальнейшем реализовывать проекты по управления данными с интеграцией в них как компонента данного ИТ-решения.