石油企业数据管理体系建设研究

2020-04-30 06:44王继鹏
中国管理信息化 2020年7期
关键词:数据服务数据采集

[摘    要] 石油企业数据资源是石油企业勘探开发研究的基础和依据,数据资源建设体系对石油企业来说尤为重要,不论是前期的区域研究和井位目标研究,还是勘探储量,都直接或间接来源于勘探开发数据。石油企业探索勘探开发数据资源建设体系建设,保障勘探开发数据的正确性、完整性、一致性和及时性;实现跨专业数据综合查询、数据下载服务;实现面向现有应用系统和专业软件的数据支持服务。

[关键词] 数据管理体系;数据资源;数据标准;数据采集;数据服务

doi : 10 . 3969 / j . issn . 1673 - 0194 . 2020. 07. 027

[中图分类号] F279.23    [文献标识码]  A      [文章编号]  1673 - 0194(2020)07- 0059- 02

1      石油企业数据管理现状

通过近几年的信息规划和建设,特别是在“十一五”和“十二五”期间,石油企业在信息化建设方面取得较好的成绩。根据管理流程或业务流程的不同,新建一批专业数据库,例如勘探静态库、勘探动态库、测井库、地化库、地震库和文档库等,这些数据管理现状如下。

1.1   数据质量参差不齐

石油企业各专业数据库分别由不同的业务部门对口建设与管理,管理模式及力度不一,造成各专业数据库在数据标准和数据值的管理方面差异较大,比如数据项在一个数据库中是用字符类型管理,在另一个数据库中是用数据类型管理;同一个数据类型的数据项在勘探静态库定义是浮点型,而在动态库中定义为整型。数据标准、数据值和数据管理模式的差异,造成数据质量的参差不齐。

1.2   数据交换和共享困难

石油企业信息化建设初期缺乏整体的规划,大多系统建设都是以业务部门为主导,业务部门只侧重管理方式和建设成果,没有统一这些系统建设过程中的开发语言、系统架构、数据标准和数据库类型等因素,导致在企业内部形成了一个个的“信息孤岛”。这些“信息孤岛”之间缺乏有效的通信机制,造成数据交换和共享困难,数据的价值不能充分发挥。

1.3   缺乏有效的管理机制

随着信息技术的发展和石油企业信息化建设的推进,企业认识到了数据的重要性,并尝试通过业务流来控制数据流,但由于缺乏有效的管理机制加之人为的因素,导致數据库中产生了大量的垃圾数据。数据产权不明确,管理职责混乱,管理和使用流程不清晰,是造成数据质量问题的重要因素。

2      数据管理体系建设

参考国际大型石油公司和国内石油企业先进的数据管理成功经验,应围绕数据资产化管理这一核心目标,建立石油企业勘探开发数据资源管理系统、数据标准体系、源头数据采集体系、数据存储体系和数据服务体系,实现勘探开发专业数据资产化管理、数据跨专业共享和应用。

2.1   数据资源管理体系

数据资源管理是指对石油企业核心业务涉及的数据进行全生命周期的统一管理。通过数据资源管理对数据进行注册、登记、统计、检索,是勘探开发数据管理的核心,包含业务分析与建模 、数据资源规划、数据资源管理系统建立。

业务分析与建模是在对石油企业的勘探开发业务进行全面分析基础上建立的勘探开发专业模型,形成一套规范的业务描述,为数据资源规划、数据标准建设奠定基础。数据资源规划是在对石油企业勘探开发业务全面分析后,梳理出业务所产生的数据及数据的整个生命周期:从数据的产生源点、数据的上报流程、数据的审核机制、数据的存储、数据的状态到数据的应用,并根据业务对数据的应用需求规划出统一管理的数据资源范围。根据数据产生的源点规划出数据采集的内容、岗位、频率等。数据资源管理系统通过设计一套元数据体系来管理数据的生命周期,建立数据资源管理系统,完成数据资源的注册及数据资源的检索、统计等功能。

2.2   数据标准体系

数据标准是石油企业数据管理的基础,主要包括:勘探开发一体化数据标准、勘探开发专业数据库标准、系统应用数据库数据标准、数据采集标准。勘探开发一体化的数据标准来自对石油企业业务的分析和现有数据标准的充分参考,是数据采集、数据存储、数据交换和数据共享的基础。能够有效解决跨专业信息沟通障碍,消除信息孤岛,实现数据跨专业共享。勘探开发专业数据库标准及系统应用数据库数据标准是各专业根据本专业业务需要建设的数据标准,为生产管理、综合研究应用系统服务。专业数据库、系统应用数据库数据标准需要与勘探开发一体化数据标准保持架构的一致性。数据采集标准规范石油企业数据采集内容,保证数据采集源头唯一,消除多渠道重复数据采集,确保数据质量。

2.3   源头数据采集体系

建立石油企业统一的数据采集体系,能够保证数据齐全、准确、及时地入库,为应用提供高质量的数据支持。在统一的源头数据采集规划下,各专业源头数据按照数据采集管理规范,通过数据采集系列软件进行采集,经过质量管理控制和数据审核后加载到数据库。采集体系主要包括:统一数据采集规划、统一采集管理规范、统一采集管理系列软件、统一采集管理流程、统一质量管理体系。

统一数据采集规划是在数据资源规划基础上,根据数据产生的源点统一规划出石油企业数据采集源点、数据采集内容、采集频率等。统一采集管理规范是在石油企业内统一明确规定数据采集内容的填写要求、填写格式、编码方式等。统一采集管理系列软件是数据采集配套的工具,包括:数据采集、数据审核、数据加载、数据质量监控、采集问题沟通及反馈等软件功能。统一采集管理流程优化和规范石油企业数据采集管理。建立从采集计划制定、采集计划分解、采集计划执行、采集计划监控、到采集问题反馈等一系列的规范管理流程,确保数据采集顺利实施。统一质量管理体系包括:数据采集质量的审核、入库质量的检查、应用问题的反馈处理及配套的考核办法。

2.4   数据存储体系

数据存储体系是指对数据库的统一存储管理,主要包含:勘探开发数据管理系统的硬件支撑环境建设、数据库构成,数据库的部署模式和数据存储管理规章制度等内容。

石油企业勘探开发数据管理系统数据库的构成就是设计出勘探开发数据库系统,为存储管理各种类型的数据(结构化数据、大块数据体、文档、图形等),采用一个还是多个数据库构成数据中心,并描述清楚各部分数据库及与现有数据库的关系。数据库部署采用主从模式,主数据库部署在总公司,各作业公司或分公司部署从数据库。数据存储管理规章制度包括:对数据库系统的数据标准、环境建设、安全管理和日常运行维护等内容。

2.5   数据服务体系

建立统一的数据服务体系,提供跨专业数据综合查询、数据下载服务;面向现有应用系统;综合研究专业软件提供数据支持服务。

跨专业数据综合查询、数据下载服务是在勘探开发数据存储层与综合应用层之间建立数据服务平台,面向勘探开发业务生产管理、專业应用,提供以地理信息与地质图形、勘探开发地质目标对象分类编目和专业业务分类编目为基础的数据组织、集成、检索、查询、浏览、统计、叠加、导航的综合查询应用系统。实现各类勘探开发信息跨专业的集成化组织和可视化查询。

面向现有应用系统数据支持服务是指对石油企业在原有专业数据库基础上,建立数据映射,通过ETL技术实现原有专业数据库与中心数据库互联互通,使原有应用系统不需改造或少量改造而平稳运行。在未来数据管理体系下,保护已有投资。

面向综合研究专业软件的数据支持服务是指对目前石油企业在地震资料解释、地质建模、数值模拟、测井解释等方面应用的各种主流软件的数据支持。大型主流综合研究软件基于本身的项目数据库运行,目前项目数据库的数据准备占用大量时间,数据服务提供面向主流综合研究软件项目数据库的数据打包下载功能。

3      总    结

石油企业数据管理体系是石油企业多年来数据管理和数据治理工作经验的总结与提升。数据管理体系的建设从根本上解决数据的采集、存储、管理和应用等方面的问题,是石油企业实现数据资产化管理和数据治理的关键,是石油企业大数据技术应用建设的基础,为后续勘探应用大数据技术和实现智能勘探提供数据支持。

主要参考文献

[1]阮杰. 油气田勘探与生产数据治理体系构建[J]. 信息技术与标准化,2018(8):70 -72.

[2]王继鹏,金云智,李伟. 勘探开发数据整合之ETL系统的研究与实现[J]. 中国矿业,2019,28(z2):191-194,199.

[3]张华义,何东溯,汪福勇,等. 勘探开发数据整理平台开发与应用[J]. 天然气勘探与开发,2009,32(4):69 -74,88.

[4]霍威,郑勇,白薷,等. 延长油气田基础数据管理系统的分析与设计[J]. 中国石油和化工,2011(12):56 -57.

[5]张华义,汪福勇,邓平,等. 油气田勘探开发数据管理与应用技术体系探索[J]. 天然气工业,2012,32(5):85-88,109-110.

[6]赵长明.“一带一路”倡议实施中企业风险防控研究[J]. 哈尔滨师范大学社会科学学报,  2018(1):75-79.

[7]戚晓旭,何皛彦,冯军宁.京津冀协同发展指标体系及相关建议[J]. 宏观经济管理, 2017(9) :14-17.

[8]金焕东,孙依敏,朱颖超.中国石油企业“一带一路”对外合作面临的机遇与挑战[J].国际石油经济,2017(8) :23-28.

[9]武文静,周晓唯. 丝绸之路经济带战略视阈下西安建设西部能源金融中心的优势测度[J].陕西师范大学学报:哲学社会科学版,2017(3):45-47.

[10]陈培如,冼国明,马骆茹.制度环境与中国对外直接投资——基于扩展边际的分析视角[J]. 世界经济研究,2017(2):22-25.

猜你喜欢
数据服务数据采集
地理空间大数据服务自然资源调查监测的方向分析
基于数据中台的数据服务建设规范研究
数据服务依赖图模型及自动组合方法研究
如何运用税收大数据服务供给侧结构性改革
CS5463在植栽用电子镇流器老化监控系统中的应用
大数据时代高校数据管理的思考
基于开源系统的综合业务数据采集系统的开发研究
基于频繁子图挖掘的数据服务Mashup推荐
一种基于数据服务超链进行情景数据集成的方法*