新闻中心

首页 >> 新闻中心 >> 行业动态 >> 正文

地质大数据资产管理方案研究(上)

来源:中国矿业报 日期:2018年09月06日 08:44 人气:

国外的组织和机构在数据管理方面有着丰富的经验。在地学领域,美国2014年发布了国家空间数据基础设施战略计划(2014-2016年)。

在数据驱动的背景下,我们已经进入了数字经济时代。据统计,2016年中国数字经济总量已占全国GDP总量的30.6%,数据之于本世纪就像石油之于20世纪,它是发展和改变的动力。如果将数据比作土壤,再加上标准管理、元数据管理、主数据管理等各种营养成分,可以培养滋润出丰富多彩的上层数据应用。地质大数据作为国家空间基础信息重要的部分,为满足不断扩展的应用需求,将数据资源管理模式提升为数据资产管理模式势在必行。

大数据与数据资产管理

数据资产管理(DAM)是指规划、控制和提供数据及信息资产的一组业务职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,从而控制、保护、交付和提高数据资产的价值。数据资产管理是需要充分融合业务、技术和管理,确保数据资产的增值。

2013年,英国商务、创新和技能部发布《英国数据能力发展战略规划》,旨在使英国成为大数据分析的世界领跑者,并使公民和消费者、企业界和学术界、公共部门和私营部门均从中获益。该规划中数据能力主要包含三方面:人力资本、基础设施和数据资产。其中,数据资产主要体现在数据本身的丰富性、可用性和开放性等方面。同《美国大数据白皮书》一样,《英国数据能力发展战略规划》中也使用了data assets一词。

美国联邦地理数据委员会(FGDC)地理空间数据生命周期管理架构

2014年,美国发布了《大数据:抓住机遇,保存价值》,即《美国大数据白皮书》。白皮书指出:“政府机构根据开放程度已将数据资产划分为三个种类:开放性、半开放性、非开放性,并且只能出版发行开放性密级的信息。”

2015年7月,国务院出台了《关于积极推进“互联网+”行动的指导意见》,鼓励企业利用电子商务平台的大数据资源,提升企业精准营销能力,激发市场消费需求。9月,国务院发布的《促进大数据发展行动纲要》指出,在全球信息化快速发展的大背景下,大数据已成为国家重要的基础性战略资源,正引领新一轮科技创新。数据资源一词出现在纲要正文中。

党的十九大报告提出要“推动互联网、大数据、人工智能和实体经济深度融合”,进一步突出了大数据作为国家基础性战略性资源的重要地位,掌握丰富的高价值数据资源日益成为抢占未来发展主动权的前提和保障。

数据资产管理是一种新型的数据管理理念,其改变了“数据只是企业经营活动的副产品”的旧有观念,将数据作为“一种同货币或黄金一样的新型经济资产类别”来进行管理。

数据资产管理的核心是数据资产化,即将数据作为与实物资产、知识资产、人才资产一样的能为企业不断创造价值的核心资产,构建完善、统一的管控架构对其进行 管理,更好的应对大数据发展对企业运营带来的挑战。

大数据背景下,数据资产管理呈现出五大新特征:数据对象转为多源数据,形成了“数据湖”的概念;数据处理的底层架构快速向分布式系统迁移;组织过程扩展为业务部门为主角,IT部门执行,并衍生出兼具业务与技术能力的首席数据官即CDO岗位;管理手段趋于自动化和智能化;数据使用群体扩大,不仅包括企业决策人员、运维用户、业务管理人员、数据分析人员等内部用户,还包括数据科学家、数据应用专业企业等外部用户。

国内外数据资产管理与实践现状

国外的组织和机构在数据管理方面有着丰富的经验,形成了以国际数据管理协会(DAMA)、能力成熟度模型集成(CMMI)为首的几大流派;提出了数据资产管理的理论方法、技术思路以及相关软件系统,在金融、电信、商业领域较早开始数据资产管理的实践应用。在地学领域,美国2014年发布了国家空间数据基础设施战略计划(2014-2016年),截至目前通过4年实施,取得了显著成效。

我国的金融和电信等行业,较早开展了信息化和大数据工作,积累了一定的数据管理、治理乃至资产运营的经验,对促进国内数据资产管理的发展有着重要意义。中国信息通信研究院2017年、2018年分别发布了《数据资产管理实践白皮书》1.0和2.0,为中国地质调查局开展地质大数据资产管理工作提供基础参考框架与思路。

截至目前,中国电信、中国移动、建设银行、中国电网企业、中石化等行业大型企业开展了不同程度的大数据资产管理实践,形成了数据资产目录,搭建能力平台,研发数据资产管理工具及系列产品体系。中国建设银行于2013年全面启动数据资产管理,将原有的120多个系统,以及九大业务领域1700多个标准中的14000多张数据表、20多万数据字段,对照模型进行了梳理和规范,建成数据资产的统一管理和权威发布平台,目前已形成了包含4000多个实体、2万个属性的数据体系,基本上覆盖了各种基准数据,在全行系统内建立了统一的数据管控流程,实现了数据单点采集、多方共享,明确了数据不同节点的责任方,用元数据贯穿整个数据周期进行管理,同时也加强了数据安全和隐私的管理等。

美国地理空间数据资产管理方案

1. 目标

2010年美国管理和预算办公室(OMB)发布了OMB通告A的A-16号文补充指南。A-16号文(地学信息与相关空间活动的协调)是联邦政府促进地理空间数据协调使用、共享、传播和国家空间数据基础设施(NSDI)建设的基本政策文件。A-16号文明确了美国联邦地理数据委员会(FGDC)在实施地学信息与相关空间活动协调的角色和责任,A-16号文补充指南首次提出联邦政府在国家空间数据基础设施战略计划(NSDI)框架下,为协调联邦地理空间数据资产和投资更有效地支持国家优先事务和政府任务,启动组合管理,纳入国家空间数据资产组合管理体系进行跟踪、维护、扩展和调整数据资产和资源,在国家层面,通过统一的政策与标准、组织体系、管理体和公众参与等措施,消除数据鸿沟。

为完成A-16号文规定的任务,FGDC于2014年发布了国家空间数据基础设施战略计划(2014-2016)。该战略计划以全美国家级地学数据共享的角度,提出了三大战略目标,具体分解为9项任务、29个项目活动。三大战略目标分别为提升国家地学数据共享服务能力、确保联邦地理空间信息资源的责任明确和有效开发与管理、实现对全美地理空间信息界的领导。编制与实施国家地理空间数据资产管理计划任务,纳入确保联邦地理空间信息资源的责任明确和有效开发与管理的第二战略目标中,对地理空间投资的有效管理可以使得联邦机构及其合作伙伴控制成本、优化服务、减少重复投资、节省纳税人的钱,并推动联邦政府提高效率。OMB的A-16通告补充条款提出了对联邦地理空间投资和对国家地理空间数据资产(NGDA)管理实施组合管理的指导方针。组合管理方法将允许对数据专题和数据集的识别,满足政府和利益相关者的需求。FGDC也将提出政府开放数据政策的框架来将整个生命周期的信息作为资产来管理,以促进数据的互联互通与开放,保证系统和信息的安全。这一战略目标描述了联邦地理空间信息界将采取的用以落实组合管理的措施,以便更有效地规划地理空间数据收集工作,评估数据资产的状态,并尽量减少重复投资。推进国家地理空间数据资产NGDA的组合管理带来的好处如下:

——使得使用高级、可信和标准的国家地理空间数据集和服务更加方便,以及联邦行动和提供管理、访问地理空间资源更加透明;

——基础数据资产、高级的数据主题和数据集应该被列入NSDI组合管理;

——明确联邦在国家数据管理方面的角色和责任,包括数据与元数据的发布、研究OMB A-16通告补充条款中的组合管理、开放数据政策、地理空间平台、Data.gov和其他相关要求;

——落实和实施A-16通告中的组合实施计划,包括申报投资和确定投资要求;

——制定对A-16通告中数据主题和地理空间信息平台管理过程的监测和报告制度,包括对内容和技术标准的使用与扩散的推广和报告。

2. 联邦地理空间数据组合资产数据体系

FGDC提出了联邦地理空间组合资源(Federal Geospatial Portfolio)和联邦地理空间数据组合资产(Federal portfolio of geospatial assets)两个全新的概念。

联邦地理空间组合资源包括许多类别的多种资产,包括:非A-16号文规定的空间数据组合资产、基础设施、硬件、软件、人员、应用、服务和产品。联邦地理空间数据组合资产是登记在册的、可靠的、可访问的国家级数据集的体系。联邦地理空间数据组合资产包括不同层级的数据体系:

(1)国家地理空间数据资产组合(NGDA Portfolio)

国家地理空间数据资产组合是由多个国家级地理空间数据专题数据库(集)构成,每个专题数据库(集)由相关的国家地理空间数据集组成,能够入选国家级地理空间数据集多是数据量大且持续更新的国家级数据库。不是所有的数据集均可作为国家级地理空间数据资产进行管理,对于符合作为数据资产管理的数据集,须由国家级地学空间数据专题组提出建议,由FGDC协调小组同意并由FGDC指导委员会指定方可纳入。

(2)国家地理空间专题

一个NGDA专题(与“A-16主题”同义)是一个组织结构,在这个组织结构下多个相关的NGDA数据集在逻辑上作为一个单元进行分组和管理。国家地理空间数据专题确定的原则如下:

——原则1,专题是相关国家地理空间数据资产按应用专题的逻辑分组,用于满足普通公众的,容易被发现并且任何人都可以访问;

——原则2,专题的数据覆盖范围原则上需覆盖全国,数据的生产与管理能满足跨联邦机构或组织的应用需求;

——原则3,专题确立需有明确的立法授权、规定的法令或是核心空间参考数据集;

——原则4,专题的确立可促进多个相关数据集在联邦、州、市和地方政府、私营或非营利部门机构之间的凝聚力和协作开发、维护和深化;

——原则5,专题应侧重于选取对国家很重要的自然和人造数据资产数据集,例如境界线等。

(3)国家地理空间数据集

空间数据集将进行定期清点,如果符合要求则纳入并建议纳入国家地理空间数据资产组合管理(NGDA Portfolio)。NGDA专题领导和专题委员会负责空间数据集的清点。要获得FGDC指导委员会批准作为NGDA空间数据集,必须至少符合以下标准之一:

——数据集被多个机构或与州、市和地方政府等机构合作伙伴使用;

——应用于实现OMB所规定的总统优先事项;

——需要满足多个联邦机构的共享目标;

——法定授权明确要求;

为了确保NGDA数据集的质量和能被机构组织广泛应用的可用性,数据一定是:

——可发现,已发布和可获取;

——可靠性,由公认的国家管理机构维护;

——一致性,统一的代码、标准和相关定义,确保其完整性(包括符合适用的FGDC标准);

——现势性和适用性,定期维护并满足当前需求;

——资源化,作为企业资产。

3. 联邦地理空间数据组合资产管理方案

NGDA管理计划支持建立A-16 NGDA组合资源管理流程(MP)的两个主要阶段——

(1)准备管理和报告框架

建立数据资产管理委员会、专题领导协调组、数据集管理团队;明确数据组合资产管理的目标任务,优选核心国家级地理空间数据集目录清单并在GeoPlatform共享平台发布元数据;建立在线的工作协调平台、数据集成熟度评估模板、年度专题报告模板、数据服务应用投资报告模板、组合资产管理报告模板等及相关软件工具;建立对地理空间投资定义与预算报告的代码。预计全面实施A-16 NGDA数据资产组合管理流程可能需要3到5个预算周期。

(2)执行数据资产组合管理

共分为评估、规划、报告和预算设置4个阶段实施:

评估包括对国家地理空间数据集的成熟度评估和国家地理空间专题的成熟度评估;

规划阶段包括创建国家地理空间战略专题规划、执行和维护数据集管理方、专题委员会等多方协调机制、管理与维护GeoPlatform共享平台中专题内容等;

报告阶段,分阶段分别提交国家地理空间数据集、主题和组合资产的年度进展与评估报告;

预算设置阶段,建立地理空间数据资产组合管理的预算安排流程。□