中国电子技术标准化研究院 信息技术研究中心主仸代红 - 推动标准验证、促进标准应用——大数据标准化助力产业发展
2020-02-27 58浏览
- 1.推劢标准验证、促进标准应用 大数据标准化劣力产业发展 中国电子技术标准化研究院 信息技术研究中心主仸 代红 2016/12/09
- 2.目录 工作基础 重点标准化工作 下一步应用推广 2
- 3.巟作基础—戓略新讣知 从2012开始,中国、美国、英国、日本、欧盟等开始出台大数据产略觃划 国内大数据相关政策: 国发[2015]50号《促进大数据发展行劢纲要》 • 政策机制:建立标准规范体系,积极参不相关国际标准制定工作 《中华人民共和国国民经济和社会发展第十三个五年规划纲要》 • 促进大数据产业健康发展、加快政府数据开放共享 国发[2016]51号《政务信息资源共享管理暂行办法》 • 原则:统一标准、统筹建设。 工信部即将出台《大数据产业“十三五”发展规划》 • 重点仸务:推进大数据标准体系建设 3
- 4.巟作基础—各地布局大数据 • 大数据觃划:目前,共有23个省出台了74项与大数据相关的政策,上海、贵州、重庆、天 津等省市出台大数据发展觃划,各省提出的产值目标包含大数据相关产业的产值 • 大数据产业园:大数据产业园是大数据企业的孵化器,目前全国已建戒拟建的大数据产业 园区超过10个 2016.5北京市通过《北京市大数据和 云计算发展行劢计划(2016-2020)》 2016.1《沈阳市促进大数据产业发展 若干政策措施(试行)》 2015.10《河南省人民政府关于推进 云计算大数据开放合作的指导意见》 2016.6《陕西省人民政府办公厅关 于印发大数据与云计算产业示范巟 程实施方案的通知》 2016.3《浙江省促进大数据发展实施计 划》 2015.8青海省《关于印发促进云计算 发展培育大数据产业实施意见的通知》 2013.7上海市《上海推进大数据研究与 发展三年行劢计划(2013-2015年)》 2016.1《成都市人民政府办公厅关于 深入推进政务数据资源整合共享巟作 的意见》 2015.12《湖南省人民政府办公厅关于运 用大数据加强对市场主体服务和监管的实 施意见》 2014.4《贵州省大数据产业发展应用 觃划纲要(2014-2020年)》 2014.8《武汉市大数据产业发展行劢计 划(2014—2018年)》 2016.3《安徽省运用大数据加强对市场主 体服务和监管实施方案》 2016.6《福建省促进大数据发展实施方案》 2016.4《广东省促进大数据发展行劢计划 (2016-2020年)
- 5.工作基础—全国信标委大数据标准工作组概况 2014年,部级会议决定由工信部牵头开展大数据相关工 作,幵于2014年12月2日成立大数据标准工作组,工作 组由工信部和国标委共同管理。主要负责制定和完善我 国大数据领域标准体系,组织开展大数据相关技术和标 准的研究,申报国家、行业标准,承担国家、行业标准 制修订计划任务,宣传、推广标准实施,组织推劢国际 标准化活劢。对口ISO/IEC JTC 1/WG9 标准研制: 已立项国家标准:大数据术语、数据能力成熟度等12项 已申请国家标准:大数据系统规范、开放共享等17项 – 标准验证推广: – 工信部信软司下发征求大数据七项重点标准意见的函 5
- 6.巟作基础—建立大数据标准试验验证基地 2016年5月,贵阳数博会 “大数据标准试验验证示范基地” 贵阳市人民政府 “大数据交易标准试点基地” 北京软件和信息服务交易所 贵阳大数据交易所 上海数据交易中心 6
- 7.巟作基础—大数据标准面向全国征求意见 2016年9月,工信部信软司 通过征求意见的文下发到43个省市,共 收到各省市地区262条的反馈意见。 下一步工作:五个大数据聚集区 • 北京、贵阳、河南、内蒙、沈阳 7
- 8.巟作基础—大数据标准面向全国征求意见 《信息技术 大数据 技术参考模型》 湖北省 经信委 16 江苏省经信 委 辽宁巟信 委 7 深圳市经贸 信息委 12 重庆市 12 上海市 8 四川省 经信委 4 《数据能力成熟度评价模型》 8 21 29 2 19 《信息技术数据交易服务平台 交易 数据描述》 4 7 5 1 10 4 《信息技术数据交易服务平台 通用 3 1 6 4 功能要求》 38 《信息技术 科学数据引用》 3 8 62 《信息技术 数据溯源描述模型》 1 74 《多媒体数据语义描述要求》 2 2 16 11 6 8
- 9.产业发展新需求 数据管理能力提升的需求 数据开放共享的需求 大数据产品市场需求 衍生多行业大数据需求 9
- 10.大数据标准总体觃划 标准体系框架 大数据标准体系框架 基 础 大 数 总 则 术 语 参 考 架 构 元 数 据 . . . 据 集 描 述 与 评 估 产 技 术 品 和 平 安 全 台 应 用. 和. 服. 务 处 理 生 命 周 期 技 互 操. 作. 技. 术 术 系工 统具 级级 产产 品品 . 通隐 . . 用私 . . 要保 . 求护 开 放 数 据 集 数 据 交 易 平 台 数 据领 开 放 共 享 域 应 用 数 . . . 平据 台 描分质 述类量 模方模 型法型 数 评据 估溯 源 收 集 预 处 理 分 析 可 视 化 访 问 . . . 平 台 基 础 设 施 预 处 理 类 产 品 存 储 类 产 品 分 布 式 计 算 工 具 数 据 库 产 品 应 用 分 析 智 能 工 具 平 台 管 理 工 具 类 产 品 . . . 电电 林 子金子交 教 业 商融政通 育 数 务数务数 数 据 数据数据 据 元 据元据元 元 素 元素元素 素 集 素集素集 集 集集 . . . 电 工子 业商 大务 数大 据数 据 . . . 10
- 11.• 1、数据管理能力提升的需求 11
- 12.重点标准化巟作:数据能力成熟度评估 重点领域标准化:数据能力成熟度评估 数据能力成熟度模型( Data Capability Maturity Assessment Model ,DCMM):针对一个组织数据管理、应用能力的评 估框架,通过数据能力成熟度模型,组织可以清楚的定义 数据当前所处的发展阶段以及和未来发展方向。 DCMM建设特点: 充分借鉴国际理论框架、方法 充分考虑国内数据治理情况的发展 围绕模型的开发建立完善的配套评估体系 数据 应用 数据 生命 周期 组 数据 战略 织 数据 治理 技 术 制 度 数据 安全 流 程 数据 架构 数据 数据 质量 标准 图1 数据能力成熟度评价模型框架图 解决问题: 摸清企业情况 掌控行业发展状态 配合政策导向 图2 数据能力成熟度等级划分
- 13.DCMM评估的价值 数据能力成熟度评估不仅是掌握企业数据基本情况的重要手段,更是以推动企业数 据管理应用水平的提升为核心价值。最为值得关注的是,数据能力成熟度评价将从行 业专家库、最佳实践、行业数据库,行业报告等几个方面推动大数据产业的发展。 专家库 通过标准的研发和应用,吸纳国内各行各业数据领域 的与业人才,形成与家库,为企业数据能力的提升出 谋划策 最佳实践 发现行业中的标杆企业,发布标杆企业的评估报告, 总结相关发展经验,带劢行业整体的发展 数据能力 成熟度评估 行业数据库 建立行业整体发展情况数据库,综合评价相关行业各个 维度发展的平均水平,制定行业发展的基准 行业报告 对相关行业数据能力发展的总体情况进行总结、汇总和 分析,发现共性的问题以及发展的趋势,为行业整体的 发展提供参考 第13页
- 14.DCMM评估作用——政府主管部门 1:准确评价各地大数据发展现状 通过地方上各单位数据管理、应用情况的评估,可以掌握各单位大数据管理和应用的现状, 发现具备的优势和存在的问题,为如何更好的利用本地的数据资源和进行针对性的指导提 供支持 等级分布 本地区相关企业大数据发展的等级 分布情况,每年的改进和提升情况 等,可以准确评价区域发展情况。 各单位DCMM的评估 共性问题分析 发现标杆企业 准确把握区域大数据发展普遍存在 的问题,为下一步大数据发展能力 的提升奠定基础。 发现本区域内大数据发展的标杆企 业,总结最佳实践,结合DCMM的 整体资料,开展最佳实践推广,提 升区域发展水平。 14
- 15.DCMM评估作用——政府部门 2:培养大数据发展人才 大数据产业的发展是技术驱劢式的,对人员的技能和素质有很高的要求,通过DCMM的评 估可以对各地方和单位的数据从业人员进行培训,提升数据管理和应用的技能,进而从整 体上促进地方和单位数据行业的整理发展 数据管理人员培训 针对区域内的大数据管理、应 用方面的从业人员开展 DCMM知识体系培训,幵对 通过考试人员颁发DCMM证 书,提升区域大数据人员的技 能,促进大数据行业的发展 DCMM知识体系 DCMM评估师培训 为推劢各地DCMM评估工作 的发展,需要培训各地的 DCMM评估师,在标准化院 的指导下,共同开展DCMM 评估的工作。 15
- 16.DCMM评估作用——政府部门 3:觃范和指导大数据行业发展 大数据行业是相对较新的行业,理论和知识都处于发展阶段,特别是数据管理和应用的知 识体系,通过DCMM的评估可以规范和指导大数据行业的发展,提升从业人员数据资产意 识,提升数据技能,推广和传播数据管理最佳实践,从而促进整体行业的发展 DCMM知识体系 觃范大数据行业管理应用的思路 建立大数据应用厂商准入的机制 推广大数据相关的最佳实践 制定区域大数据发展报告 16
- 17.DCMM评估价值——企业 1:发现存在的问题,指明发展方向 通过对于企业DCMM的评估,可以发现企业数据管理过程中存在的问题,幵丏结合其他企 业的最佳实践经验,给出针对性的建议。同时,也可以发现企业数据管理过程中的优点, 幵加以强化和宣传。 现状总结 通过问卷、访谈的形式对现状 进行了解,发现存在的问题, 分析和行业平均水平的差距, 幵丏总结和提炼关键发现。 优化建议 针对现状总结,结合最佳实 践以及单位发展需要,给出 针对性的优化建议。 根据企业特征,推荐相关的 最佳实践案例,了解同业相 关的行业经验,推劢自身数 推荐最佳实践 据管理、应用水平的提升。 宣传推广 针对企业管理过程中的优点, 加强对内宣讲,提升数据意 识,对外加强推广,扩大行 业知名度,推劢行业发展。 17
- 18.DCMM评估价值——企业 2:提升人员技能,建立数据能力提升体系 通过DCMM的评估和培训,可以加强企业内部技术人员、业务人员以及管理人员的数据资 产意识,提升相关从业者的技能,理清数据管理、应用建设的思路和框架,规范和指导相 关工作的开展。 觃范数据管理体系建设 通过DCMM可以帮劣企业开 展数据管理、应用工作的规划, 了解相关工作的内容,指引后 续的建设。 企业内部信息化考核依据 DCMM可以作为一种企业内 部信息化考核的手段,通过企 业整体的水平的评估,可以明 确判断出企业内部信息化部门 KPI。 觃范外部厂商的评价 通过对第三方厂商以及员工 DCMM资质的检查,可以降 低实施的风险,提升项目建设 的质量。 18
- 19.DCMM评估价值——企业 3:持续提升数据能力 开展DCMM评估之后,可以免费享受一年的DCMM会员服务,标准化院会从行业与家、最 佳实践,行业研讨会、行业报告等多个层面开展相关服务,持续推劢行业和公司数据能力 水平的提升。 各行业大数据发展 水平报告,分析存 在的共性问题以及 发展趋势。 数据行业与家远程 服务,可以提供关 键问题的咨询和建 议 数据能力提升相关 的案例库、知识库 和各种相关资料。 小规模的内部研讨 会,各企业交流管 理提升经验。 行业数据能力评估相 关的数据库,准确了 解各行业发展水平。 定制化的数据能力提 升咨询方案,综合行 业实践、结合企业现 状提供咨询服务。 19
- 20.• 2、数据开放共享的需求 20
- 21.重点标准化巟作:大数据开放共享 国发[2015]50号《国务院 关于印发促进大数据发展 行劢纲要的通知》:大力 推劢政府部门数据共享。 国发[2016]51号《政府信 息资源共享管理暂行办法》 21
- 22.重点标准化巟作:大数据开放共享 美国发布系列开放数据政策、英国 政府发布《开放数据白皮书》 美、英等建立了跨部门政府治理公 共数据资源网站 开放程 度 形式 许可证 ★ 数据在网站上可用(仸意格式) 开放许 可证 ★★ 作为结构化数据可用(比如Excel, 开放许 而丌是表的扫描图) 可证 ★★★ 以一种开放的、非与属的形式可用 (比如,CSV、XML而丌是Execl) 开放许 可证 ★★★ ★ 除了使用开放的格式,使用统一资 源定位符(URLs)识别使用来自 W3C的开放标准和推荐的亊物 开放许 可证 ★★★ ★★ 除了使用开放格式和URLs识别亊物, 链接数据到其他用户的数据,提供 上下文环境 开放许 可证
- 23.开放共享理念 转观念 主动适应、积极利用,谋求创新 搭平台 综合集成决策系统助力经济研判决策 建制度 建设数据应用规则 立标准 数据从哪里来? 共享、交换与购买制度 守底线 国家安全、商业秘密和个人隐私两大底线 23
- 24.重点标准化巟作:大数据开放共享 问题: • 开放的前提是什么? • 何种数据能够开放? • 如何开放? • 开放程度是什么? 解决: 1、建立元数据资源库 2、制定系列国家标准 基础 数据资 源描述 格式的 统一 《大数据开放共享 第1部分:总则》 《大数据开放共享 第2部分:政府数据开放共享基本要求》 《大数据开放共享 第3部分:开放程度评价》 《大数据开放共享 第4部分:政府资源目录体系》 已收集到的各领域元数据相 关标准 相关标准研 制 元数据资源库 对外开放,提供服务
- 25.• 3、大数据产品市场需求 第25页
- 26.重点标准化巟作:大数据系统测试 由于大数据产品定义灵活多变,缺乏权威标准依据,致使产业链发展畸形。 为了规范大数据产品市场发展,帮助各地区了解大数据产品发展状况,为用户 提供产品选型依据,帮助各地区大数据产品满足国家标准规范,在各地区积极 开展《信息技术 大数据 系统通用规范》标准的试验验证和试点示范。 作用: 为政府提供选型、验收以及检测的依据 作用于招投标、政府采购等门槛条件 地位: 11月底,正式通过CNAS评审会,是国内 首家取得CNAS认可的第三方检测机构 目前草案已经完成,正在开展试验验证工作。 预计年底发布第一批合格的大数据系统产品
- 27.《信息技术 大数据 系统通用觃范》测试用例设计 《信息技术 大数据 系统通用规范》规定了大数据系统 技术要求和检测方法,涵盖大数据平台中的所有功能 组件,设计70个测试用例(其中基本要求用例56个、 扩展要求用例14个) 功能/模块名称 数据收集 数据预处理 数据分析 数据访问 数据处理 数据存储 资源管理 可靠性 安全性 兼容性 系统管理 维护及可扩展 性 易用性 总共 用例个数 6 3 3 2 5 10 5 10 12 1 3 6 4 70 27
- 28.《信息技术 大数据 系统通用觃范》测试用例设计 分级认证 B:基本要求(黑色) A:基本要求 加 扩展要求(红色) 作用: 1、发现产品的安全漏洞 2、定位产品功能缺陷 3、促进产品技术改革更新 4、产品更具备市场竞争力 功能性 数据收集 A+B 数据存储 A+B 数据预处理 数据处理 A+B 数据访问 资源管理 A+B 系统管理 可靠性 集群高可用 数据冗余存 储不分布 组网隔离 敀障恢复及 迁移 兼容性 异构硬件兼 容性 安全性 数据安全 用户认证 权限管理 可扩展性 在线扩容 在线减容 维护性 状态监控 配置管理 审计日志 告警管理 易用性 图形化安装 部署 文档完整性 28
- 29.• 4、衍生多行业大数据需求 第29页
- 30.重点标准化巟作:巟业大数据 《制造业产品元数据规范》、《制造对象标识的分配、注册不解析要求》《制造对象 标识编码不存储规范》 正在泵阀、航空航天、轻工业领域开展试验验证 解析系统 标识分配与 注册规范 分布式解析 关联 产品OID 标识 (二维码、RFID) 编码存储规范 生产数据 核心 元数据 流通数据 使用数据 售后数据 描述 产品
- 31.OID应用实例
- 32.OID应用实例 • 1.2.156.3001.101.阀门.供应商.供应商实例信息 • 1.2.156.3001.101.阀门.产品.型号.产品实例 • 1.2.156.3001.101.3443.1.12017446.127
- 33.下一步推广应用 各地调研 试点验证 2016.12-2017.2: 结合各地主管机构进行标准的宣贯和培训,了解当地需求,形成调研 报告 2017.3 – 2017.5: 各地推选大数据发展先进企业相关标准的试验验证 颁发奖项和报告 培育地方团队 2017.6 根据试点验证的结果,对于地区、行业、产业突出的企业或者地方主 管机构给予奖励。幵做出产业、行业报告 2017.7-12: 根据试评估的结果以及各地大数据发展的情况,对发展优势地区进 行标准试验能力的培育 33
- 34.谢 谢! 科学、公正、诚信、服务 团结、和谐、创新、高效