编制说明_通用数据.doc

《编制说明_通用数据.doc》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、国家标准报批资料国家标准《通用数据导入接口规范》（征求意见稿）编制说明一、工作简况根据国家标准化管理委员会2015年度国家标准制订计划安排，国家标准《通用数据导入接口规范》的修订工作由中兴通讯股份有限公司负责主办，浪潮电子信息产业股份有限公司、成都勤智数码科技股份有限公司、华为技术有限公司、北京软件和信息服务交易所有限公司、上海天玑科技股份有限公司、天津南大通用数据技术股份有限公司、中国电子技术标准化研究院等单位协办。其项目计划代号为20141204-T-469。二、标准编制原则和确定主要内容的

2、论据及解决的主要问题本标准规定了通用的数据导入接口，包括数据源与大数据系统间应提供的数据采集接口，以及本接口适用的数据源、数据类型和访问方法，包括调用方式、共用参数和共用错误信息。本标准描述的接口有以下两大类接口：动态数据导入接口和静态数据导入接口。动态数据具有实时性、易失性、突发性、无序性、无限性等特征，相应的数据导入接口设计应表现出低延迟、高吞吐、持续稳定运行和弹性可伸缩等特性。常见的动态数据有：实时产生和传输的消息、关系数据库表中的记录、实时产生的日志文件等。动态数据一般通过消息中间件，将

3、数据以消息的形式实时导入。消息中间件主要有以下需求特征：消息持久化是一种常态需求;吞吐量是系统需要满足的首要目标。静态数据为非活动数据，可以数据库、数据仓库、电子表格等形式存储，一般通过文件方式传输。此接口可以采用TCP/IP协议作为文件传输协议。本标准适用于大数据系统通用数据导入接口的研制和测试。三、主要验证情况分析中兴通讯股份有限公司研制的大数据平台DAP已经对本规范接口技术予以实施和验证，实现了对各种数据的采集导入以及进一步的计算分析。四、知识产权情况说明无。五、采用国际标准和国外先进标准

4、情况无。国家标准报批资料七、与现行相关法律、法规、规章及相关标准的协调性协调一致。八、重大分歧意见的处理经过和依据对于本规范中的通用数据导入接口架构，经过讨论，保持与工作组其他平台类标准架构图一致，突出数据源和大数据系统之间的接口示意。对于本规范中的术语和定义，引用自国家标准《大数据术语》定义，不重新定义。九、标准性质的建议推荐性标准。十、贯彻标准的要求和措施建议建议大数据系统的相关研发参照此标准的接口要求实现。如有进一步的大数据系统的互通测试规范，则需按需引用此接口规范。十一、替代或废止现行相

5、关标准的建议无。十二、其他应予说明的事项无。全国信息技术标准化技术委员会-国家标准《通用数据导入接口规范》编制工作组2016-12-25