设为首页   收藏本站
会员登录    |    申请会员
联盟介绍
当前位置:首页  >  联盟介绍

新年新起点:数促会大数据技术与产品工作组第一次会议在京顺利召开

发布时间:2018-01-09

2018年1月8日下午,数促会大数据技术与产品工作组2018年的第一次会议在中国信通院月坛办公区顺利召开,本次会议围绕“第六批大数据产品测试标准讨论”主题逐项展开。

 

来自中国信息通信研究院、中兴通讯、南大通用、联通大数据公司、电信云公司、中移苏研、铁科院、浪潮、数梦工场、联想、腾讯云、享宇金服、石化盈科、博宇通达、东方金信、通付盾、泰一指尚、中软国际、中联润通、华宇金信等企业的专家们齐聚一堂,共同探讨了第六批大数据产品测试标准内容与具体测试方法实现。本次会议由中国信息通信研究院云计算与大数据所工程师、大数据技术与产品工作组、数据资产管理工作组组长姜春宇主持。

 

Part 1
Hadoop平台性能测试方法

首先,与会专家分析了第五批大数据产品能力综合成绩结果,并针对即将开始的第六批Hadoop平台性能测试标准内容以及具体测试方法进行了相关探讨。探讨内容主要包括SQL测试部分是否增加测试项、SQL测试部门是否进行分组调优、机器学习用例是否增加、机器学习数据规模是否增加等内容。最后一致决定,第六批“Hadoop平台性能测试”将在第五批基础上增加测试难度,以此体现企业大数据产品实力。

 

Part 2
数据集成工具技术要求和测试方法

接着,与会专家针对ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程)模式和ELT(Extract-Load-Transform的缩写,即数据抽取、装载、转换过程)模式的数据集成工具展开讨论,并结合关系型数据库的集成过程和大数据平台的数据集成过程的差异性修改了测试方法的项目用例。在完善了数据源、目标源的技术要求和测试用例的基础上,重点讨论了“数据清洗/转换”过程的测试项。会上,与会专家建议预测试以披露基础功能和展现特色能力为主,逐步完善标准内容。

 

Part 3
数据管理工具技术要求和测试方法

姜春宇组长重点介绍了标准工作组针对数据管理平台的修改提议,与会专家针对“数据源和数据资产管理”测试模块进行了详细的讨论,中移苏研石在辉则结合产品经验详细介绍了他对该项标准的修改意见,其针对数据标准管理模块涉及的标准分类及搜索、标准变更管理、标准执行审核、版本查询及维护、标准导入导出进行了描述,并调整了技术要求内容。

 

Part 4
BI工具技术要求和测试方法

姜春宇组长介绍了商务智能(BI)分析工具标准的内容,与会专家针对产品界定和产品思路展开了讨论,并从分析功能、展示功能和报告功能进行了研讨。在大数据背景下,用户对商务智能(BI)分析工具针对大量数据的“成表”或“成图”的响应时间有一定的要求,与会专家提议针对商务智能(BI)分析工具的性能指标有标准化需求空间,可以在基础功能的标准化基础上,开展性能的标准化工作。

 

Part 5
数据挖掘平台技术要求和测试方法

与会专家在前期多次讨论修订成果基础上,针对测试项目及测试方法文稿又提出了一些新的建议与要求。首先考虑到标准需要适应业内广泛产品,与会专家建议内容包括标准文档内各名词定义的概念统一,同时去除标准内涉及到具体厂商产品细节的部分,其次考虑到测试落地过程中,各企业差异化物理环境的原因,涉及多种新型硬件架构的测试项落地进一步明确了测试细节,从而能够使第六批测试顺利完成。

 

最后,与会专家对第六批大数据产品能力测试预期、下一步大数据产品标准研发方向等方面展开了积极讨论。未来工作组还将会围绕大数据基础产品、数据管理产品、大数据分析应用产品、数据服务能力等方面进一步扩展新的标准。