摘要
随着互联网和物联网应用的快速发展,数据处理模式从结构化逐渐扩展到结构化、半结构化和非结构化混合的异构数据处理模式.设计了一种大规模异构数据并行处理系统,在统一的平台功能视图基础上,采用统一的资源管理框架,实现对结构化、JSON/XML、图数据、文档数据等多种异构数据进行存储和查询,采用统一的开发语言,实现跨数据类型和数据存储引擎的并行计算,满足多业务应用开发的需要,并通过实际的商业部署,验证了系统的可行性.
学科与关键词
关键词
并行系统异构数据统一架构
- Improving Data Analysis System and Data Processing Ability in the Big Data Era陶晓英信息通信技术, 2016, (4).
- 面向大数据的数据服务中心设计与应用研究刘云峰; 李丽; 王素美; 王倩宜; 杨旭; 欧阳荣彬; 龙新征通信学报, 2013, S2: 170-174.
- 基于参数优化的Hadoop云计算平台李寒; 唐兴兴计算机系统应用, 2013, (03): 21-24.
