摘要
传统的数据分析,很难满足现阶段大数据处理效率的要求.Hadoop云计算技术的应用,实现了海量数据存储和分析,提高了数据存储和分析的效率.在总结传统系统利弊的基础上,以Hadoop分布式文件系统(HDFS)取代现有的单机数据存储,以map/reduce应用程序取代传统的单机数据分析,并对其做出优化.实验证明,Hadoop系统架构在生产上部署、投入使用的可行性.
学科与关键词
关键词
云计算Hadoop数据分析map/reduce cloud computingHadoopdata analysismap/reduce
- Implementation and benchmarking of cloud platform based on HadoopWANG Yan; ZHANG Yan沈阳师范大学学报(自然科学版), 2016, 34(2).
- Hadoop在数据挖掘中的应用研究李校红; 张秀芳新技术新工艺, 2015, (04): 97-99.
- 基于大数据Hadoop框架的数据处理流程研究与案例实践张陈炜; 游福成; 曹越北京印刷学院学报, 2017, 25(7): 142-144,149.
