基于HADOOP分布式系统的数据处理分析

被引:7
作者
刘师语
周渊平
杜江
机构
[1] 四川大学电子信息学院
关键词
云计算; Hdfs; Map/Reduce; 海量数据;
D O I
暂无
中图分类号
TP311.13 [];
学科分类号
1201 ;
摘要
各种信息数据在迅猛增长,云计算技术的出现为海量数据的处理提供了良好的解决方案。Hadoop是云计算技术中分布式并行编程框架的开源实现,它利用集群的并行计算和存储能力,高效的完成对海量数据的处理,云计算能够为社会创造出更大的价值。最后通过Hadoop组织廉价的计算机资源搭建了一个分布式云计算平台,具有高容错、高效性、高扩展性等优势,并完成对数据处理能力和平台可扩展性进行性能测试与分析。
引用
收藏
页码:99 / 102
页数:4
相关论文
共 6 条
[1]   基于Hadoop的分布式云计算/云存储方案的研究与设计 [J].
成静静 .
数据通信, 2012, (05) :14-18
[2]   云计算中MapReduce技术研究 [J].
王晟 ;
赵壁芳 .
通信技术, 2011, 44 (12) :159-161
[3]   基于云计算的海量数据存储模型 [J].
侯建 ;
帅仁俊 ;
侯文 .
通信技术, 2011, 44 (05) :163-165
[4]   HDFS下载效率的优化 [J].
曹宁 ;
吴中海 ;
刘宏志 ;
张齐勋 .
计算机应用, 2010, 30 (08) :2060-2065+2240
[5]  
Hadoop实战.[M].陆嘉恒; 著.机械工业出版社.2011,
[6]  
Hadoop权威指南.[M].(美) 怀特 (White;T.) ; 著.清华大学出版社.2011,