由于云应用需求日益增长,未来越来越多的系统和应用将入驻云平台,云模式将是未来系统应用的主流模式。不仅如此,以Hadoop为代表的大数据处理技术将对传统计算技术产生革命性的影响,广泛影响计算机体系结构、操作系统、数据库、编译技术、程序设计技术和方法、软件工程技术、多媒体信息处理技术、人工智能以及其他应用技术,并与传统计算技术相互结合产生很多新的研究热点和课题。云计算的概念于2007年底提出,如今已经成为IT行业巨头未来发展的主要战略之一。这种全新的架构方式,使得用户可以获得超过本地计算机数倍的计算能力和存储空间,很好的解决了需求与资源的矛盾。云计算平台的最大特点是利用软件来实现硬件资源的虚拟化管理、调度及应用,利用虚拟化技术可大大降低文护成本和提高资源的利用率。在云计算时代,客户可以享受云端强大的数据处理能力和存储能力,并根据自己的需要定制相应的服务、应用及资源,从而摆脱了本地设备自身能力的限制。基于Hadoop的云计算平台搭建,在Hadoop稳定,高效的批处理下,从海量的数据中挖掘出有利于我们的数据。基于Hadoop的云计算平台搭建对系统管理和数据挖掘具有重要的研究意义。
1.2主要工作
(1)了解HDFS的工作机制,MapReduce编程模型,以及HBase数据库,Zookeeper的工作机制;
(2)运用虚拟机技术搭建Hadoop集群;
(3) Hadoop集群测试。 基于Hadoop的云计算平台搭建(2):http://www.751com.cn/jisuanji/lunwen_27201.html