基于Hadoop的云计算平台搭建(2)
由于云应用需求日益增长，未来越来越多的系统和应用将入驻云平台，云模式将是未来系统应用的主流模式。不仅如此，以Hadoop为代表的大数据处理技术将对传统计算技术产生革命性的影响，广泛影响计算机体系结构、操作系统、数据库、编译技术、程序设计技术和方法、软件工程技术、多媒体信息处理技术、人工智能以及其他应用技术，并与传统计算技术相互结合产生很多新的研究热点和课题。云计算的概念于2007年底提出，如今已经成为IT行业巨头未来发展的主要战略之一。这种全新的架构方式，使得用户可以获得超过本地计算机数倍的计算能力和存储空间，很好的解决了需求与资源的矛盾。云计算平台的最大特点是利用软件来实现硬件资源的虚拟化管理、调度及应用，利用虚拟化技术可大大降低文护成本和提高资源的利用率。在云计算时代，客户可以享受云端强大的数据处理能力和存储能力，并根据自己的需要定制相应的服务、应用及资源，从而摆脱了本地设备自身能力的限制。基于Hadoop的云计算平台搭建，在Hadoop稳定，高效的批处理下，从海量的数据中挖掘出有利于我们的数据。基于Hadoop的云计算平台搭建对系统管理和数据挖掘具有重要的研究意义。
1.2主要工作
(1)了解HDFS的工作机制，MapReduce编程模型，以及HBase数据库，Zookeeper的工作机制；
(2)运用虚拟机技术搭建Hadoop集群；
(3) Hadoop集群测试。