最近一直在研究Hadoop,遇到了很多问题,把自己的一些心得写下来与大家分享一下。
一开始的时候,准备在windows环境下搭建Hadoop环境,因为毕竟Linux环境不太熟很多东西不会,搭了一个多星期,Hadoop还是没有成功的跑起来,遇到了各种问题,后来通过加了一个HadoopQQ群,经大师指点:“实际生产环境没有人会在Windows环境下跑Hadoop”,然后果断的就放弃了,开始借助虚拟机+Ubuntu来搭建Hadoop环境,按照网上的资料,一步一步的操作,用了一天的时间搭建成功,并且能够成功的运行wordcount(Hadoop helloworld程序),接着是安装Hive和Hbase,以上的环境都是伪分布式模式,为了实现Hadoop真正的集群,用公司现在不用的服务器,搭了一个3台服务器的小集群一开始