wordcount在集群上的测试

1.将louts.txt文件从cg计算机复制到master节点上面，存放在/usr/local/hadoop   需要输入密码：83953588abc

scp /root/IdeaProjects/mapReduceTest/lotus.txt root@172.18.0.2:/usr/local/hadoop /WordCountTest/input

 2.将lotus.txt文件从master这台机器上传到hdfs的系统里面

hadoop fs -put /usr/local/hadoop/lotus.txt /WordCountTest/input

3.修改pom.xml文件

将packaging从war修改成jar

这里需要重新加载一下maven

4.使用maven打包

5.上传生成的jar包从cg机器上传到master上面

scp /root/IdeaProjects/mapReduceTest/target/mapReduceTest.jar root@172.18.0.2:/usr/local/hadoop

6.执行jar包

hadoop jar jar名字 驱动文件（一般包含main方法）输入路径  输出路径

具体例子如下：

hadoop jar mapReduceTest.jar WordCountDriver /WordCountTest/input /WordCountTest/output

 

7.查看执行结果