hadoop开发第二步

                                                     伪分布式运行wordcount

hadoop安装文件在/home/hadoop下
wordcount例子在hadoop/share/hadoop/mapreduce/下

可在localhost:50070查询

在.bashrc文件中配置了环境变量后,可以直接在/home/hadoop路径下运行下列命令(即直接打开终端就可运行命令)

即在hdfs的/目录下生成input目录

hadoop fs -mkdir /input

查询生成的文件目录

hadoop fs -ls /

生成两个本地文件

echo "hello world"> file01
echo "hello adu">file02
上传文件到hdfs上/input目录中
hadoop fs -copyFromLocal file0* /input
执行wordcount
hadoop jar /home/hadoop/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.9.0.jar wordcount input output
完成后,查看那结果:
hadoop fs -ls
hadoop fs -cat output/part-r-00000


猜你喜欢

转载自blog.csdn.net/douzhenwen/article/details/80074994