服务器centos 6.3
hadoop 1.12
主要进行:
1.安装jdk
2.安装hadoop
3.设置ssh无密码登录
1.ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
4.启动hadoop
1.bin/hadoop namenode -format
2. bin/start-all.sh
启动hadoop服务器,并进行查看
3.查看是否正常
使用jps
还可以通过在windows的网页中输入
来查看是否正确。
5.运行hadoop内部的例子
1.创建输入的文件夹
bin/hadoop fs -mkdir input
2.将文件上传到input中
bin/hadoop fs -copyFromLocal conf/*.xml input
查看里面没有东西,但是再次执行的时候显示已经有了,可能不显示吧
3.执行相应的命令,来运行example
bin/hadoop jar hadoop-examples-1.1.2.jar grep input output 'dfs[a-z]+'
4.查看运行结果
bin/hadoop fs -ls output
最重显示的结果