MapReduce的配置详解 - hadoop1.2.1

hadoop官方文档 http://hadoop.apache.org/docs/r1.2.1/single_node_setup.html

  1. 关闭防火墙 service iptables stop

  2. 修改 vi /home/hadoop-1.2/conf/mapred-site.xml

配置主JobTracker

                mapred.job.tracker            hnd1:9001配置TaskTracker

最好运行在HDFS的DataNode上 默认也是在DataNode上 所以不需要修改配置

把配置文件复制到其他机器上
scp ./mapred-site.xml root@hnd2:/home/hadoop-1.2/conf/
scp ./mapred-site.xml root@hnd3:/home/hadoop-1.2/conf/

  1. 启动
    cd /home/hadoop-1.2/bin/
    ./start-all.sh

  2. jps查看启动进程
    访问
    NameNode - http://localhost:50070/
    JobTracker - http://localhost:50030/

  3. hadoop执行jar文件
    创建输入目录
    ./hadoop fs -mkdir /usr/input

./hadoop jar /home/hadoop/package/wordcount.jar com.hadoop.mr.JobRun

  1. 在目录C:WindowsSystem32driversetc中
    修改文件hosts

添加
192.168.40.101 hnd1
192.168.40.102 hnd2
192.168.40.103 hnd3
192.168.40.104 hnd4

关键字:hadoop, home, conf, jar

版权声明

本文来自互联网用户投稿,文章观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处。如若内容有涉嫌抄袭侵权/违法违规/事实不符,请点击 举报 进行投诉反馈!

立即
投稿

微信公众账号

微信扫一扫加关注

返回
顶部