菜单
　　

    <value>/home/hadoop/secondaryname</value>
    <final>true</final>
    </property>
    <property>
    <name>dfs.replication</name>
    <value>1</value>
    </property>
    如图：
     

    mapred-site.xml
    <property>
    <name>mapred.job.tracker</name>
    <value>20.20.20.110:8030</value>
    </property>
    <property>
    <name>mapred.local.dir</name>
    <value>/home/hadoop/mapred</value>
    </property>
    如图：
     
    修改环境变量配置文件.bashrc：
    vi /home/hadoop/.bashrc
    在文件末尾添加：
         export HADOOP_HOME=/home/hadoop/deploy/hadoop-1.2.1
         export PATH=$HADOOP_HOME/bin;$JAVA_HOME/bin;$PATH
    如图：
     
    添加完成后，保存退出vi，再执行source .bashrc即可使环境变量生效。没有添加该环境变量时，hadoop相关命令只能在hadoop目录/home/hadoop/deploy/hadoop-1.2.1/bin下执行，格式为”./+命令”。设置该环境变量并生效后，可以在hadoop用户下任意路径使用hadoop相关命令，且命令前不需要加”./”。
    各节点部署
    主节点配置设置好以后，把hadoop安装文件拷贝到每个节点的对应目录下
     
     
    再把配置好的.bashrc文件拷贝到各节点：
     
     
    格式化命名空间
    cd /home/hadoop/deploy/Hadoop-1.0.3/bin
    ./hadoop namenode –format
     
    在出现Y or N的选项时，输入Y回车，format成功。
    集群启动
    格式化集群成功后，启动hadoop执行命令：start-all.sh
     
    如果使用集群完毕或者要关闭hadoop，执行命令stop-all.sh
     
    查看集群启动状态：执行命令slaves.sh jps
     
    或者查看网页：
    Datanode启动状态：20.20.20.110:50070
     
    TaskTracker启动状态：20.20.20.110:50030
    安装校验
    1.    在本地文件夹/home/hadoop下创建两个数据文件，分别是file1.txt，file2.txt。
    file1.txt中保存一个句子：Hello World
    file2.txt中保存一个句子：I am the king of the world
    2.    上传数据文件到HDFS文件系统
    1)    HDFS上创建data目录
  1. 上一篇：Packet Tracer在网络协议教学中的应用研究
  2. 下一篇：VB人事管理系统设计论文+源代码

  1. 基于Hadoop的制造过程大数据存储平台构建

  2. Hadoop云计算环境下的Web应用日志安全威胁分析

  3. 基于Hadoop平台的文档检索技术研究与实现

  4. 基于hadoop的海量文本分类算法研究

  5. 基于Hadoop的微博用户行为分析

  6. Openstack平台上Hadoop的部署与维护

  7. 基于hadoop的数据挖掘算法研究与实现

  8. 中考体育项目与体育教学合理结合的研究

  9. 河岸冲刷和泥沙淤积的监测国内外研究现状

  10. 杂拟谷盗体内共生菌沃尔...

  11. java+mysql车辆管理系统的设计+源代码

  12. 酸性水汽提装置总汽提塔设计+CAD图纸

  13. 十二层带中心支撑钢结构...

  14. 大众媒体对公共政策制定的影响

  15. 电站锅炉暖风器设计任务书

  16. 当代大学生慈善意识研究+文献综述

  17. 乳业同业并购式全产业链...

　　

About

751论文网手机版...

主页：http://www.751com.cn

关闭返回