菜单
  

    (1)Client。Client节点上运行了Map/Reduce程序和JobClient,负责提交Map/Reduce作业和为用户处理结果。
    (2)JobTracker。JobTracker负责协调Map/Reduce作业的执行,是Map/Reduce运行框架里面的主控节点。其功能包含了制定Map/Reduce作业的执行计划、分配任务的Map和Reduce执行节点、监控任务的执行、重新分配是失败的任务等。每个Hadoop集群只有一个JobTracker。
    (3)TaskTracker。它主要负责执行由JobTracker分配的Map或Reduce任务,系统中可以有多个Map TaskTracker或者Reduce TaskTracker。
    2.1.4  Hive的介绍
    Hive是一个建立在Hadoop基础之上的数据仓库[13],它设计的目的是让熟练掌握SQL语言,但不具备Java编程能力的数据分析人员,能对存储好的结构化数据进行数据查询和处理操作,其中Hive定义的语言为HiveQL,类似于SQL。在Hive中,数据是以库(Database)、表(Table)、分区(Partition)和桶(Bucket)的层次进行组织的,而数据的这些组织形式信息成为元数据,Hive的元数据都集中存放在元数据库(Metastore)中,Hive采用关系数据库(MySQL或Derby)存储元数据
  1. 上一篇:基于众包理论的网络舆情意见领袖形成的BDI模型建模研究
  2. 下一篇:大数据环境下突发社会舆情在不同阶段的演变路径演变表现和演变动因
  1. 基于MATLAB的图像增强算法设计

  2. jsp+sqlserver高校二手商品交...

  3. 基于Kinect的手势跟踪与识别算法设计

  4. JAVA基于安卓平台的医疗护工管理系统设计

  5. java+mysql设备监控记录的大...

  6. 基于核独立元分析的非线...

  7. 基于Hadoop的制造过程大数据存储平台构建

  8. 十二层带中心支撑钢结构...

  9. 当代大学生慈善意识研究+文献综述

  10. 中考体育项目与体育教学合理结合的研究

  11. 电站锅炉暖风器设计任务书

  12. 杂拟谷盗体内共生菌沃尔...

  13. 河岸冲刷和泥沙淤积的监测国内外研究现状

  14. java+mysql车辆管理系统的设计+源代码

  15. 乳业同业并购式全产业链...

  16. 大众媒体对公共政策制定的影响

  17. 酸性水汽提装置总汽提塔设计+CAD图纸

  

About

751论文网手机版...

主页:http://www.751com.cn

关闭返回