菜单
(1)Client。Client节点上运行了Map/Reduce程序和JobClient,负责提交Map/Reduce作业和为用户处理结果。
(2)JobTracker。JobTracker负责协调Map/Reduce作业的执行,是Map/Reduce运行框架里面的主控节点。其功能包含了制定Map/Reduce作业的执行计划、分配任务的Map和Reduce执行节点、监控任务的执行、重新分配是失败的任务等。每个Hadoop集群只有一个JobTracker。
(3)TaskTracker。它主要负责执行由JobTracker分配的Map或Reduce任务,系统中可以有多个Map TaskTracker或者Reduce TaskTracker。
2.1.4 Hive的介绍
Hive是一个建立在Hadoop基础之上的数据仓库[13],它设计的目的是让熟练掌握SQL语言,但不具备Java编程能力的数据分析人员,能对存储好的结构化数据进行数据查询和处理操作,其中Hive定义的语言为HiveQL,类似于SQL。在Hive中,数据是以库(Database)、表(Table)、分区(Partition)和桶(Bucket)的层次进行组织的,而数据的这些组织形式信息成为元数据,Hive的元数据都集中存放在元数据库(Metastore)中,Hive采用关系数据库(MySQL或Derby)存储元数据
共4页:
上一页
1
2
3
4
下一页
上一篇:
基于众包理论的网络舆情意见领袖形成的BDI模型建模研究
下一篇:
大数据环境下突发社会舆情在不同阶段的演变路径演变表现和演变动因
基于MATLAB的图像增强算法设计
jsp+sqlserver高校二手商品交...
基于Kinect的手势跟踪与识别算法设计
JAVA基于安卓平台的医疗护工管理系统设计
java+mysql设备监控记录的大...
基于核独立元分析的非线...
基于Hadoop的制造过程大数据存储平台构建
十二层带中心支撑钢结构...
当代大学生慈善意识研究+文献综述
中考体育项目与体育教学合理结合的研究
电站锅炉暖风器设计任务书
杂拟谷盗体内共生菌沃尔...
河岸冲刷和泥沙淤积的监测国内外研究现状
java+mysql车辆管理系统的设计+源代码
乳业同业并购式全产业链...
大众媒体对公共政策制定的影响
酸性水汽提装置总汽提塔设计+CAD图纸
主页
计算机
机械
自动化
关闭菜单
栏目
毕业论文
计算机论文
经济论文
生物论文
数学论文
物理论文
机械论文
新闻传播论文
音乐舞蹈论文
法学论文
文学论文
材料科学
日语论文
英语论文
化学论文
自动化
管理论文
艺术论文
会计论文
土木工程
电子通信
食品科学
教学论文
医学论文
体育论文
论文下载
研究现状
任务书
开题报告
外文文献翻译
文献综述
范文
菜单
毕业论文
刷新
分享
收藏
关于
关闭
关闭
分享本页
返回
关闭
暂无收藏
全部清除
关闭菜单
About
751论文网手机版...
主页:
http://www.751com.cn
关闭
返回