您的位置:首页 > 运维架构

初识hadoop框架及hadoop1.x 与hadoop2.x的区别

2016-06-28 07:56 190 查看
今天,小编带大家初识hadoop的相关知识及架构!

第二种方式为永久改变主机名,开机不变

并行计算框架:mapreduce

Yarh:资源管理平台,任务调度器(2.2.0),hdfs(2.2.0内存扩展)

计算同,管理不同

 

Hbase:实时分布数据库

Zookeeper协助hbase工作,有时间同步的要求

Hive:文件管理,提供接口(类似sql语句;转换成mapreduce,)

Pig:动态语言,转成mapreduce

Namenode扩展到2个,

Hdoop1.x守护进程,如下:

Map:分散   reduce:规约

开发人员只需要编写map,reduce函数,即可在hadoop上按着指定的业务逻辑运行程序,简单方便!
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: