初识hadoop框架及hadoop1.x 与hadoop2.x的区别
2016-06-28 07:56
190 查看
今天,小编带大家初识hadoop的相关知识及架构!
第二种方式为永久改变主机名,开机不变
并行计算框架:mapreduce
Yarh:资源管理平台,任务调度器(2.2.0),hdfs(2.2.0内存扩展)
计算同,管理不同
Hbase:实时分布数据库
Zookeeper协助hbase工作,有时间同步的要求
Hive:文件管理,提供接口(类似sql语句;转换成mapreduce,)
Pig:动态语言,转成mapreduce
Namenode扩展到2个,
Hdoop1.x守护进程,如下:
Map:分散 reduce:规约
开发人员只需要编写map,reduce函数,即可在hadoop上按着指定的业务逻辑运行程序,简单方便!
第二种方式为永久改变主机名,开机不变
并行计算框架:mapreduce
Yarh:资源管理平台,任务调度器(2.2.0),hdfs(2.2.0内存扩展)
计算同,管理不同
Hbase:实时分布数据库
Zookeeper协助hbase工作,有时间同步的要求
Hive:文件管理,提供接口(类似sql语句;转换成mapreduce,)
Pig:动态语言,转成mapreduce
Namenode扩展到2个,
Hdoop1.x守护进程,如下:
Map:分散 reduce:规约
开发人员只需要编写map,reduce函数,即可在hadoop上按着指定的业务逻辑运行程序,简单方便!
相关文章推荐
- Linux下PHP连接MS SQLServer的办法
- Strata+Hadoop World 北京大会日程发布
- OpenGL学习进程(3)第一课:初始化窗体
- 每天一个Linux命令(61)killall命令
- OpenCV multiple version on Linux ENV script of setting
- Linux - 函数的栈帧
- JBOSS EAP实战(2)-集群、NGINX集成、队列与安全
- JBOSS EAP实战(2)-集群、NGINX集成、队列与安全
- LinuxMint18Beta,NDKr11c,neon-R编译Cocos2dx3.5
- 总结&备忘:history记录的时间
- Tomcat服务器安装、配置、测试
- wd cloud nas for linux
- Linux-粘滞位的使用
- HBase shell 中的十六进制数值表示
- linux hard link和soft link(硬链接和软链接)的简单介绍
- 常用linux命令
- 更换CentOS7的下载源为阿里云
- linux-fork&vfork
- Flume日志收集分层架构应用实践
- Hadoop RPC简单实例