hadoop2.7.1的一些新特性
2016-01-21 16:24
435 查看
最近hadoop版本更替的有些频繁,上个月看的时候是2.7的版本,今天上来的时候2.7.1了,不过现在的版本只是发行版本的一个小版本,不过还是非常兴奋的,下面记录一下:
hadoop2.7.1
1.放弃支持jdk1.6,结合jdk1.7使用
common模块:
1.支持windows azure存储
hdfs:
1.支持文件截断
2.支持配额/存储类型
3.支持可变长的文件块
yarn:
1.使yarn授权变为可插拔的方式
2.自动共享,yarn本地资源的全局缓存(beta)
mapreduce:
1.具有限制运行一个job的task的map/reduce 的能力
2.通过许多输出文件加速一个巨大的任务的输出
具体的内容后续研究透了再继续记录了。
hadoop2.7.1
1.放弃支持jdk1.6,结合jdk1.7使用
common模块:
1.支持windows azure存储
hdfs:
1.支持文件截断
2.支持配额/存储类型
3.支持可变长的文件块
yarn:
1.使yarn授权变为可插拔的方式
2.自动共享,yarn本地资源的全局缓存(beta)
mapreduce:
1.具有限制运行一个job的task的map/reduce 的能力
2.通过许多输出文件加速一个巨大的任务的输出
具体的内容后续研究透了再继续记录了。
相关文章推荐
- linux下安装eclipse开发Spark程序
- linux之多线程fork:进程通信
- Apache的ProxyPass指令详解
- css网站
- Hadoop YARN学习之核心概念(2)
- Hadoop YARN学习之核心概念(2)
- iwebshop 订单存库修改为下单件库存
- 常用资源网站
- OpenCV:Mat元素访问方法、性能
- Linux下mysql数据库的导入导出操作
- Linux下Solr相关配置
- Linux 常用命令之cp
- gitbook学习之--linux下安装gitbook
- Linux下挂载NTFS格式的U盘或硬盘
- maya 2015配置openCollada插件
- Hadoop 2.7.1 使用minicluster进行单元测试
- CentOS6.2永久静态路由的配置
- java特种兵读书笔记(4-4)——java通信之tomcat对IO请求的处理
- Hadoop2.6+HA+Zookeeper3.4.6+Hbase1.0.0安装
- Ubuntu下安装和配置Apache2