hadoop基础组件介绍
2017-09-08 15:53
204 查看
hadoop 的核心
HDFS: Hadoop Distributed File System 分布式文件系统
YARN: Yet Another Resource Negotiator 资源管理调度系统
Mapreduce：分布式运算框架
主从结构
主节点，namenode
从节点，有很多个: datanode
namenode负责：
接收用户操作请求
维护文件系统的目录结构
管理文件与block之间关系，block与datanode之间关系
datanode负责：
存储文件
文件被分成block存储在磁盘上
为保证数据安全，文件会有多个副本
HDFS: Hadoop Distributed File System 分布式文件系统
YARN: Yet Another Resource Negotiator 资源管理调度系统
Mapreduce：分布式运算框架
主从结构
主节点，namenode
从节点，有很多个: datanode
namenode负责：
接收用户操作请求
维护文件系统的目录结构
管理文件与block之间关系，block与datanode之间关系
datanode负责：
存储文件
文件被分成block存储在磁盘上
为保证数据安全，文件会有多个副本
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- Hadoop基础教程-第9章 HA高可用（9.1 HDFS 高可用介绍）（草稿）
- L15.2 zabbix基础(2)组件说明介绍
- Hadoop基础教程-第10章 HBase：Hadoop数据库（10.1 NoSQL介绍）（草稿）
- hadoop生态系统常见组件介绍以及入门书籍
- 【ZZ】大数据架构师基础：hadoop家族，Cloudera系列产品介绍
- Hadoop组件，(ETL数据清洗)Pig，Sqoop文件搬运工具基础操作
- 大数据架构师基础：hadoop家族，Cloudera系列产品介绍
- unity3d基础教程—组件介绍1
- （4）Android入门——android四大组件基础介绍及打电话，发短信简单应用 &单元测试
- Android基础_1 四大基本组件介绍与生命周期
- echarts组件及基础名词介绍
- Android基础之四大基本组件介绍与生命周期
- Slickflow.NET 开源工作流引擎基础介绍(二) -- 引擎组件和业务系统的集成
- 【android基础一】Android四大基本组件介绍与生命周期
- 四，android四大组件基础介绍及打电话，发短信简单应用 &单元测试
- Android基础 Android四大基本组件介绍与生命周期
- Hadoop基础教程-第5章 YARN：资源调度平台（5.1 YARN介绍）（草稿）
- hadoop 各个组件介绍
- hadoop基础概念之Hadoop核心组件
- Cloudera Hadoop开源组件Sentry：为金融、政府、医疗保健使用hadoop打下基础