第一章 遇见HADOOP 第三节 查询你所拥有的所有数据
2016-02-23 14:17
267 查看
MapReduce采用的方式看起来很暴力。前提是整个数据集合--至少大部分--可以被查询处理。
但是这就是它的能力。MapReduce是一个批处理查询处理器,并且在一个合理的时间内得到
查询结果。它改变了你对数据的想象方式,把以前存放在磁带和硬盘上的数据解放出来。他给
了人们一个与数据一起创新的机会。
例如,Mailtrust,Rackspace(全球三大云计算中心之一)的邮件部门,使用HADOOP来处理
邮件日志。他们写了一个特殊的查询用来查看他们用户的地理分布情况。他们说:
这些数据非常有用,随着我们的成长,我们计划让MapReduce任务每个月执行一次,然后我们
根据结果数据来帮助我们决定增加Rackspace哪个地区的服务器。
通过把几百G的数据放在一起并通过工具分析它,Rackspace的工程师们可以得到他们以前从来
没有过的对数据理解,进一步的,他们可以通过他们已经学到的东西来提升对他们客户的服务水平。
但是这就是它的能力。MapReduce是一个批处理查询处理器,并且在一个合理的时间内得到
查询结果。它改变了你对数据的想象方式,把以前存放在磁带和硬盘上的数据解放出来。他给
了人们一个与数据一起创新的机会。
例如,Mailtrust,Rackspace(全球三大云计算中心之一)的邮件部门,使用HADOOP来处理
邮件日志。他们写了一个特殊的查询用来查看他们用户的地理分布情况。他们说:
这些数据非常有用,随着我们的成长,我们计划让MapReduce任务每个月执行一次,然后我们
根据结果数据来帮助我们决定增加Rackspace哪个地区的服务器。
通过把几百G的数据放在一起并通过工具分析它,Rackspace的工程师们可以得到他们以前从来
没有过的对数据理解,进一步的,他们可以通过他们已经学到的东西来提升对他们客户的服务水平。
相关文章推荐
- linux挂载windows共享目录
- Centos 6.4 安装flume
- nginx增加modsecurity模块
- nginx学习汇总
- 一个可以控制提示框显示为top,bottom,left,right的小方法
- #关于apache POI 对Excel的下载 遇到的几个问题总结
- Centos 6.5 安装配置Mysql MHA
- Apache Spark1.2.0 集群环境搭建
- apache 配置
- Powershell 命令集 cmdlets
- CentOS7.0分布式安装HADOOP 2.6.0笔记
- centos6.5下忘记mysql密码
- 学习linux计划书
- 【FAQ】Linux、Mac上把时间戳转化成可读时间命令不一样?
- maven tomcat plugin实现热部署
- 嵌入式linux pthread_create() 出现segmentation fault。
- Apache Maven 入门篇(下)
- 小白在windows7下安装hadoop2.6.4(单机模式和伪分布式)
- Apache Maven 入门篇 ( 上 )
- openlayer2常用功能