Hadoop实战——如何获取当前Map对象所在的block id
2016-06-10 00:39
357 查看
如题，或者获取split ID in the mapfunction。
=========================================
InputSplit is = context.getInputSplit();
splitId = MD5Hash.digest(is.toString()).toString();
-------------------------------------------------------------------
lastSplit = reporter.getInputSplit();
splitId = MD5Hash.digest(lastSplit.toString()).toString();
=========================================
InputSplit is = context.getInputSplit();
splitId = MD5Hash.digest(is.toString()).toString();
-------------------------------------------------------------------
lastSplit = reporter.getInputSplit();
splitId = MD5Hash.digest(lastSplit.toString()).toString();
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- Dr.Elephant的安装及使用
- apache服务器的安装与使用
- Linux下安装配置JDK
- maven项目下tomcat直接启动不了（LifecycleException）。报错如下截图
- 增加网站的访问速度
- Linux git 安装
- 对象 类 元类 类的梳理
- Nginx 常用全局变量 及Rewrite规则详解
- Linux中如何使用gThumb批量调整图片大小
- 第19课：Spark Streaming架构设计和运行机制大总结
- nginx 如何绑定域名
- nginx 启动、重启、关闭
- mac 使用“终端”远程登录 linux 主机
- Apache 配置里面使用 Win32DisableAcceptEx ，Apache 启动不了
- windows下Apache 内存耗尽假死显现
- 浅谈Web网站架构演变过程
- SELinux 对nginx访问目录的影响
- Hadoop on Yarn 各组件详细原理
- Linux搭建Maven环境
- Linux搭建SVN客户端