巨型文件去重行
2015-07-17 17:44
106 查看
split -l 1000000 infile for f in x*; do sort -u "$f" > "$f"_sorted done sort -u x*_sorted > final.out
相关文章推荐
- formValidator向struts2 ajax传参验证
- 算法策略的总结
- vim如何在多个文件中切换
- php程序效率优化的一些策略小结
- UOJ#61. 【UR #5】怎样更有力气
- 优化Android Studio/Gradle构建
- 简单解析Django框架中的表单验证
- Tornado异步任务的实现(一)——tornado.httpclient.AsyncHTTPClient
- java 、android内存相关
- java学习之旅62--数组的拷贝_排序_二分法_命令行参数_增强for循环
- iOS如何把导航默认的返回按钮设置成“返回”
- Java 内存分配全面浅析
- Oracle 中的 TO_DATE 和 TO_CHAR 函数 日期处理
- 高清网络摄像机主流芯片方案之安霸、TI和海思对比
- UI_storyboard实现页面回调
- JavaScript 滚动页面到指定元素位置
- Farseer.net轻量级ORM开源框架 V1.3版本升级消息
- spring mvc 伪静态处理
- javascript避免数字计算精度误差的方法
- 互联网协议入门