【Linux相关】linux大文件分割与合并

前言

近日由于网上下载了很多图片，然后花了很长一段时间进行压缩，压缩完成后一看，128G多，由于机器在远程，本来想通过百度网盘进行备份，后来提示最大单个文件只能4G大小，无奈只能手动切割大文件。

查了相关命令，发现可以通过组合split命令和cat命令来实现：

split 命令

　　功能说明：切割文件。

　　语　　法：split [–help][–version][-<行数>][-b <字节>][-C <字节>][-l <行数>][要切割的文件][输出文件名]

　　补充说明：split可将文件切成较小的文件，预设每1000行会切成一个小文件。

　　参　　数：

　　-<行数>或-l<行数> 　指定每多少行就要切成一个小文件。

　　-b<字节> 　指定每多少字就要切成一个小文件。支持单位:m,k

　　-C<字节> 　与-b参数类似，但切割时尽量维持每行的完整性。

　　–help 　显示帮助。

　　–version 　显示版本信息。

　　[输出文件名] 　设置切割后文件的前置文件名，split会自动在前置文件名后再加上编号。

　　使用例子：

　　split -b 100m filename

cat命令

cat主要有三大功能： 

1.一次显示整个文件。$ cat filename

2.从键盘创建一个文件。$ cat > filename

3.将几个文件合并为一个文件： $cat file1 file2 > file

这里主要用到第三个功能，当然cat命令最常用的应该是显示了。

具体命令

split -b 3500m vgg.tar.gz vgg_split/split_

cat vgg_split/split_* >vgg.tar.gz

1
2
3
4
1
2
3
4

通过这样就可以实现简单的大文件的分割与合并。