灯火互联
管理员
管理员
  • 注册日期2011-07-27
  • 发帖数41778
  • QQ
  • 火币41290枚
  • 粉丝1086
  • 关注100
  • 终身成就奖
  • 最爱沙发
  • 忠实会员
  • 灌水天才奖
  • 贴图大师奖
  • 原创先锋奖
  • 特殊贡献奖
  • 宣传大使奖
  • 优秀斑竹奖
  • 社区明星
阅读:1577回复:0

linux分割大文件(tar+split)分卷打包的使用

楼主#
更多 发布于:2012-08-27 14:58

在Linux下使用 tar 命令来将文件打包并压缩是很通常的用法了。可是Linux的文件系统对文件大小有限制,也就是说一个文件最大不能超过2G,如果压缩包的的内容很大,最后的结果就会超过2G,那么该怎么办呢?又或者压缩包希望通过光盘来进行备份,而每张光盘的容量只有700M,那么该如何存储呢?解决的办法就是将最后的压缩包按照指定大小进行分割,这就需要用到split命令了。

举例说明:
要将目录logs打包压缩并分割成多个1M的文件,可以用下面的命令:
tar cjf - logs/ |split -b 1m - logs.tar.bz  www.atcpu.com  

完成后会产生下列文件:

-rw-r–r– 1 httpd nobody 1048576 Oct 5 15:37 logs.tar.bz2.aa
-rw-r–r– 1 httpd nobody 1048576 Oct 5 15:37 logs.tar.bz2.ab
-rw-r–r– 1 httpd nobody 1048576 Oct 5 15:37 logs.tar.bz2.ac
-rw-r–r– 1 httpd nobody 1048576 Oct 5 15:38 logs.tar.bz2.ad
-rw-r–r– 1 httpd nobody 1048576 Oct 5 15:38 logs.tar.bz2.ae
-rw-r–r– 1 httpd nobody 829440 Oct 5 15:39 logs.tar.bz2.af

这里对命令做一些讲解。
压缩和分割命令行中红色部分的为命令对应的I/O文件名参数,其中-表示标准输入或输出。那么结合上面的例子,tar命令表示的意思就是将logs目录压缩,生成的结果直接输送到标准输出上;而split命令表示从标准输入获得文件内容进行分割,结果文件前缀为logs.tar.bz2.。二者再通过管道将各自的标准输入输出对接起来。

linux split 命令
  功能说明:切割文件。
  语  法:split [--help][--version][-<行数>][-b <字节>][-C <字节>][-l <行数>][要切割的文件][输出文件名]  www.atcpu.com  
  补充说明:split可将文件切成较小的文件,预设每1000行会切成一个小文件。
  参  数:
  -<行数>或-l<行数>  指定每多少行就要切成一个小文件。
  -b<字节>  指定每多少字就要切成一个小文件。支持单位:m,k
  -C<字节>  与-b参数类似,但切割时尽量维持每行的完整性。
  --help  显示帮助。
  --version  显示版本信息。
  [输出文件名]  设置切割后文件的前置文件名,split会自动在前置文件名后再加上编号。
  使用例子:
  split -b 100m filename


喜欢0 评分0
游客

返回顶部