linux下数据压缩的几种方法与查看方式

linux下数据压缩的几种方法与查看方式,第1张

1. tar命令

使用tar程序打出来的包我们常称为tar包. tar包文件的命令通常都是以.tar结尾的。生成tar包后. 就可以用其它的程序来进行压缩了. tar命令本身不进行数据压缩. 但可以在打包或解包的同时调用其它的压缩程序. 比如调用gzip、bzip2

    选项:

-c 创建.tar格式包文件

-x 解开.tar格式包文件

-v显示详细信息

-f 使用归档文件

-p 保留原始文件权限

-C 解压到目标文件夹

-z 调用gzip进行压缩或解压

-j 调用bzip2进行压缩或解压

    打包示例: 

  tar -cvf /blog/uouo123/com.tar bb.txt 打包文件

    打包并压缩示例:

tar -zcvf /blog/uouo123/com.tar.gz bb.txt 压缩文件

    解压缩示例:

tar -zxvf /blog/uouo123/com.tar.gz -C /com/bb 解压文件

2. gzip压缩

    常用数据压缩命令. 压缩比例可手工调整.   压缩后文件名 filename.gz:

        注:压缩后文件可直接load至hive数据库. 但每个文件只会产生一个map. 查询效率极低

选项:

-c 将输出写到标准输出上. 并保留原有文件。

-d 将压缩文件解压。

-l 对每个压缩文件. 显示下列字段:

压缩文件的大小;未压缩文件的大小;压缩比;未压缩文件的名字

-r 递归式地查找指定目录并压缩其中的所有文件或者是解压缩。

-t 测试. 检查压缩文件是否完整。

-v 对每一个压缩和解压的文件. 显示文件名和压缩比。

-num 用指定的数字 num 调整压缩的速度. -1 或 --fast 表示最快压缩方法(低压缩比).

-9 或--best表示最慢压缩方法(高压缩比)。系统缺省值为 6。

压缩示例:

gzip filename

    查看gzip压缩文件内容命令:     

    zcat filename.gz

     解压缩命令:

gzip -d filename.gz

    压缩过程中可控制压缩率(1-9). 1压缩最快. 压缩率不高. 9压缩最慢. 压缩比例最高. 缺省为6. 例如:

    gzip -9 filename

3. bzip2压缩

    常用数据压缩命令. 压缩比例比gzip高. 压缩后文件名为filename.bz2

        注:压缩后文件可直接load至hive数据库

    选项

-c或——stdout:将压缩与解压缩的结果送到标准输出;

-d或——decompress:执行解压缩;

-f或-force:bzip2在压缩或解压缩时. 若输出文件与现有文件同名. 预设不会覆盖现有文件。若要覆盖。请使用此参数;

-h或——help:在线帮助;

-k或——keep:bzip2在压缩或解压缩后. 会删除原始文件。若要保留原始文件. 请使用此参数;

-s或——small:降低程序执行时内存的使用量;

-t或——test:测试.bz2压缩文件的完整性;

-v或——verbose:压缩或解压缩文件时. 显示详细的信息;

-z或——compress:强制执行压缩;

-V或——version:显示版本信息;

--repetitive-best:若文件中有重复出现的资料时. 可利用此参数提高压缩效果;

--repetitive-fast:若文件中有重复出现的资料时. 可利用此参数加快执行效果。

    压缩示例:

    bzip2 filename

    解压缩示例:

    bzip2 -d filename.bz2

    直接查看压缩文件示例:     

    bzcat filename.bz2

使用默认压缩情况下压缩性能:

    bzip2 >gzip >tar

可使用unzip命令解压

示例:

压缩包名称为 test.zip

unzip test.zip

功能说明:压缩文件。

语法:zip [-AcdDfFghjJKlLmoqrSTuvVwXyz$][-b <工 作目录>][-ll][-n <字 尾字符串>][-t <日 期时间>][-<压 缩效率>][压 缩文件][文件...][-i <范本样式>][-x <范本样式>]

补充说明:zip是个使用广泛的压缩程序,文件经它压缩后会另外产生具 有".zip"扩展名 的压缩文件。

参数:

-A 调 整可执行的自动解压缩文件。

-b<工作目录> 指 定暂时存放文件的目录。

-c 替 每个被压缩的文件加上注释。

-d 从 压缩文件内删除指定的文件。

-D 压 缩文件内不建立目录名称。

-f 此 参数的效果和指定"-u"参 数类似,但不仅更新既有文件,如果某些文件原本不存在于压缩文件内,使用本参数会一并将其加入压缩文件中。

-F 尝 试修复已损坏的压缩文件。

-g 将 文件压缩后附加在既有的压缩文件之后,而非另行建立新的压缩文件。

-h 在 线帮助。

-i<范本样式> 只 压缩符合条件的文件。

-j 只 保存文件名称及其内容,而不存放任何目录名称。

-J 删 除压缩文件前面不必要的数据。

-k 使 用MS-DOS兼容格 式的文件名称。

-l 压 缩文件时,把LF字符 置换成LF+CR字 符。

-ll 压 缩文件时,把LF+CR字 符置换成LF字符。

-L 显 示版权信息。

-m 将 文件压缩并加入压缩文件后,删除原始文件,即把文件移到压缩文件中。

-n<字尾字符串> 不 压缩具有特定字尾字符串的文件。

-o 以 压缩文件内拥有最新更改时间的文件为准,将压缩文件的更改时间设成和该文件相同。

-q 不显 示指令执行过程。

-r 递 归处理,将指定目录下的所有文件和子目录一并处理。

-S 包 含系统和隐藏文件。

-t<日期时间> 把 压缩文件的日期设成指定的日期。

-T 检 查备份文件内的每个文件是否正确无误。

-u 更 换较新的文件到压缩文件内。

-v 显 示指令执行过程或显示版本信息。

-V 保 存VMS *** 作系统的文 件属性。

-w 在 文件名称里假如版本编号,本参数仅在VMS *** 作系统下有效。

-x<范本样式> 压 缩时排除符合条件的文件。

-X 不 保存额外的文件属性。

-y 直 接保存符号连接,而非该连接所指向的文件,本参数仅在UNIX之 类的系统下有效。

-z 替 压缩文件加上注释。

-$ 保 存第一个被压缩文件所在磁盘的卷册名称。

-<压缩效率> 压 缩效率是一个介于1-9的 数值。

例子

例1. 压缩test.MYI

[root@mysql test]# zip test1.zip test.MYI

adding: test.MYI (deflated 42%)

[root@mysql test]#ll

-rw-r--r-- 1 rootroot1033755 09-24 10:03 test1.zip


欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/yw/8526176.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2023-04-17
下一篇2023-04-17

发表评论

登录后才能评论

评论列表(0条)

    保存