使用Java中的Zip和GZip文件

Question

自从我完成Java I/O以来已经有一段时间了,我不知道使用Zip和GZip文件的最新"正确"方法.我不一定需要一个完整的工作演示 - 我主要是寻找合适的接口和方法.是的,我可以查看任何关于此的随机教程,但性能是一个问题(这些文件可能变得非常大),我确实关心使用最好的工具.

我将要实施的基本流程:

• 将一堆文件(可能是zipped,gzip或两者)下载到临时文件夹.
• 将所有解压缩的文件添加到临时文件夹中的新zip文件中.

输入文件可能会被压缩和存档多次.例如,"完全提取"应该采取以下任何输入(我无法控制这些输入),并留下foo.txt:

• foo.txt.gz
• foo.txt.zip
• foo.txt.gz.zip
• foo.txt.zip.gz
• ...
• foo.txt.gz.gz.gz.zip.gz.zip.zip.gz.gz
• ...

然后,我可能会留下foo.txt,bar.mp3,baz.exe-所以我只是他们都添加到一个新的zip文件与一些通用的名称.

问题:

• 文件大小是一个潜在的问题,我应该快速使用哪些(接口/类/方法):
  • 提取zip文件？
  • 提取gzip文件？
  • 写zip文件？
• 在写回磁盘之前,我最好将各个提取的文件保存在内存中吗？要么,
• 潜在的大文件是不是一个坏主意？

Answer 1

不要将所有这些未压缩的数据保存在内存中,否则可能会耗尽堆空间.您需要在解压缩时将数据流式传输到文件,然后在要创建最终zip文件时将其从文件中重新流入.

我之前没有完成压缩文件,但这里有一个示例,说明如何解压缩gzip压缩文件:

import java.io.*;
import java.util.zip.*;

//unzipping a gzipped file
GZIPInputStream in = null;
OutputStream out = null;
try {
   in = new GZIPInputStream(new FileInputStream("file.txt.gz"));
   out = new FileOutputStream("file.txt");
   byte[] buf = new byte[1024 * 4];
   int len;
   while ((len = in.read(buf)) > 0) {
       out.write(buf, 0, len);
   }
}
catch (IOException e) {
   e.printStackTrace();
}
finally {
   if (in != null)
       try {
           in.close();
       }
       catch (IOException ignore) {
       }
   if (out != null)
       try {
           out.close();
       }
       catch (IOException ignore) {
       }
}

Answer 2

请注意,TrueZip(下面建议的库)已被TrueVFS取代.

我发现TrueZIP库很有用.它允许您将存档文件视为仅仅是另一个文件系统并使用熟悉的Java I/O API.

与java.util.zip API不同,TrueZIP提供对存档内容的随机访问,因此文件大小不应该是一个问题.如果我没记错的话,它会检测存档文件,而不是在将它们放入存档时尝试对它们进行冗余压缩.

引用TrueZIP页面:

TrueZIP API为众所周知的类File,FileInputStream和FileOutputStream提供了直接替换.这种设计使TrueZIP非常易于使用:为大多数客户端应用程序启用存档所需的只是为de.schlichtherle.io包添加一些import语句,并在需要时添加一些类型转换.

现在,您可以简单地处理存档文件,例如路径名中的目录.例如,路径名"archive.zip/readme"解决ZIP文件"archive.zip"中的归档条目"readme".请注意,文件名后缀是完全可配置的,TrueZIP会自动检测误报,并将其恢复为普通文件或目录.这是递归工作的,因此存档文件甚至可以包含在另一个存档文件中,例如"outer.zip/inner.zip/readme".