如何将一个巨大的zip文件拆分成多个卷？

Question

当我创建zip存档时java.util.zip.*,有没有办法在多个卷中拆分生成的存档？

假设我的整个存档有一个filesize,24 MB我想将它分成3个文件,每个文件的限制为10 MB.
是否有具有此功能的zip API？或者其他任何好方法来实现这一目标？

谢谢索尔斯滕

Answer 1

检查:http://saloon.javaranch.com/cgi-bin/ubb/ultimatebb.cgi？subb = get_topic&f = 38&t = 004618

我不知道任何公共API可以帮助您做到这一点.(虽然如果你不想以编程方式进行,那么像WinSplitter这样的实用程序会这样做)

我没有尝试过,但是,使用ZippedInput/OutputStream时,每个ZipEntry都有一个压缩的大小.在创建压缩文件时,您可能会粗略估计压缩文件的大小.如果您需要2MB的压缩文件,那么在累积的条目大小变为1.9MB后,您可以停止写入文件,对于Manifest文件和其他zip文件特定元素需要.1MB. 因此,简而言之,您可以在ZippedInputStream上编写一个包装器,如下所示:

import java.util.zip.ZipOutputStream;
import java.util.zip.ZipEntry;
import java.io.FileOutputStream;
import java.io.File;
import java.io.FileNotFoundException;
import java.io.IOException;

public class ChunkedZippedOutputStream {

    private ZipOutputStream zipOutputStream;

    private String path;
    private String name;

    private long currentSize;
    private int currentChunkIndex;
    private final long MAX_FILE_SIZE = 16000000; // Whatever size you want
    private final String PART_POSTFIX = ".part.";
    private final String FILE_EXTENSION = ".zip";

    public ChunkedZippedOutputStream(String path, String name) throws FileNotFoundException {
        this.path = path;
        this.name = name;
        constructNewStream();
    }

    public void addEntry(ZipEntry entry) throws IOException {
        long entrySize = entry.getCompressedSize();
        if((currentSize + entrySize) > MAX_FILE_SIZE) {
            closeStream();
            constructNewStream();
        } else {
            currentSize += entrySize;
            zipOutputStream.putNextEntry(entry);
        }
    }

    private void closeStream() throws IOException {
        zipOutputStream.close();
    }

    private void constructNewStream() throws FileNotFoundException {
        zipOutputStream = new ZipOutputStream(new FileOutputStream(new File(path, constructCurrentPartName())));
        currentChunkIndex++;
        currentSize = 0;
    }

    private String constructCurrentPartName() {
        // This will give names is the form of <file_name>.part.0.zip, <file_name>.part.1.zip, etc.
        StringBuilder partNameBuilder = new StringBuilder(name);
        partNameBuilder.append(PART_POSTFIX);
        partNameBuilder.append(currentChunkIndex);
        partNameBuilder.append(FILE_EXTENSION);
        return partNameBuilder.toString();
    }
}

上述程序只是一种方法的暗示,而不是任何方式的最终解决方案.

Answer 2

如果目标是让输出与pkzip和winzip兼容,我不知道有任何开源库可以做到这一点.我们对其中一个应用程序有类似的要求,最后编写了我们自己的实现(与zip标准兼容).如果我记得,对我们来说最困难的事情是我们必须动态生成单个文件(大多数zip实用程序的工作方式是创建大型zip文件,然后返回并稍后拆分 - 这样更容易实施.花了大约一天写,2天调试.

zip标准解释了文件格式的外观.如果你不怕卷起袖子,这绝对可行.您必须自己实现一个zip文件生成器,但是您可以使用Java的Deflator类为压缩数据生成段流.你必须自己生成文件和部分标题,但它们只是字节 - 一旦你潜入就没什么难的.

这是zip规范 - 部分K具有您正在寻找的信息,但您还需要阅读A,B,C和F. 如果你正在处理非常大的文件(我们是),你也必须进入Zip64的东西 - 但对于24 MB,你没事​​.

如果你想潜入并尝试 - 如果你遇到问题,回发后我会看看我是否可以提供一些指示.