如何在 zip 流下载中流式传输 zip?
How can I stream a zip in a zip stream download?
我希望能够存档(zip,不需要压缩,但这是一个优点),
在内存中并流式传输,问题是我想在
中创建一个内部压缩
我正在播放的 zip,如下所示:
文件:
a.txt, b.txt, c.txt
流式下载应该如下所示:
my.zip {
a.txt
inner.zip {
b.txt, c.txt
}
}
注意,我必须流式传输文件,因为我没有可用的高清存储空间而且我无法将所有文件都存储在内存中 要么(这就是为什么我要播放它们)
这是我设法开始工作的普通 zip 流(还没有内部 zip 流):
<?php
require 'ZipStream.php';
$zip = new ZipStream\ZipStream('my.zip');
$zip->addFileFromPath('a.txt', 'a.txt');
// I want to add inner.zip here and stream it too only from memory
$zip->finish();
您可以 运行 一个小示例,看看使用 ZipArchive
是否可以帮助您解决这个问题。
在示例的根目录中创建 3 个名为 a,b,c
的空 .txt
文件。
PHP
function RandomString($file)
{
$characters = '0123456789abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ ';
$randstring = file_get_contents($file);
for ($i = 0; $i < 2000000; $i++) {
$randstring .= $characters[rand(0, strlen($characters))];
}
file_put_contents($file,$randstring);
return true;
}
// fill the 3 files with data up to 2Mb per run
RandomString("a.txt");
RandomString("b.txt");
RandomString("c.txt");
$zip = new ZipArchive;
$res = $zip->open('inner.zip', ZipArchive::CREATE);
if ($res === TRUE) {
$zip->addFile('b.txt', 'b.txt');
$zip->addFile('c.txt', 'c.txt');
$zip->close();
$resMy = $zip->open('my.zip', ZipArchive::CREATE);
if ($resMy === TRUE) {
$zip->addFile('a.txt', 'a.txt');
$zip->addFile('inner.zip', $contents);
$zip->close();
unlink('inner.zip');
$file_name = basename("my.zip");
header("Content-Type: application/zip");
header("Content-Disposition: attachment; filename=$file_name");
header("Content-Length: " . filesize("my.zip"));
readfile("my.zip");
unlink("my.zip");
exit;
} else {
echo 'failed to create my.zip';
}
} else {
echo 'failed to create inner.zip';
}
以上示例已经过测试,对于 3 个文件中的 55Mb 数据,输出 生成的 是一个约 300Kb.
的 zip 文件
嗯,这种作品。尽管我决定以另一种方式解决问题,但我还是想 post 它。但仅供将来参考,这可能对某些人有帮助。
<?php
$zip_header_outer = "\x1f\x8b\x08\x08i\xbb\xb9X\x00\xffinner.zip\x00";
$zip_header_inner = "\x1F\x8B\x08\x08\x69\xBB\xB9\x58\x00\xFF";
$compression_level = 0;
$download_headers = true;
$download_file_name = 'my.zip';
$inner_file_name = 'inner.zip';
$first_level_file = 'a.txt';
$second_level_file = 'b.txt';
$fout = fopen("php://output", "wb");
if ($fout === FALSE) {
die('Problem outputting');
}
if ($download_headers) {
header("Content-type: application/octet-stream");
header("Content-Disposition: attachment; filename=\"" . $download_file_name . "\"");
}
function add_to_inner_zip($filename, $path, &$fout, &$fsize_outer, &$hctx_outer) {
$zip_header_inner = "\x1F\x8B\x08\x08\x69\xBB\xB9\x58\x00\xFF";
fwrite($fout, $zip_header_inner);
hash_update($hctx_outer, $zip_header_inner);
$fsize_outer += strlen($zip_header_inner);
$hctx_inner = hash_init("crc32b");
$fsize_inner = 0;
// Inner Add file name
$file_name = str_replace("[=10=]", "", basename($filename));
$data = $file_name."[=10=]";
fwrite($fout, $data, 1+strlen($data));
hash_update($hctx_outer, $data);
$fsize_outer += strlen($data);
// Start inner.zip contents
// Inner Add file data * STREAM CHUNKS HERE *
$file_data = file_get_contents($path);
$clen = strlen($file_data);
hash_update($hctx_inner, $file_data);
$fsize_inner += $clen;
/*hash_update($hctx_member, $file_data);
$fsize_member += $clen;*/
// Actually encode the chunk and add to the main stream
$gziped_chunk = zlib_encode($file_data, ZLIB_ENCODING_RAW);
fwrite($fout, $gziped_chunk);
hash_update($hctx_outer, $gziped_chunk);
$fsize_outer += strlen($gziped_chunk);
// Close the inner zip
$crc = hash_final($hctx_inner, TRUE);
$zip_footer = $crc[3].$crc[2].$crc[1].$crc[0] . pack("V", $fsize_inner);
fwrite($fout, $zip_footer);
// update outer crc + size
hash_update($hctx_outer, $zip_footer);
$fsize_outer += strlen($zip_footer);
}
// Outer
fwrite($fout, $zip_header_outer);
$fltr_outer = stream_filter_append($fout, "zlib.deflate", STREAM_FILTER_WRITE, $compression_level);
$hctx_outer = hash_init("crc32b");
$fsize_outer = 0;
add_to_inner_zip($first_level_file, $first_level_file, $fout, $fsize_outer, $hctx_outer);
stream_filter_remove($fltr_outer);
$crc = hash_final($hctx_outer, TRUE);
fwrite($fout, $crc[3].$crc[2].$crc[1].$crc[0], 4);
fwrite($fout, pack("V", $fsize_outer), 4);
另外,我知道代码很烂,而且很老套——但情况需要它:P
我希望能够存档(zip,不需要压缩,但这是一个优点),
在内存中并流式传输,问题是我想在
中创建一个内部压缩
我正在播放的 zip,如下所示:
文件:
a.txt, b.txt, c.txt
流式下载应该如下所示:
my.zip {
a.txt
inner.zip {
b.txt, c.txt
}
}
注意,我必须流式传输文件,因为我没有可用的高清存储空间而且我无法将所有文件都存储在内存中 要么(这就是为什么我要播放它们)
这是我设法开始工作的普通 zip 流(还没有内部 zip 流):
<?php
require 'ZipStream.php';
$zip = new ZipStream\ZipStream('my.zip');
$zip->addFileFromPath('a.txt', 'a.txt');
// I want to add inner.zip here and stream it too only from memory
$zip->finish();
您可以 运行 一个小示例,看看使用 ZipArchive
是否可以帮助您解决这个问题。
在示例的根目录中创建 3 个名为 a,b,c
的空 .txt
文件。
PHP
function RandomString($file)
{
$characters = '0123456789abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ ';
$randstring = file_get_contents($file);
for ($i = 0; $i < 2000000; $i++) {
$randstring .= $characters[rand(0, strlen($characters))];
}
file_put_contents($file,$randstring);
return true;
}
// fill the 3 files with data up to 2Mb per run
RandomString("a.txt");
RandomString("b.txt");
RandomString("c.txt");
$zip = new ZipArchive;
$res = $zip->open('inner.zip', ZipArchive::CREATE);
if ($res === TRUE) {
$zip->addFile('b.txt', 'b.txt');
$zip->addFile('c.txt', 'c.txt');
$zip->close();
$resMy = $zip->open('my.zip', ZipArchive::CREATE);
if ($resMy === TRUE) {
$zip->addFile('a.txt', 'a.txt');
$zip->addFile('inner.zip', $contents);
$zip->close();
unlink('inner.zip');
$file_name = basename("my.zip");
header("Content-Type: application/zip");
header("Content-Disposition: attachment; filename=$file_name");
header("Content-Length: " . filesize("my.zip"));
readfile("my.zip");
unlink("my.zip");
exit;
} else {
echo 'failed to create my.zip';
}
} else {
echo 'failed to create inner.zip';
}
以上示例已经过测试,对于 3 个文件中的 55Mb 数据,输出 生成的 是一个约 300Kb.
的 zip 文件嗯,这种作品。尽管我决定以另一种方式解决问题,但我还是想 post 它。但仅供将来参考,这可能对某些人有帮助。
<?php
$zip_header_outer = "\x1f\x8b\x08\x08i\xbb\xb9X\x00\xffinner.zip\x00";
$zip_header_inner = "\x1F\x8B\x08\x08\x69\xBB\xB9\x58\x00\xFF";
$compression_level = 0;
$download_headers = true;
$download_file_name = 'my.zip';
$inner_file_name = 'inner.zip';
$first_level_file = 'a.txt';
$second_level_file = 'b.txt';
$fout = fopen("php://output", "wb");
if ($fout === FALSE) {
die('Problem outputting');
}
if ($download_headers) {
header("Content-type: application/octet-stream");
header("Content-Disposition: attachment; filename=\"" . $download_file_name . "\"");
}
function add_to_inner_zip($filename, $path, &$fout, &$fsize_outer, &$hctx_outer) {
$zip_header_inner = "\x1F\x8B\x08\x08\x69\xBB\xB9\x58\x00\xFF";
fwrite($fout, $zip_header_inner);
hash_update($hctx_outer, $zip_header_inner);
$fsize_outer += strlen($zip_header_inner);
$hctx_inner = hash_init("crc32b");
$fsize_inner = 0;
// Inner Add file name
$file_name = str_replace("[=10=]", "", basename($filename));
$data = $file_name."[=10=]";
fwrite($fout, $data, 1+strlen($data));
hash_update($hctx_outer, $data);
$fsize_outer += strlen($data);
// Start inner.zip contents
// Inner Add file data * STREAM CHUNKS HERE *
$file_data = file_get_contents($path);
$clen = strlen($file_data);
hash_update($hctx_inner, $file_data);
$fsize_inner += $clen;
/*hash_update($hctx_member, $file_data);
$fsize_member += $clen;*/
// Actually encode the chunk and add to the main stream
$gziped_chunk = zlib_encode($file_data, ZLIB_ENCODING_RAW);
fwrite($fout, $gziped_chunk);
hash_update($hctx_outer, $gziped_chunk);
$fsize_outer += strlen($gziped_chunk);
// Close the inner zip
$crc = hash_final($hctx_inner, TRUE);
$zip_footer = $crc[3].$crc[2].$crc[1].$crc[0] . pack("V", $fsize_inner);
fwrite($fout, $zip_footer);
// update outer crc + size
hash_update($hctx_outer, $zip_footer);
$fsize_outer += strlen($zip_footer);
}
// Outer
fwrite($fout, $zip_header_outer);
$fltr_outer = stream_filter_append($fout, "zlib.deflate", STREAM_FILTER_WRITE, $compression_level);
$hctx_outer = hash_init("crc32b");
$fsize_outer = 0;
add_to_inner_zip($first_level_file, $first_level_file, $fout, $fsize_outer, $hctx_outer);
stream_filter_remove($fltr_outer);
$crc = hash_final($hctx_outer, TRUE);
fwrite($fout, $crc[3].$crc[2].$crc[1].$crc[0], 4);
fwrite($fout, pack("V", $fsize_outer), 4);
另外,我知道代码很烂,而且很老套——但情况需要它:P