如何从 JS 中的 ArrayBuffer 写入文件

Question

我正在尝试为 Meteor 框架编写一个文件上传器。原理是将客户端上的文件从 ArrayBuffer 拆分成 4096 位的小包，通过 Meteor.method.

发送到服务器

下面的简化代码是客户端向服务器发送一个chunk的部分，一直重复直到offset达到data.byteLength :

// data is an ArrayBuffer
var total = data.byteLength;
var offset = 0;

var upload = function() {
  var length = 4096; // chunk size

  // adjust the last chunk size
  if (offset + length > total) {
     length = total - offset;
  }

  // I am using Uint8Array to create the chunk
  // because it can be passed to the Meteor.method natively
  var chunk = new Uint8Array(data, offset, length);

  if (offset < total) {
     // Send the chunk to the server and tell it what file to append to
     Meteor.call('uploadFileData', fileId, chunk, function (err, length) {
        if (!err) {
          offset += length;
          upload();
        }
     }
  }
};
upload(); // start uploading

下面的简化代码是服务器上接收块并将其写入文件系统的部分：

var fs = Npm.require('fs');
var Future = Npm.require('fibers/future');

Meteor.methods({
  uploadFileData: function(fileId, chunk) {
    var fut = new Future();
    var path = '/uploads/' + fileId;

    // I tried that with no success
    chunk = String.fromCharCode.apply(null, chunk);

    // how to write the chunk that is an Uint8Array to the disk ?
    fs.appendFile(path, chunk, 'binary', function (err) {
      if (err) {
        fut.throw(err);
      } else {
        fut.return(chunk.length);
      }
    });
    return fut.wait();
  }
});

我未能将有效文件写入磁盘，实际上文件已保存但我无法打开它，当我在文本编辑器中看到内容时，它类似于原始文件（例如jpg）但是有些字符不同，我认为这可能是编码问题，因为文件大小不一样，但我不知道如何解决...

Answer 1

保存文件就像使用 Uint8Array 对象创建新缓冲区一样简单：

// chunk is the Uint8Array object
fs.appendFile(path, Buffer.from(chunk), function (err) {
    if (err) {
      fut.throw(err);
    } else {
      fut.return(chunk.length);
    }
});

Answer 2

只是想在较新的 Meteor 中添加，您可以使用 async/await 避免一些回调地狱。 Await 也会抛出错误并将错误推送给客户端

Meteor.methods({
  uploadFileData: async function(file_id, chunk) {
    var path = 'somepath/' + file_id; // be careful with this, make sure to sanitize file_id
    await fs.appendFile(path, new Buffer(chunk));
    return chunk.length;
  }
});

Answer 3

在的基础上，这对我有用，在任何框架之外：

fs.appendFileSync(outfile, Buffer.from(arrayBuffer));

如何从 JS 中的 ArrayBuffer 写入文件

How to write a file from an ArrayBuffer in JS

javascript

node.js

file-upload

meteor

arraybuffer