数据事件上的可读流从块中丢失 first/last 个字符

Question

我正在为 nodeJS 使用 ssh2-sftp-client 连接到 sftp 服务器并获取文件但是我遇到了一个问题，当块多于一个时，数据接收不正确，块之间丢失一个字符：
例如：sftp 上的文件有 'some string from sftp file'
如果它被分成块，接收到的数据将是这样的：
第一个块：'some string f'
第二个缝隙：'om sftp file'
在这个例子中 'r' 丢失

const getFile = readable => new Promise((resolve, reject) => {
  let file = '';
   readable.on('data', (chunk) => { file += chunk; }); 
  readable.on('end', () => resolve(file));
  readable.on('error', reject);
});

const readable = await sftp.get(fileName, false);

sftp.get() return NodeJS.ReadableStream

有人遇到同样的问题吗？

Answer 1

将块存储为数组然后将它们连接到缓冲区并在末尾获取字符串值是否更可取：

const fs = require('fs');

const getFile = readable => new Promise((resolve, reject) => {
  const file = [];
  readable.on('data', chunk => file.push(Buffer.from(chunk, 'base64')));
  readable.on('end', () => resolve(Buffer.concat(file).toString()));
  readable.on('error', reject);
});


const readable = fs.createReadStream('package.json');

getFile(readable).then(file => console.log('file', file));

在本地运行并按预期获取文件内容。

Answer 2

经过长时间的研究，我发现了问题，在模块sftp-stream中，可读流的highWaterMark设置为64*1024，错误是如果一个块有64*1024位，则丢失一位。我刚刚将水印设置为 64*1024-1 .

数据事件上的可读流从块中丢失 first/last 个字符

readable stream on data event losing first/last character from chunk

node.js

stream

readable