使用 TextDecoder/TextEncoder 将 ArrayBuffer 转换为 String 然后返回 ArrayBuffer 返回不同的结果

Question

我有一个 ArrayBuffer，它是通过使用 Frida 读取内存返回的。我正在将 ArrayBuffer 转换为字符串，然后使用 TextDecoder 和 TextEncoder 转换回 ArrayBuffer，但结果在此过程中被更改。解码和重新编码后的 ArrayBuffer 长度总是变大。是否有扩展式的字符解码？

如何在不丢失完整性的情况下将 ArrayBuffer 解码为 String，然后返回 ArrayBuffer？

示例代码：

var arrayBuff = Memory.readByteArray(pointer,2000); //Get a 2,000 byte ArrayBuffer

console.log(arrayBuff.byteLength); //Always returns 2,000

var textDecoder = new TextDecoder("utf-8");
var textEncoder = new TextEncoder("utf-8");

//Decode and encode same data without making any changes
var decoded = textDecoder.decode(arrayBuff);
var encoded = textEncoder.encode(decoded);

console.log(encoded.byteLength); //Fluctuates between but always greater than 2,000

Answer 1

TextDecoder 和 TextEncoder 旨在与 text 配合使用。要将任意字节序列转换为字符串并返回，最好将每个字节视为单个字符。

var arrayBuff = Memory.readByteArray(pointer,2000); //Get a 2,000 byte ArrayBuffer

console.log(arrayBuff.byteLength); //Always returns 2,000

//Decode and encode same data without making any changes
var decoded = String.fromCharCode(...new Uint8Array(arrayBuff));
var encoded = Uint8Array.from([...decoded].map(ch => ch.charCodeAt())).buffer;

console.log(encoded.byteLength);

decoded字符串的长度与输入缓冲区的长度完全相同，可以很容易地使用正则表达式、字符串方法等进行操作。但要注意在内存中占用两个或更多字节的 Unicode 字符 (例如“π”) 将不再可识别，因为它们将导致与每个单独字节的代码相对应的字符串联。

使用 TextDecoder/TextEncoder 将 ArrayBuffer 转换为 String 然后返回 ArrayBuffer 返回不同的结果

Converting ArrayBuffer to String then back to ArrayBuffer using TextDecoder/TextEncoder returning a different result

javascript

arraybuffer