ts / js 中是否有使用异步迭代器的目录遍历器?
Is there any directory walker in ts / js using an async iterator?
我在 npm 上发现了很多 walker,但 none 使用的是异步迭代器。
他们中的大多数人要么使用回调,要么使用导致巨大目录内存泄漏的承诺。
是否有最近使用以下模式的库:
async function* walk(dirPath) {
// some magic…
yield filePath;
}
然后像这样使用它:
for await (const filePath of walk('/dir/path')) {
console.log('file path', filePath);
}
好吧,我只是使用同步 readdir 制作了这个 walker,它非常快并且内存效率高,我在大约 3 分钟内列出了 250 万个条目,没有任何内存泄漏。
import path from 'path';
import fs, {Dirent} from 'fs';
function* walk(path:string):IterableIterator<string> {
const entries:Dirent[] = fs.readdirSync(path, {withFileTypes: true});
for (const entry of entries) {
const entryPath:() => string = () => `${path}/${entry.name}`;
if (entry.isFile()) {
yield entryPath();
}
if (entry.isDirectory()) {
yield* walk(entryPath());
}
}
}
用法示例:
for (const path of walk(directoryPath)) {
console.log(path);
}
我在 npm 上发现了很多 walker,但 none 使用的是异步迭代器。 他们中的大多数人要么使用回调,要么使用导致巨大目录内存泄漏的承诺。
是否有最近使用以下模式的库:
async function* walk(dirPath) {
// some magic…
yield filePath;
}
然后像这样使用它:
for await (const filePath of walk('/dir/path')) {
console.log('file path', filePath);
}
好吧,我只是使用同步 readdir 制作了这个 walker,它非常快并且内存效率高,我在大约 3 分钟内列出了 250 万个条目,没有任何内存泄漏。
import path from 'path';
import fs, {Dirent} from 'fs';
function* walk(path:string):IterableIterator<string> {
const entries:Dirent[] = fs.readdirSync(path, {withFileTypes: true});
for (const entry of entries) {
const entryPath:() => string = () => `${path}/${entry.name}`;
if (entry.isFile()) {
yield entryPath();
}
if (entry.isDirectory()) {
yield* walk(entryPath());
}
}
}
用法示例:
for (const path of walk(directoryPath)) {
console.log(path);
}