以 bcolz 格式保存 dask 数据帧

Question

dask 文档指出："BColz is an on-disk, chunked, compressed, column-store. These attributes make it very attractive for dask.dataframe which can operate particularly well on it. There is a special from_bcolz function."

但是，我找不到如何将 dask 数据帧保存 到 bcolz 的示例。推荐的方法是什么？

Answer 1

我创建了一个拉取请求来实现它。在合并到主分支之前，您可以在这里找到它：

https://github.com/dask/dask/pull/1386

如果你不想编辑自己的 Dask 实现，你可以只复制 to_bcolz 方法。