SnappyData 上的 Theta Sketch (Yahoo)

Question

如何将 Theta Sketch (Yahoo) 存储在 SnappyData 的 table 而不是写入文件？因为我每天生成数十亿张草图，需要将数百万张草图在线保存以供实时查询。谁能帮我？谢谢。

Answer 1

你不能将它们存储在 blob 数据类型的列中吗？ 如果从 spark 程序写出并在 DF 中管理草图，我认为 df.write.format(“column”).saveAsTable 应该可以工作。

否则，序列化 (sketch.compact().toByteArray()) 并使用 sql 存储在 blob 列中。