etcd3 Go Client - 如何对大量键进行分页？

Question

似乎通过大量键进行分页涉及对 Get() 使用 WithFromKey() 和 WithLimit() 选项。例如，如果我想获取 2 页，每页 10 个项目，我会这样做：

opts := []clientv3.OpOption {
    clientv3.WithPrefix(),
    clientv3.WithSort(clientv3.SortByKey, clientv3.SortAscend),
    clientv3.WithLimit(10),
}

gr, err := kv.Get(ctx, "key", opts...)
if err != nil {
    log.Fatal(err)
}

fmt.Println("--- First page ---")
for _, item := range gr.Kvs {
    fmt.Println(string(item.Key), string(item.Key))
}

lastKey := string(gr.Kvs[len(gr.Kvs)-1].Value)

fmt.Println("--- Second page ---")
opts = append(opts, clientv3.WithFromKey())
gr, _ = kv.Get(ctx, lastKey, opts...)

// Skipping the first item, which the last item from from the previous Get
for _, item := range gr.Kvs[1:] {
    fmt.Println(string(item.Key), string(item.Value))
}

问题是最后一个键作为第二页的第一项再次获取，我需要跳过，只有 9 个新项目。

这是分页的正确方法还是我遗漏了什么？

Answer 1

查看以下 clientv3 代码，可以通过将 0x00 附加到最后一个密钥来计算下一个密钥。

https://github.com/coreos/etcd/blob/88acced1cd7ad670001d1280b97de4fe7b647687/clientv3/op.go#L353

也就是说，我更喜欢忽略第 2 页和后续页面中的第一个键。

etcd3 Go Client - 如何对大量键进行分页？

etcd3 Go Client - How to paginate large sets of keys?

go

etcd3