如何从 `txn.getAll("Entity")` 方法中获取子集结果?
How to get subset result from `txn.getAll("Entity")` method?
这是获取实体列表的示例代码,例如 Users:
final EntityIterable allUsers = txn.getAll("User); // returns million records for example
for (Entity user: allUsers) {
System.out.println(user.getProperty("fullName"));
}
我的问题是,如果用户存储有数百万条记录,我们如何才能只获取结果的子集?就像有一个 skip 和 limit 是可以通过 Xodus API 实现的,或者我们真的需要对其进行编程以迭代所有条目并且手动分区?在 Xodus 中获取实体子集的最有效和最快的方法是什么?
这是我们试图解决的完整示例实现:
@Override
public List<User> listUsers(String instance, final String storeName, long skip, long limit) {
final List<User> users = new LinkedList<>();
final PersistentEntityStore entityStore = PersistentEntityStores.newInstance(xodusRoot + instance);
try {
entityStore.executeInTransaction(new StoreTransactionalExecutable() {
@Override
public void execute(@NotNull final StoreTransaction txn) {
final EntityIterable allUsers = txn.getAll(storeName);
// TODO: How to skip/limit with 100k to millions of records, efficiently
for (Entity userEntity : allUsers) {
User user = new User();
user.setEntityId((String) userEntity.getId().toString());
user.setUsername((String) userEntity.getProperty("username"));
users.add(user);
}
}
});
} finally {
entityStore.close();
}
return users;
}
只评估txn.getAll(storeName).skip(skip).take(limit)
就够了。您将获得一个 EntityIterable
(Iterable<Entity
) 实例,然后您可以将其转换为用户集合。
这是获取实体列表的示例代码,例如 Users:
final EntityIterable allUsers = txn.getAll("User); // returns million records for example
for (Entity user: allUsers) {
System.out.println(user.getProperty("fullName"));
}
我的问题是,如果用户存储有数百万条记录,我们如何才能只获取结果的子集?就像有一个 skip 和 limit 是可以通过 Xodus API 实现的,或者我们真的需要对其进行编程以迭代所有条目并且手动分区?在 Xodus 中获取实体子集的最有效和最快的方法是什么?
这是我们试图解决的完整示例实现:
@Override
public List<User> listUsers(String instance, final String storeName, long skip, long limit) {
final List<User> users = new LinkedList<>();
final PersistentEntityStore entityStore = PersistentEntityStores.newInstance(xodusRoot + instance);
try {
entityStore.executeInTransaction(new StoreTransactionalExecutable() {
@Override
public void execute(@NotNull final StoreTransaction txn) {
final EntityIterable allUsers = txn.getAll(storeName);
// TODO: How to skip/limit with 100k to millions of records, efficiently
for (Entity userEntity : allUsers) {
User user = new User();
user.setEntityId((String) userEntity.getId().toString());
user.setUsername((String) userEntity.getProperty("username"));
users.add(user);
}
}
});
} finally {
entityStore.close();
}
return users;
}
只评估txn.getAll(storeName).skip(skip).take(limit)
就够了。您将获得一个 EntityIterable
(Iterable<Entity
) 实例,然后您可以将其转换为用户集合。