使用 Java 更新 kafka 中特定主题的 TTL

Question

更新 TTL 主题，以便记录在主题中保留 10 天。我必须只针对特定主题执行此操作，方法是让所有其他主题 TTL 保持相同的当前配置，我必须使用 java 执行此操作，因为我正在通过 [=18= 将主题推送到 kafka ].我正在设置以下属性以将主题推送到 kafka

Properties props = new Properties();
props.put("bootstrap.servers", KAFKA_SERVERS);
props.put("acks", ACKS);
props.put("retries", RETRIES);
props.put("linger.ms", new Integer(LINGER_MS));
props.put("buffer.memory", new Integer(BUFFER_MEMORY));
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

Answer 1

您可以使用 AdminClient 执行此操作，遵循获取当前配置的代码片段（仅用于测试），然后在名为“[的主题上更新“retention.ms”配置=13=]".

Properties props = new Properties();
props.put(AdminClientConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");

AdminClient adminClient = AdminClient.create(props);

ConfigResource resource = new ConfigResource(ConfigResource.Type.TOPIC, "test");

// get the current topic configuration
DescribeConfigsResult describeConfigsResult  =
        adminClient.describeConfigs(Collections.singleton(resource));

Map<ConfigResource, Config> config = describeConfigsResult.all().get();

System.out.println(config);

// create a new entry for updating the retention.ms value on the same topic
ConfigEntry retentionEntry = new ConfigEntry(TopicConfig.RETENTION_MS_CONFIG, "50000");
Map<ConfigResource, Config> updateConfig = new HashMap<ConfigResource, Config>();
updateConfig.put(resource, new Config(Collections.singleton(retentionEntry)));

AlterConfigsResult alterConfigsResult = adminClient.alterConfigs(updateConfig);
alterConfigsResult.all();

describeConfigsResult  = adminClient.describeConfigs(Collections.singleton(resource));

config = describeConfigsResult.all().get();

System.out.println(config);

adminClient.close();

使用 Java 更新 kafka 中特定主题的 TTL

Update TTL for a particular topic in kafka using Java

java

apache-kafka

kafka-producer-api