StormCrawler 从 1.6 升级到 1.8

Question

我在尝试切换到 SC 1.8 时遇到以下错误（我之前使用的是 1.6）。我已经按照推荐安装了 Storm 1.2.1、ES 6.2.2，调整了 ES 配置和我的 ES 种子注入器拓扑。但是，当我启动它时，我得到的是：

4845 [Thread-34-enqueue-executor[5 5]] ERROR c.d.s.e.p.StatusUpdaterBolt - Can't connect to ElasticSearch
java.lang.IllegalArgumentException: no hosts provided
        at org.elasticsearch.client.RestClientBuilder.<init>(RestClientBuilder.java:69) ~[patent-crawler-1.8.jar:?]
        at org.elasticsearch.client.RestClient.builder(RestClient.java:120) ~[patent-crawler-1.8.jar:?]
        at com.digitalpebble.stormcrawler.elasticsearch.ElasticSearchConnection.getClient(ElasticSearchConnection.java:96) ~[patent-crawler-1.8.jar:?]
        at com.digitalpebble.stormcrawler.elasticsearch.ElasticSearchConnection.getConnection(ElasticSearchConnection.java:166) ~[patent-crawler-1.8.jar:?]
        at com.digitalpebble.stormcrawler.elasticsearch.persistence.StatusUpdaterBolt.prepare(StatusUpdaterBolt.java:141) [patent-crawler-1.8.jar:?]
        at org.apache.storm.daemon.executor$fn__5043$fn__5056.invoke(executor.clj:803) [storm-core-1.2.1.jar:1.2.1]
        at org.apache.storm.util$async_loop$fn__557.invoke(util.clj:482) [storm-core-1.2.1.jar:1.2.1]
        at clojure.lang.AFn.run(AFn.java:22) [clojure-1.7.0.jar:?]
        at java.lang.Thread.run(Thread.java:748) [?:1.8.0_161]

有人遇到过类似的问题吗？谢谢！

Answer 1

您在 es.status.addresses 的配置中有什么？旧值应该兼容

Answer 2

抱歉，我的错误，我在我的 ES yaml 中使用 copy/paste 太快了。我为所有索引复制了索引器条目 (es.indexer.addresses)... 现在它工作正常。谢谢朱利安的提示！

StormCrawler 从 1.6 升级到 1.8

StormCrawler moving from 1.6 to 1.8

web-crawler

stormcrawler