我正在运行Nutch 2.3.1，Mongodb 3.2.9和Elasticsearch 2.4.1。我遵循了本教程的内容：

https://qbox.io/blog/scraping-the-web-with-nutch-for-
elasticsearch

和本教程：

http://www.aossama.com/search-engine-with-apache-nutch-mongodb-and-
elasticsearch/

为了使用上述3个软件创建网络爬网工具。

一切工作都很好，直到可以归结为索引…只要我使用了nutch的index命令，就可以：

# bin/nutch index elasticsearch -all

有时候是这样的：

IndexingJob: starting
Active IndexWriters :
ElasticIndexWriter
        elastic.cluster : elastic prefix cluster
        elastic.host : hostname
        elastic.port : port (default 9300)
        elastic.index : elastic index command
        elastic.max.bulk.docs : ealstic bulk index doc counts. (default 250)
        elastic.max.bulk.size : elastic bulk index length. (default 2500500 ~2.5MB)

IndexingJob: done.

我的nutch-site.xml：

<configuration>
  <property>
    <name>storage.data.store.class</name>
    <value>org.apache.gora.mongodb.store.MongoStore</value>
    <description>Default class for storing data</description>
  </property>
  <property>
    <name>http.agent.name</name>
    <value>AOssama Crawler</value>
  </property>

  <property>
    <name>plugin.includes</name>
    <value>protocol-(http|httpclient)|urlfilter-regex|index-(basic|more)|query-(basic|site|url|lang)|indexer-elastic|nutch-extensionpoints|parse-(text|html|msexcel|msword|mspowerpoint|pdf)|summary-basic|scoring-opic|urlnormalizer-(pass|regex|basic)|parse-(html|tika|metatags)|index-(basic|anchor|more|metadata)</value>
  </property>
  <property>
    <name>elastic.host</name>
    <value>localhost</value>
  </property>

  <property>
    <name>elastic.cluster</name>
    <value>aossama</value>
  </property>

  <property>
    <name>elastic.index</name>
    <value>nutch</value>
  </property>

  <property>
    <name>parser.character.encoding.default</name>
    <value>utf-8</value>
  </property>

  <property>
    <name>http.content.limit</name>
    <value>6553600</value>
  </property>
</configuration>

我还查看了ElasticIndexWriter.java代码，并注意到在第250行附近调用了ElasticIndexWriter的类。我现在正在进一步研究，但是我完全不知道为什么它不适用于Mongo。我将放弃并尝试使用不喜欢的Hbase。

谢谢！

乔