Я получаю следующую ошибку, когда пытаюсь сгенерировать URL-адреса с помощью команды generate:
GeneratorJob: java.lang.RuntimeException: задание не выполнено: name=generate: 1357474131-234134646, jobid=job_local_0001 в org.apache.nutch.util.NutchJob.waitForCompletion(NutchJob.java:54) в org.apache.nutch.crawl. GeneratorJob.run(GeneratorJob.java:191) в org.apache.nutch.crawl.GeneratorJob.generate(GeneratorJob.java:213) в org.apache.nutch.crawl.GeneratorJob.run(GeneratorJob.java:241) в org. .apache.hadoop.util.ToolRunner.run(ToolRunner.java:65) на org.apache.nutch.crawl.GeneratorJob.main(GeneratorJob.java:249)
generate
, fetch
и parse
работали нормально, но updatedb
раньше иногда выдавал эту ошибку:
Исключение в потоке «основной» java.lang.RuntimeException: задание не выполнено: имя = таблица обновления, jobid = job_local_0001 в org.apache.nutch.util.NutchJob.waitForCompletion (NutchJob.java:54) в org.apache.nutch. Crawl.DbUpdaterJob.run(DbUpdaterJob.java:98) в org.apache.nutch.crawl.DbUpdaterJob.updateTable(DbUpdaterJob.java:105) в org.apache.nutch.crawl.DbUpdaterJob.run(DbUpdaterJob.java:119) в org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65) в org.apache.nutch.crawl.DbUpdaterJob.main(DbUpdaterJob.java:123)
Теперь он постоянно дает ошибку создания задания. В чем может быть проблема? Может ли это быть проблемой mysql?