Nutch 2.1 - сбой задания исключения во время выполнения задания генератора

Я получаю следующую ошибку, когда пытаюсь сгенерировать URL-адреса с помощью команды generate:

GeneratorJob: java.lang.RuntimeException: задание не выполнено: name=generate: 1357474131-234134646, jobid=job_local_0001 в org.apache.nutch.util.NutchJob.waitForCompletion(NutchJob.java:54) в org.apache.nutch.crawl. GeneratorJob.run(GeneratorJob.java:191) в org.apache.nutch.crawl.GeneratorJob.generate(GeneratorJob.java:213) в org.apache.nutch.crawl.GeneratorJob.run(GeneratorJob.java:241) в org. .apache.hadoop.util.ToolRunner.run(ToolRunner.java:65) на org.apache.nutch.crawl.GeneratorJob.main(GeneratorJob.java:249)

generate, fetch и parse работали нормально, но updatedb раньше иногда выдавал эту ошибку:

Исключение в потоке «основной» java.lang.RuntimeException: задание не выполнено: имя = таблица обновления, jobid = job_local_0001 в org.apache.nutch.util.NutchJob.waitForCompletion (NutchJob.java:54) в org.apache.nutch. Crawl.DbUpdaterJob.run(DbUpdaterJob.java:98) в org.apache.nutch.crawl.DbUpdaterJob.updateTable(DbUpdaterJob.java:105) в org.apache.nutch.crawl.DbUpdaterJob.run(DbUpdaterJob.java:119) в org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65) в org.apache.nutch.crawl.DbUpdaterJob.main(DbUpdaterJob.java:123)

Теперь он постоянно дает ошибку создания задания. В чем может быть проблема? Может ли это быть проблемой mysql?


person peter    schedule 06.01.2013    source источник


Ответы (1)


Вышеупомянутые ошибки связаны с нехваткой места в разделе на сервере, на котором я установил . проверьте ответ на Недостаточно места для файла общей памяти, когда я пытаюсь запустить команду nutch generate

person peter    schedule 24.01.2013