Hadoop: TaskTracker завершает работу сразу после start-all.sh

Question

Я использую Hadoop 1.0.1 в Ubuntu 11.10.

. / Бен / start-all.sh

Команда

не выдает никаких ошибок, но TaskTracker не запускается со следующей ошибкой в ​​файле tasktracker.log:

ОШИБКА org.apache.hadoop.mapred.TaskTracker: Невозможно запустить отслеживание задач, поскольку java.util.ConcurrentModificationException

at java.util.AbstractList$Itr.checkForComodification(AbstractList.java:372)
at java.util.AbstractList$Itr.next(AbstractList.java:343)
at org.apache.hadoop.mapred.TaskTracker$LocalStorage.checkDirs(TaskTracker.java:211)
at org.apache.hadoop.mapred.TaskTracker.<init>(TaskTracker.java:1447)
at org.apache.hadoop.mapred.TaskTracker.main(TaskTracker.java:3716)

Как мне решить эту проблему?

Answer 1

Посмотрите на этот ответ: https://stackoverflow.com/a/6280989

Answer 2

Попробуйте сначала запустить dfs с start-dfs.sh, затем MapReduce с start-mapred.sh Давайте посмотрим, какой процесс на самом деле вызывает ошибку.