Каковы параметры среды в Apache Pig и Hadoop Connection для запуска обучающих сценариев? - PullRequest
2 голосов
/ 11 ноября 2010

Я пытаюсь запустить скриптовые учебники pig в Ubuntu в течение двух дней, однако мне не удается подключить pig к файловой системе hadoop.Он по-прежнему говорит: «Подключение к файловой системе hadoop по адресу: file: ///»

На самом деле, как работаютoop, так и pig, и я могу их использовать, также сценарий pig при установке pig может подключиться кHadoop.«Подключение к файловой системе hadoop по адресу: hdfs: // localhost: 54310» Мой каталог hadoop находится в / home / hadoop / Cluster, установка pig находится в каталоге / usr / share / pig, руководство pig - home / hadoop / pig и установка hadoopis / home / someuser / hadoop.

Я перепробовал почти все решения в Интернете, но мне все еще нужна помощь.Любая идея будет оценена.

Заранее спасибо.

1 Ответ

2 голосов
/ 10 декабря 2010

Вы должны запустить pig следующим образом:

java -cp /usr/share/pig/pig-0.7.0-core.jar:/home/hadoop/Cluster/conf/ org.apache.pig.Main

Где /home/hadoop/Cluster/conf/ - это каталог конфигурации Hadoop.

Кстати, я думаю, что проще использовать Распределение Clouderaдля Hadoop вместо установки собственного.

...