Стартовая проблема с одним узлом Hadoop - PullRequest
0 голосов
/ 25 августа 2018

Я пытаюсь вызвать автономный сервер hadoop (в aws), выполнив файл start-dfs.sh, но получил следующую ошибку

Starting namenodes on [ip-xxx-xx-xxx-xx]
ip-xxx-xx-xxx-xx: Permission denied (publickey).
Starting datanodes
localhost: Permission denied (publickey).
Exception in thread "main" java.lang.UnsupportedClassVersionError: org/apache/hadoop/hdfs/tools/GetConf : Unsupported major.minor version 52.0
        at java.lang.ClassLoader.defineClass1(Native Method)
        at java.lang.ClassLoader.defineClass(ClassLoader.java:808)
        at java.security.SecureClassLoader.defineClass(SecureClassLoader.java:142)
        at java.net.URLClassLoader.defineClass(URLClassLoader.java:442)
        at java.net.URLClassLoader.access$100(URLClassLoader.java:64)
        at java.net.URLClassLoader$1.run(URLClassLoader.java:354)
        at java.net.URLClassLoader$1.run(URLClassLoader.java:348)
        at java.security.AccessController.doPrivileged(Native Method)
        at java.net.URLClassLoader.findClass(URLClassLoader.java:347)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:430)
        at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:323)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:363)
        at sun.launcher.LauncherHelper.checkAndLoadMain(LauncherHelper.java:482)

Установленная версия Java javac 1.7.0_181 Hadoop 3.0.3.

Ниже приведено содержимое пути в файле профиля

export JAVA_HOME=/usr
export PATH=$PATH:$JAVA_HOME/bin

export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$HADOOP_HOME/bin

export HADOOP_CONF_DIR=/usr/local/hadoop/etc/hadoop
#export PATH=$PATH:$HADOOP_CONF_DIR

export SCALA_HOME=/usr/local/scala
export PATH=$PATH:$SCALA_HOME/bin

В чем проблема?Есть ли что-то, что я пропускаю?

спасибо

1 Ответ

0 голосов
/ 25 августа 2018

SSH-серийник

2. Будет запрошено местоположение папки, в которую будут копироваться ключи, я ввел /home/hadoop/.ssh/id_rsa

3.Это запросит парольную фразу, для простоты оставьте ее пустой.

  1. cat /home/hadoop/.ssh/id_rsa.pub .>> ssh/authorized_keys (Чтобы скопировать сгенерированный открытый ключ в файл авторизации в вашей домашней папке пользователя / .ssh)

ssh localhost не следует запрашивать пароль

start-dfs.sh (теперь должно работать!)

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...