Hadoop 3.0.0 Нет папки lib / native.WARN util.NativeCodeLoader - PullRequest
0 голосов
/ 04 июня 2018

Я следовал https://amodernstory.com/2014/09/23/installing-hadoop-on-mac-osx-yosemite/, чтобы установить Hadoop на моем Mac для локальных небольших задач.

Когда hstart / hstop, получаю "WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable"

Попробовал варианты вниже ссылка на переименование папки / пути для lib / native.Переименован с libexec/ на lib/, но ошибки в скриптах, которые libexec должен быть корректными. Hadoop «Невозможно загрузить библиотеку native-hadoop для вашей платформы» предупреждение

Однако в hadoop 3.0.0 структура выглядит следующим образом:

username-local:hadoop me$ pwd
/usr/local/Cellar/hadoop

username-local:hadoop me$ ls
3.0.0   hdfs

username-local:hadoop me$ cd 3.0.0/
username-local:3.0.0 me$ ls
INSTALL_RECEIPT.json    NOTICE.txt      bin         sbin
LICENSE.txt     README.txt      libexec

username-local:3.0.0 me$ cd libexec/
username-local:libexec me$ ls
bin etc libexec logs    sbin    share

username-local:libexec me$ cd libexec/
username-local:libexec me$ pwd
/usr/local/Cellar/hadoop/3.0.0/libexec/libexec
username-local:libexec me$ ls
hadoop-config.sh        hdfs-config.sh          tools
hadoop-functions.sh     mapred-config.sh        yarn-config.sh
hadoop-layout.sh.example    shellprofile.d

username-local:libexec me$ cd ../etc/
username-local:etc me$ ls
hadoop
username-local:etc me$ cd hadoop/
username-local:hadoop me$ ls
capacity-scheduler.xml          httpfs-log4j.properties         mapred-site.xml
configuration.xsl           httpfs-signature.secret         shellprofile.d
container-executor.cfg          httpfs-site.xml             ssl-client.xml.example
core-site.xml               kms-acls.xml                ssl-server.xml.example
hadoop-env.sh               kms-env.sh              user_ec_policies.xml.template
hadoop-metrics2.properties      kms-log4j.properties            workers
hadoop-policy.xml           kms-site.xml                yarn-env.sh
hadoop-user-functions.sh.example    log4j.properties            yarn-site.xml
hdfs-site.xml               mapred-env.sh
httpfs-env.sh               mapred-queues.xml.template
username-local:hadoop me$

Любые идеипожалуйста?Спасибо.

...