Сбой действия оболочки Oozie - PullRequest
0 голосов
/ 16 мая 2018

Я пытаюсь проверить действие оболочки oozie в моем cloudera vm (quickstart vm). При запуске простого скрипта команды hdfs (hadoop fs -put ...) он работает, но когда я запускаю скрипт улья, задание oozie завершается со статусом "KILLED" . На oozie consol я получаю только сообщение об ошибке

"Основной класс [org.apache.oozie.action.hadoop.ShellMain], код выхода [1]"

Пока базовое задание на сервере истории (журналы узлов имен) поступает как УСПЕШНО. Ниже приведены подробные сведения о работе:

workflow.xml
<workflow-app xmlns="uri:oozie:workflow:0.5" name="WorkFlow1">
      <start to="shell-node" />
          <action name="shell-node">
        <shell xmlns="uri:oozie:shell-action:0.2">
            <job-tracker>${jobTracker}</job-tracker>
            <name-node>${nameNode}</name-node>
            <configuration>
                <property>
                    <name>mapred.job.queue.name</name>
                    <value>${queueName}</value>
                </property>
            </configuration>
            <exec>${myscript}</exec>
            <file>${myscriptpath}#${myscript}</file>
            <capture-output/>
        </shell>
        <ok to="end"/>
        <error to="fail"/>
    </action>
        <kill name="fail">
          <message>Workflow failed, error
            message[${wf:errorMessage(wf:lastErrorNode())}] </message>
        </kill>
        <end name="end" />
</workflow-app>
------------------------------------
job.properties
nameNode=hdfs://quickstart.cloudera:8020
jobTracker=hdfs://quickstart.cloudera:8032
queueName=default
myscript=test.sh
myscriptpath=${nameNode}/oozie/sl/test.sh
oozie.use.system.libpath=true
oozie.wf.application.path=${nameNode}/oozie/sl/
workflowAppUri=${nameNode}/oozie/sl/
-----------------------------------------------
test.sh
hive -e "create table test2 as select * from test"

Буду очень признателен, если кто-нибудь подскажет мне, в каком направлении я ошибаюсь.

1 Ответ

0 голосов
/ 16 мая 2018

Было бы хорошо, если бы вы взглянули на действие Улья Уси.

Его довольно легко настроить. Действие улья позаботится об установке всего.

https://oozie.apache.org/docs/4.3.0/DG_HiveActionExtension.html

Чтобы подключить куст, вам нужно явно добавить файл hive-site.xml или сведения о сервере Hive для подключения.

...