Azure oozie рабочего

я пытаюсь запустить рабочий процесс oozie на azurehdinsight кластера определение работы выглядит следующим образом:Azure oozie рабочего

<workflow-app xmlns="uri:oozie:workflow:0.2" name="oozie-sqoop"> 
    <start to="sqoop1" /> 
    <action name="sqoop1"> 
    <sqoop xmlns="uri:oozie:sqoop-action:0.4"> 
     <job-tracker>jobtrackerhost:9010</job-tracker> 
     <name-node>wasb://[email protected]</name-node> 
     <configuration> 
     <property> 
      <name>mapred.job.queue.name</name> 
      <value>default</value> 
     </property> 
     </configuration> 
     <arg>import</arg> 
     <arg>--connect</arg> 
     <arg>jdbc:mysql://{ip}/svnadmin</arg> 
     <arg>--username</arg> 
     <arg>uname</arg> 
     <arg>--password</arg> 
     <arg>password</arg> 
     <arg>--table</arg> 
     <arg>rights</arg> 
     <arg>--hive-import</arg> 
    </sqoop> 
    <ok to="end" /> 
    <error to="fail" /> 
    </action> 
    <kill name="fail"> 
    <message>sqoop failed, error message[${wf:errorMessage(wf:lastErrorNode())}]</message> 
    </kill> 
    <end name="end" /> 
</workflow-app>

журнал:

2016-10-04 06:16:06,816 INFO ActionStartXCommand:520 - SERVER[hn0-saint.3oitbdwtly0uzabcmledackovts0a.bx.internal.cloudapp.net] USER[saint] GROUP[-] TOKEN[] APP[oozie-sqoop] JOB[0000015-160928235712742-oozie-oozi-W] ACTION[[email protected]:start:] Start action [[email protected]:start:] with user-retry state : userRetryCount [0], userRetryMax [0], userRetryInterval [10] 
2016-10-04 06:16:06,827 INFO ActionStartXCommand:520 - SERVER[hn0-saint.3oitbdwtly0uzmledackovts0a.bx.internal.cloudapp.net] USER[saint] GROUP[-] TOKEN[] APP[oozie-sqoop] JOB[0000015-160928235712742-oozie-oozi-W] ACTION[[email protected]:start:] [***[email protected]:start:***]Action status=DONE 
2016-10-04 06:16:06,828 INFO ActionStartXCommand:520 - SERVER[hn0-saint.3oitbdwtly0uzmleklasackovts0a.bx.internal.cloudapp.net] USER[saint] GROUP[-] TOKEN[] APP[oozie-sqoop] JOB[0000015-160928235712742-oozie-oozi-W] ACTION[[email protected]:start:] [***[email protected]:start:***]Action updated in DB! 
2016-10-04 06:16:07,508 INFO WorkflowNotificationXCommand:520 - SERVER[hn0-saint.3oitbdxbtly0uzmledackovts0a.bx.internal.cloudapp.net] USER[-] GROUP[-] TOKEN[-] APP[-] JOB[0000015-160928235712742-oozie-oozi-W] ACTION[] No Notification URL is defined. Therefore nothing to notify for job 0000015-160928235712742-oozie-oozi-W

но ничего не Hive импорта. Когда я попробовал то же самое с командой sqoop, он успешно и успешно импортировался в улей. всегда отображается статус бега, и он никогда не меняется на что-либо

источник

2016-10-03 Sudeep C V

Можете ли вы взглянуть на это: http://stackoverflow.com/questions/27740936/oozie-sqoop-action-with-hive-import – YoungHobbit

Я ценю ваши усилия и время, чтобы ответить на этот вопрос. в этой должности все значения; я имею в виду URL-адрес jobtracker и все заменены выражениями; в моем случае я твердо верю, что что-то не так в URL-адресе отслеживания работы или может быть в имени-узле. Я тестировал ту же работу с cloudera, и она работает; –

Похоже, что ваш путь WASB неверен, не уверены, изменили ли вы его на отправку.

Я считаю, что это должно быть, как показано ниже.

<name-node>wasbs://[email protected]</name-node>

У вас не хватает s, пожалуйста, проверьте.

источник

2016-10-04 21:01:29

ответ

Смежные вопросы