oozie pig操作启动错误

byqmnocz  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(465)

我正在尝试做非常基本的oozie工作流
当我发出命令时,我得到了下面的错误。。

user@ubuntu:~/surender$ oozie job -oozie http://localhost:11000/oozie /home/user/surender/oozie_demo/job.properties -run

错误:

Error: E0501 : E0501: Could not perform authorization operation, Failed on local exception: java.io.EOFException; Host Details : local host is: "ubuntu/127.0.0.1"; destination host is: "localhost":8020;

我的oozie版本是4.0.0,我检查了oozie web控制台是否启用。。
这就是创建oozie工作流的方式
我创建了一个名为oozie\u demo的目录,并在其中创建了两个文件

1.workflow.xml
    2.job.properties

我还创建了一个lib目录,并将pig脚本放在该lib目录中
工作流.xml

<workflow-app xmlns="uri:oozie:workflow:0.2" name="pig-wf"> 
<start to="pig-node"/> 
 <action name="pig-node"> 
     <pig> 
        <job-tracker>${jobTracker}</job-tracker> 
         <name-node>${nameNode}</name-node> 
        <prepare> 
            <delete path="${nameNode}/user/${wf:user()}/output/pig/simple_load"/> 
        </prepare> 
        <configuration> 
            <property> 
               <name>mapred.job.queue.name</name> 
              <value>${queueName}</value> 
           </property> 
            <property> 
                 <name>mapred.compress.map.output</name> 
                <value>true</value> 
            </property> 
         </configuration> 
        <script>simple_load.pig</script> 
        <param>INPUT=/user/${wf:user()}/inputfiles/records.txt</param> 
       <param>OUTPUT=/user/${wf:user()}//output/pig/simple_load</param> 
     </pig> 
    <ok to="end"/> 
   <error to="fail"/> 
 </action> 
<kill name="fail"> 
    <message>Pig failed,     error                                                                                    message[${wf:errorMessage(wf:lastErrorNode())}]</message> 
    </kill> 
     <end name="end"/> 
    </workflow-app>

作业属性

nameNode=hdfs://localhost:8020
    jobTracker=localhost:8021
    queueName=default  
    oozie_demo=oozie_demo 
    oozie.use.system.libpath=true
    ozie.wf.application.path=${nameNode}/user/user/oozie_demo

我的Pig剧本:

records = load '/user/user/inputfiles/records.txt' USING PigStorage(',');

  store records into '/user/user/output/pig/simple_load' using PigStorage(',');

有人能帮我吗?我想知道出了什么问题?我该如何解决这个问题?

bzzcjhmw

bzzcjhmw1#

你能检查一下namenode是否在端口8020上运行吗。

相关问题