配置envrstudio的变量hadoop\u流

lfapxunr  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(325)

我已经在hortonhadoop上安装了rstudio3.1。
当前我的hadoop streaming env变量是使用以下路径设置的export hadoop\u streaming=/usr/lib/hadoop mapreduce/hadoop-streaming.jar
我在使用rstudio执行简单mapreduce时遇到错误
hadoop.streaming()中出错:请确保env。已设置变量hadoop\u流
谁能告诉我hadoop流jar文件的正确路径是什么?谢谢。

j0pj023g

j0pj023g1#

这取决于您在哪里安装了hadoop库,例如,如果您使用的是cloudera发行版,则可以在r中使用以下内容:

Sys.setenv(HADOOP_STREAMING = "/opt/cloudera/parcels/CDH-5.1.3-1.cdh5.1.3.p0.12/lib/hadoop-mapreduce/hadoop-streaming.jar")

相关问题