提交cloudera上的hadoop作业

klr1opcd  于 2021-06-04  发布在  Hadoop
关注(0)|答案(2)|浏览(435)

我想知道我们是否可以在amazon上设置一个cloudera集群,并在本地linux上启动一个hadoop作业,而不用ssh进入amazon的节点。
有没有像客户这样的人来做这种交流?

ecfdbz9o

ecfdbz9o1#

您可以在本地linux中安装hadoop客户机,并在自己的jar中使用“hadoopjar”命令。在命令行中指定mapred.job.tracker选项,客户端会将您的jar推送到jobtracker,并将其复制到将用于此作业的所有tasktracker中。

piztneat

piztneat2#

以下教程中的提示非常有效。您应该能够在不到20分钟的时间内完成一个工作的hadoop集群,从冷熨斗到生产就绪,只需使用他的指导:
hadoop快速启动:20分钟内在云中构建集群
真的值得一看。

相关问题