我想知道我们是否可以在amazon上设置一个cloudera集群,并在本地linux上启动一个hadoop作业,而不用ssh进入amazon的节点。有没有像客户这样的人来做这种交流?
ecfdbz9o1#
您可以在本地linux中安装hadoop客户机,并在自己的jar中使用“hadoopjar”命令。在命令行中指定mapred.job.tracker选项,客户端会将您的jar推送到jobtracker,并将其复制到将用于此作业的所有tasktracker中。
piztneat2#
以下教程中的提示非常有效。您应该能够在不到20分钟的时间内完成一个工作的hadoop集群,从冷熨斗到生产就绪,只需使用他的指导:hadoop快速启动:20分钟内在云中构建集群真的值得一看。
2条答案
按热度按时间ecfdbz9o1#
您可以在本地linux中安装hadoop客户机,并在自己的jar中使用“hadoopjar”命令。在命令行中指定mapred.job.tracker选项,客户端会将您的jar推送到jobtracker,并将其复制到将用于此作业的所有tasktracker中。
piztneat2#
以下教程中的提示非常有效。您应该能够在不到20分钟的时间内完成一个工作的hadoop集群,从冷熨斗到生产就绪,只需使用他的指导:
hadoop快速启动:20分钟内在云中构建集群
真的值得一看。