hadoop 使用python将文件从本地系统上传到Ambari Apache上

50pmv0ei  于 2022-11-01  发布在  Hadoop
关注(0)|答案(1)|浏览(190)

我想上传我的一个csv文件每天在Ambari Apache上。我已经尝试manuplating多个解决方案可在线上传谷歌和其他等效平台的文件。我也尝试了像sftp的方法来帮助我实现它,但仍然没有找到一个解决方案。请推荐任何提示,想法或方法,我应该如何实现它。

bzzcjhmw

bzzcjhmw1#

有一个Ambari方法可以做到这一点。你可以在ambari中创建一个可以运行的custom service。这将使你能够让ambari自包含代码并执行它。开箱即用的Ambari在技术上不会运行脚本,您必须在主/从模式下运行它,但您可以通过在ambari上运行代理并将其设置为从模式来解决此问题。您可以只在一个从属服务器上安装此服务,并让它将相应的文件推/拉到Ambari。
还有其他人只在一台机器上实现了这一点,你可以搜索他们如何确保它只在一台机器上运行。

相关问题