有没有可能一次将我的hadoop集群连接到多个google云项目？
我可以通过googlecloud storage connector轻松地使用单个google项目中的任何google存储桶，这在将50tb数据从本地hadoop集群迁移到google云存储的线程中进行了解释。但我找不到任何文档或示例如何从一个map reduce作业连接到两个或多个google云项目。你有什么建议/窍门吗？
谢谢。
有没有可能一次将我的hadoop集群连接到多个google云项目？
我可以通过googlecloud storage connector轻松地使用单个google项目中的任何google存储桶，这在将50tb数据从本地hadoop集群迁移到google云存储的线程中进行了解释。但我找不到任何文档或示例如何从一个map reduce作业连接到两个或多个google云项目。你有什么建议/窍门吗？
谢谢。
1条答案
按热度按时间4dc9hkyq1#
实际上，可以同时将集群连接到多个不同项目的bucket。最后，如果您使用的是服务帐户密钥文件的使用说明，那么gcs请求将代表该服务帐户执行，该服务帐户或多或少可以像其他用户一样处理。您可以通过电子邮件添加服务帐户
your-service-account-email@developer.gserviceaccount.com使用permissions在cloud.google.com/console中，只需像任何其他成员一样添加该电子邮件地址，或者您可以设置gcs级别的访问权限，像任何其他用户一样添加该服务帐户。