emrfs一致性视图与hudi一起启用时出错

flvtvl50  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(230)

环境:emr集群(5.29.0)中启用了emrfs一致性,dynamodb和s3都启用了kms
我们正在探索hudi的插入和插入操作。在将数据插入hudi分区表时,我们得到下面提到的错误(当生成多个分区文件时)
error:error:retryinvocationhandler:调用consistencycheckers3filesystem.open over null时发生异常。休眠35000ms后重试。com.amazon.wa.emr.hadoop.fs.consistency.exception.consistencyexception:文件“<file\u path>/”的元数据中的etag。hoodie\u partition\u metadata”与s3中的etag不匹配!
有什么帮助或建议吗?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题