我在Azure Synapse中有一个数据管道。管道有一个数据流活动,正在从Azure data Lake Storage Gen 2数据池中的Spark数据库读取数据。然后,数据进入另一个spark数据库。
前几天,当我试图从源spark数据库预览时,我得到了以下错误(数据源名称被屏蔽)。
- 在源“<>”:org.apache.hadoop.hive.ql.metadata。HiveException:MetaException(消息:null)*
这以前工作得很好。
请注意:此管道没有代码更改。
任何想法
1条答案
按热度按时间b09cbbtk1#
确保Spark池配置的
Autoscale
为Enable。您应该尝试增加节点数。
也可以尝试使用更多节点大小。
参考-https://docs.microsoft.com/en-us/answers/questions/706694/unable-to-run-sql-queries-in-azure-synapse-error-o.html