操作失败：“此请求未被授权执行此操作,”在Synapse with a Pyspark Notebook中

mbzjlibv 于 2024-01-06 发布在 Spark

关注(0)|答案(2)|浏览(213)

我尝试执行以下命令行：

mssparkutils.fs.ls("abfss://[email protected]/myfolder/")

字符串
我得到错误：

Py4JJavaError: An error occurred while calling z:mssparkutils.fs.ls.
: java.nio.file.AccessDeniedException: Operation failed: "This request is not authorized to perform this operation.", 403, GET, https://myadfs.dfs.core.windows.net/mycontainer?upn=false&resource=filesystem&maxResults=5000&directory=myfolder&timeout=90&recursive=false, AuthorizationFailure, "This request is not authorized to perform this operation.

型
我遵循了此链接中描述的步骤
通过在容器或文件系统级别授予我和我的Synapse工作区“Storage Blob Data Contributor”角色的访问权限：

的数据

即使这样，我仍然得到这个持久性错误。我错过了其他步骤吗？

pyspark

来源：https://stackoverflow.com/questions/72733433/operation-failed-this-request-is-not-authorized-to-perform-this-operation-in

2条答案

按热度按时间

zvms9eto1#

我在我的环境中得到了同样的错误。我只是按照这个official document并做了复制，现在它对我来说工作正常。你可以按照下面的代码，它会解决你的问题。

示例代码：

from pyspark.sql import SparkSession
account_name = 'your_blob_name'
container_name = 'your_container_name'
relative_path = 'your_folder path'
linked_service_name = 'Your_linked_service_name'
sas_token = mssparkutils.credentials.getConnectionStringOrCreds(linked_service_name)

字符串

的数据

访问Blob存储

path = 'wasbs://%s@%s.blob.core.windows.net/%s' % (container_name,account_name,relative_path)   
spark.conf.set('fs.azure.sas.%s.%s.blob.core.windows.net' % (container_name,account_name),sas_token)
  
print('Remote blob path: ' + path)