数据工厂管道因各种错误而失败
Data Factory Pipeline failed with various errors
我设置了一个 Azure 数据工厂,其中 MongoDB 作为源和 Delta Lake Storage Gen2。
已成功检查所有连接(到源和目标目的地)。但是管道执行失败并出现以下错误:
*ADLS Gen2 操作失败:操作返回无效状态代码 'Forbidden'。帐户:'xxxx'。文件系统:'marketing'。路径:'output/users.txt'。错误代码:'AuthorizationPermissionMismatch'
"errorCode": "2200", "message": "失败发生在 'Source' 端。ErrorCode=UserErrorTypeInSchemaTableNotSupported,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=无法从模式中获取类型table。这可能是由于缺少 Sql 服务器系统 CLR
"errorCode": "2200", "message": "'Sink' 端发生故障。ErrorCode=UserErrorSchemaMappingCannotInferSinkColumnType,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=列的数据类型'xx'无法从第一行数据中推断出来,请在副本activity的映射或DataSet的结构中指定其数据类型
*
有什么办法可以解决这些错误吗?
错误“*ADLS Gen2 操作失败:操作返回无效状态代码 'Forbidden'。帐户:'xxxx'。文件系统:'marketing'。路径:'output/users.txt' . 错误代码:'AuthorizationPermissionMismatch'"
指出管道在 ADLS Gen2 上没有所需的权限。请仔细阅读此文档:https://docs.microsoft.com/en-us/azure/storage/blobs/data-lake-storage-access-control.
请注意,在 GEN2 中,权限更细化,因此何时检查 ADF 上的连接 UI 我无法捕捉到。
让我知道进展如何。
谢谢
喜满树
我设置了一个 Azure 数据工厂,其中 MongoDB 作为源和 Delta Lake Storage Gen2。 已成功检查所有连接(到源和目标目的地)。但是管道执行失败并出现以下错误:
*ADLS Gen2 操作失败:操作返回无效状态代码 'Forbidden'。帐户:'xxxx'。文件系统:'marketing'。路径:'output/users.txt'。错误代码:'AuthorizationPermissionMismatch'
"errorCode": "2200", "message": "失败发生在 'Source' 端。ErrorCode=UserErrorTypeInSchemaTableNotSupported,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=无法从模式中获取类型table。这可能是由于缺少 Sql 服务器系统 CLR
"errorCode": "2200", "message": "'Sink' 端发生故障。ErrorCode=UserErrorSchemaMappingCannotInferSinkColumnType,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=列的数据类型'xx'无法从第一行数据中推断出来,请在副本activity的映射或DataSet的结构中指定其数据类型 *
有什么办法可以解决这些错误吗?
错误“*ADLS Gen2 操作失败:操作返回无效状态代码 'Forbidden'。帐户:'xxxx'。文件系统:'marketing'。路径:'output/users.txt' . 错误代码:'AuthorizationPermissionMismatch'"
指出管道在 ADLS Gen2 上没有所需的权限。请仔细阅读此文档:https://docs.microsoft.com/en-us/azure/storage/blobs/data-lake-storage-access-control.
请注意,在 GEN2 中,权限更细化,因此何时检查 ADF 上的连接 UI 我无法捕捉到。
让我知道进展如何。
谢谢 喜满树