将文件从一个区域复制到另一个区域 - Azure Data Lake Gen2
Copy file from One Zone to Other - Azure Data Lake Gen2
我想将具有给定路径的文件从 Azure Data Lake 的一个区域复制到 Data Lake 的其他区域。
示例:
来源:/RawZone/Incremental/2020/05/01/file.parquet
目的地:/StdZone/Incremental/2020/05/01/file.parquet
我是否应该使用复制 Activity 将源作为数据集读取并写入目标。或者有没有办法在 Azure 数据工厂.
中将文件从源复制到目标
据我所知,复制 Activity 是唯一的方法。
您将需要一个数据集来定义文件的来源和去向(尽管路径可以参数化)及其格式。
如果您想原封不动地复制文件,请将数据集格式设置为 binary
以避免必须定义文件结构以及 'waste time' 提取和解析其中的数据。
我想将具有给定路径的文件从 Azure Data Lake 的一个区域复制到 Data Lake 的其他区域。
示例:
来源:/RawZone/Incremental/2020/05/01/file.parquet
目的地:/StdZone/Incremental/2020/05/01/file.parquet
我是否应该使用复制 Activity 将源作为数据集读取并写入目标。或者有没有办法在 Azure 数据工厂.
中将文件从源复制到目标据我所知,复制 Activity 是唯一的方法。
您将需要一个数据集来定义文件的来源和去向(尽管路径可以参数化)及其格式。
如果您想原封不动地复制文件,请将数据集格式设置为 binary
以避免必须定义文件结构以及 'waste time' 提取和解析其中的数据。