如何仅在 Azure SQL 数据库中加载新添加的文件
How to load only newly added file in Azure SQL DB
我正在尝试使用副本 activity 将数据从 csv 文件加载到 Azure SQL 数据库。首先,我将三个文件从 blob 存储加载到 Azure SQL 数据库。然后再次将三个新文件上传到 blob 存储,现在我只想将新添加的文件加载到 azure sql db。文件名采用这种格式:“student_index_date”,其中索引是从 1-6,我必须使用这个索引。
您可以使用Getmetadata activity获取子项列表,然后根据最新修改的dt过滤最新文件,并将其用作副本activity.
我正在尝试使用副本 activity 将数据从 csv 文件加载到 Azure SQL 数据库。首先,我将三个文件从 blob 存储加载到 Azure SQL 数据库。然后再次将三个新文件上传到 blob 存储,现在我只想将新添加的文件加载到 azure sql db。文件名采用这种格式:“student_index_date”,其中索引是从 1-6,我必须使用这个索引。
您可以使用Getmetadata activity获取子项列表,然后根据最新修改的dt过滤最新文件,并将其用作副本activity.