如何在使用 Azure 副本 activity 将数据从 CSV 文件复制到镶木地板时处理数据编码问题?
how to handle the data encoding issue while copying the data from CSV file to parquet using Azure copy activity?
我有一个 CSV 文件,我想将其转换为 parquet CSV 文件在一列中包含值 Querý
所以我正在使用来自 Azure 数据工厂的使用副本 activity 并转换为镶木地板,但我得到的值为 Queryý。我在水槽中找不到任何编码选项。我看过一些文档,但所有内容都是关于 CSV 文件结尾的。有人可以帮忙吗?
无法在 Azure 数据工厂中设置 parquet 的编码。
我创建了一个管道进行测试,它可以正常工作。
以下是一些问题排查建议:
- 确保您的 csv 文件的编码正确。
- 确保您的 Parquet 架构正确。
我有一个 CSV 文件,我想将其转换为 parquet CSV 文件在一列中包含值 Querý
所以我正在使用来自 Azure 数据工厂的使用副本 activity 并转换为镶木地板,但我得到的值为 Queryý。我在水槽中找不到任何编码选项。我看过一些文档,但所有内容都是关于 CSV 文件结尾的。有人可以帮忙吗?
无法在 Azure 数据工厂中设置 parquet 的编码。
我创建了一个管道进行测试,它可以正常工作。
以下是一些问题排查建议:
- 确保您的 csv 文件的编码正确。
- 确保您的 Parquet 架构正确。