来自 S3 的 CSV 文件的数据屏蔽
Data masking of CSV files from S3
我的公司在德国工作,我们有一些处理数据的规则。
我的存储桶中有 CSV 文件。这些文件也有一些 PII(公开身份信息)和非 PII 数据。我想屏蔽 PII 数据并将其保存在同一个存储桶中。我想在做最后报告时揭开它。
通常情况下,在 AWS 中,在存储桶内的文件夹级别设置权限比在存储桶级别设置权限要困难得多。由于存储桶基本上是免费的,我建议为 PII 和屏蔽的 PII 数据设置单独的存储桶。
更好的解决方案可能是使用 Athena 视图公开屏蔽的 PII 数据。使用 SQL 构建视图以屏蔽 PII 数据并将该屏蔽视图公开给您的用户。这样您就不需要维护数据的两个副本、屏蔽数据的 ETL 作业或存储桶权限。
我的公司在德国工作,我们有一些处理数据的规则。
我的存储桶中有 CSV 文件。这些文件也有一些 PII(公开身份信息)和非 PII 数据。我想屏蔽 PII 数据并将其保存在同一个存储桶中。我想在做最后报告时揭开它。
通常情况下,在 AWS 中,在存储桶内的文件夹级别设置权限比在存储桶级别设置权限要困难得多。由于存储桶基本上是免费的,我建议为 PII 和屏蔽的 PII 数据设置单独的存储桶。
更好的解决方案可能是使用 Athena 视图公开屏蔽的 PII 数据。使用 SQL 构建视图以屏蔽 PII 数据并将该屏蔽视图公开给您的用户。这样您就不需要维护数据的两个副本、屏蔽数据的 ETL 作业或存储桶权限。