Azure WebJobs 与 DataFactory

Azure WebJobs Vs DataFactory

对于 analytic/reports 特定项目,我需要从 Web API 响应中提取数据到 Azure SQL Table / Azure Data Lake。 我对使用 WebJobs 与 DataFactory 进行数据摄取感到困惑。

我应该使用 Azure SQL Table 还是 Azure Data Lake?

Azure SQL 数据库是一个 SQL 服务器。 Azure Data Lake 可以看作是一个 "infinite" HDD。 选择将取决于您希望存储和使用数据的方式,以及数据量。 如果你需要存储大量的结构化数据,你还应该考虑 Azure SQL Datawarehouse.

要摄取数据,您有多种解决方案。你可以看看这个 link : - https://docs.microsoft.com/en-us/azure/data-factory/data-factory-azure-copy-wizard - https://docs.microsoft.com/en-us/azure/azure-functions/functions-compare-logic-apps-ms-flow-webjobs

Azure 数据工厂旨在加载大量数据(数百万条记录)。