如何下载所有提取器以及 RESTful 请求的端点?
How to download all extractors along with the endpoints for RESTful request?
我一直在使用 import.io 从数百个网页中提取大量数据。我已经为这些 URL 创建了提取器,并且还在添加更多。
我设计了一个自动化流程,可以递归地向所有提取器的 import.io RESTful API 发送 HTTP 请求。
每次我创建一个新的提取器时,我都会执行一些手动任务以将新创建的提取器的端点插入到我的数据库中。这种方法非常耗时,并且可能容易出错,因为有可能 copy/paste 出错。
尽管 import.io 保留了我的数据列表,但我很乐意下载所有提取器及其端点以供 RESTful 请求,以便可以将数据存储到我的数据库中。
有没有办法将我的所有数据下载或提取为 excel 格式或其他格式?
恐怕目前无法为所有提取器批量下载 API 端点。
可以使用此方法获取连接器的 GUID。
http://api.docs.import.io/legacy/#ConnectorMethods "search connectors"
例如,您可以在 python 中编写一个小脚本来解析它以获取 GUID。
您可以将其添加到您的自动化流程中。
我一直在使用 import.io 从数百个网页中提取大量数据。我已经为这些 URL 创建了提取器,并且还在添加更多。
我设计了一个自动化流程,可以递归地向所有提取器的 import.io RESTful API 发送 HTTP 请求。
每次我创建一个新的提取器时,我都会执行一些手动任务以将新创建的提取器的端点插入到我的数据库中。这种方法非常耗时,并且可能容易出错,因为有可能 copy/paste 出错。
尽管 import.io 保留了我的数据列表,但我很乐意下载所有提取器及其端点以供 RESTful 请求,以便可以将数据存储到我的数据库中。
有没有办法将我的所有数据下载或提取为 excel 格式或其他格式?
恐怕目前无法为所有提取器批量下载 API 端点。
可以使用此方法获取连接器的 GUID。
http://api.docs.import.io/legacy/#ConnectorMethods "search connectors"
例如,您可以在 python 中编写一个小脚本来解析它以获取 GUID。
您可以将其添加到您的自动化流程中。