使用 scrapy 从该网站获取信息的更好方法是什么？

Question

我正在尝试用 scrapy 抓取这个 website，我不得不搜索每个 link 从每个中提取信息，我想知道是否有 API 我可以使用的网站（我不知道如何找到它）。

我也想知道如何获取经纬度？目前显示地图，但我不知道如何获取数字

我很感激任何建议

Answer 1

网站可能正在使用 Javascript 动态加载数据。使用浏览器开发工具并查看网络选项卡，查找可能正在访问 API 的任何 XHR 调用。然后你可以直接从中抓取。