python 的网页抓取元素
Webscraping elements with python
我目前正在使用 beautiful soup 尝试通过网络抓取网站数据,但是 python 模块正在读取页面的源代码。在页面的源代码中,我需要的信息不存在,但是如果我右键单击 chrome 中的页面并检查元素它是。
我想知道 python 模块是否可以从网页而不是源代码中抓取元素
在美丽的汤中,我试图搜索类似的元素,但它们只是没有出现或出现,因为它在源代码中搜索。我也不确定为什么或如何没有出现在那里。
当内容由JavaScript加载时,您无法通过Beautiful Soup获取数据。在这种情况下,使用 Selenium 库,因为它更有用,更方便提取所需的动态内容。
我目前正在使用 beautiful soup 尝试通过网络抓取网站数据,但是 python 模块正在读取页面的源代码。在页面的源代码中,我需要的信息不存在,但是如果我右键单击 chrome 中的页面并检查元素它是。
我想知道 python 模块是否可以从网页而不是源代码中抓取元素
在美丽的汤中,我试图搜索类似的元素,但它们只是没有出现或出现,因为它在源代码中搜索。我也不确定为什么或如何没有出现在那里。
当内容由JavaScript加载时,您无法通过Beautiful Soup获取数据。在这种情况下,使用 Selenium 库,因为它更有用,更方便提取所需的动态内容。