带有 splash 的 scrapy javascript 不会呈现页面
scrapy javascript with spalsh wont render page
我想抓取this page, I follow 抓取它但它没有呈现网页。
我该如何解决？
我用这个：
scrapy shell 'http://localhost:8050/render.html?url=https://shenoto.com/album
/46321?lang=en&timeout=10&wait=0.5'
而且只是
response.body
但它没有呈现页面。并在页面中仅显示 javascripts。
实际上我想抓取该网站的“application/ld+json”部分，如下图所示。
image
此致
我发现 并修复了渲染问题。
和this post加载ld-json.
我想抓取this page, I follow
我该如何解决？
我用这个：
scrapy shell 'http://localhost:8050/render.html?url=https://shenoto.com/album
/46321?lang=en&timeout=10&wait=0.5'
而且只是
response.body
但它没有呈现页面。并在页面中仅显示 javascripts。
实际上我想抓取该网站的“application/ld+json”部分，如下图所示。
image
此致
我发现
和this post加载ld-json.