API 未出现在“网络”选项卡的“XHR”部分中,无法抓取网站上列出的所有数据

API is not appearing in the Network Tab's XHR section to scrape all the data listed on the site

提问人:Priyanshu Jha 提问时间:11/5/2023 最后编辑:Priyanshu Jha 更新时间:11/5/2023 访问量:11

问:

也许我正在处理一个我不是专家无法分辨的问题,我可以肯定的是,在检查选项卡的部分时,我曾经获取链接以调用 API 以获取网站上列出的项目的数据。我正在尝试对这个网站做同样的事情 检查在这里 - https://all-spares.com/en/ 但 API 似乎没有出现。Single Page ApplicationNetworkXHR

这是来自产品详细信息页面之一的屏幕截图 -

enter image description here

我也在主页上尝试了相同的方法,但这也没有显示任何相关信息,而且屏幕截图中显示的数据不完整,与该产品的属性不匹配,所以如果您认为我错过了!

一般来说,我想知道是否没有办法获取将数据呈现到前端的 API 端点,如果是这样,那么我如何获取此类网站的数据。

任何帮助都受到高度赞赏,我试图让它尽可能保持开放,这是一个简单的报废问题,否则我将不得不通过从 HTML 中提取数据来抓取每个产品的整个网站,那将是一场噩梦!Selenium

selenium-webdriver 网页抓取浏览器 自动化 单页应用程序

评论


答: 暂无答案