我正在使用 python scrapy，尝试在页面上获取 car-name： https://youjia.baidu.com/view/carDatabase?title=%E7%8E%B0%E4...

我有一个带有选择器的选项器，我用它来获取数据：dict for key, selector in selectors.items(): data[key] = response.css(selec...

我正在尝试使用 scrapy 及其 ，特别是此页面来废弃一个网站（“ellenmacarthurfoundation”）：Selector.css 这是网站 这是我试图抓取的网络的 html 我正...

我想截取左侧网站的屏幕截图，它是右侧打开的devtools的xhr。 我的方法有效但非常慢：我尝试使用 selenium 和 pyautogui 来做到这一点。我使用 ctrl+shift+I 打开...

我正在尝试列出 https://bigfuture.collegeboard.org/scholarships/ 的所有奖学金;我能够使用 Selenium 抓取所有链接并将其存储在列表中。但是，Se...

我使用 Scrapy 抓取页面，到目前为止，我在 XPATH 上取得了成功，但我对那个页面有点挣扎。我正在尝试获取dimensionsImageKey的值： <img id="fullViewImg...

我使用 scrapy 和 scrapy-playwright 编写的程序似乎只加载了页面的外围元素。“页面的肉”仍然是空白的，但不幸的是，这是我试图从中抓取的信息 https://chrome.go...

我正在制作一个关于DataCamp的网页抓取课程:D 在会话中，我们正在抓取 Datacamp 网站以获取课程名称和 URL 然而 我正在尝试在我的 PC 上的 PyCharm 上达到相同的结果， ...

我试图用 Scrapy 为个人数据科学项目抓取 www.heute.at。我还使用scrapy-rotating-procies和以下Tor代理。但是，我只得到回应。我还使用 Tor 浏览器查看是否有...

我不明白如何调用回调来解析子类别。 我以下一个代码为例。 我想按 kegoria 解析类别，例如： 主类别--->sub_category--->如果子类别有类别，请解析并添加链接，直到我们遇到具...