网页挖掘 问答列表

抓取 AMP 版本的网页更容易吗?

作者:Guy4444 提问时间:4/8/2019

我正在开发一个聚合报纸文章的网络爬虫。我知道 AMP 协议要求使用 Javascript 的精简版本,我也知道 Javascript(部分)使网站管理员能够检测/防止抓取。因此,从逻辑上讲,我认为抓取...

抓取 url 相同但位置在 c 搜索框中更改的网页#

作者:csharplearner 提问时间:10/11/2017

我必须在 c# 中抓取一个网页,并且我正在使用 Httpclient,我的问题是当我抓取一个 url 时,例如 https://somethng.com/search/?query=mobile,it...


共2条 当前第1页