使用 HTMLUNIT 对动态网页进行爬网
作者:Marcopolo Soc 提问时间:8/25/2012
我正在使用HtmlUnit从动态网页抓取数据,该网页使用无限滚动来动态获取数据,就像Facebook的新闻源一样。我用下面的句子来模拟向下滚动事件: webclient.setJavaScriptE...
htmlunit 问答列表
作者:Marcopolo Soc 提问时间:8/25/2012
我正在使用HtmlUnit从动态网页抓取数据,该网页使用无限滚动来动态获取数据,就像Facebook的新闻源一样。我用下面的句子来模拟向下滚动事件: webclient.setJavaScriptE...
作者:DjCode 提问时间:5/6/2014
我目前正在学习 HtmlUnit 以抓取网站。一切都很顺利,直到我遇到一个动态页面(例如,我正在使用 Pinterest 网站),当用户向下滚动时,它会在该页面上即时添加元素。 我已经尝试了几种应该...
作者:defalt1996 提问时间:4/23/2023
我正在使用 HTMLUnit 尝试记录加载本地 html 文件时触发的所有请求。 这是下面的测试文件: <script type="text/javascript"> !(function () ...
作者:carlos palma 提问时间:7/7/2023
我一直在尝试将htmlunit(https://www.htmlunit.org/)从2.27版升级到2.70版。我注意到静态方法 HtmlParser.parseHtml() 不再存在。 我知道我现...