Java 使用 HtmlUnit 和 Jsoup 做爬虫报需要 JavaScript 才能工作问题,求大佬重点

查看 42|回复 1
作者:tiRolin   
小弟是我学 java 语言的,所以想着用 java 来做个爬虫来爬取网站的内容
不过我爬取目标网站的时候得到的内容总是"Kikoeru requires Javascript to work. 正在加载 JS 文件,如果你一直看到本界面,请使用 VPN Loading JS file"
我确信我运行爬虫的时候已经开启了 VPN 了,HtmlUnit 的配置里也开启了解析 JS 的配置,一切都没问题,但是就是爬取不出想要的内容出来,去搜索引擎上找也没有找到解决方法
所以来这里问问各位大佬,先谢谢各位了

Java, 爬虫, htmlunit, VPN

Juszoe   
HtmlUnit 看起来是个无头浏览器库,你是否有启用 js
webClient.getOptions().setJavaScriptEnabled(true)
您需要登录后才可以回帖 登录 | 立即注册

返回顶部