Home
Sign Up
Sign In
1.2
V2EX
›
问与答
关于爬虫的一个问题
0x663
·
Mar 28, 2023
· 2023 views
This topic created in 1317 days ago, the information mentioned may be changed or developed.
我用的 Java 的 Webmagic 去爬取一个页面,我如果用浏览器直接打开的话这个页面会跳到一个新页面是一个文档请求但是如果我用 webmagic 去获取这个页面的 html 的话发现是通过 window.location.href='./页面 id' 而不会去跳转到这个页面,如果我想获取这个页面,应该怎么去写呢
页面
webmagic
id'
获取
4 replies
•
2023-03-29 10:11:15 +08:00
theOneMe
Mar 28, 2023
1
那就用跳转后的那个路径不就行了
centralpark
Mar 28, 2023
2
建议补充一些前端基础常识再来写爬虫
0x663
OP
Mar 28, 2023
3
@
theOneMe
这个路径是上个爬虫获取到的列表路径,然后通过这个列表路径再去创建新的爬虫
xlh001
Mar 29, 2023
4
获取当前网站路径拼接一下啊
About
·
Help
·
Advertise
·
Blog
·
API
·
FAQ
·
Privacy
·
Solana
·
1340 Online
Highest 6679
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 28ms ·
UTC 22:25
·
PVG 06:25
·
LAX 14:25
·
JFK 17:25
♥ Do have faith in what you're doing.
❯