 |
locusxtSep 4, 2018 via Android
1
顺着这个 href 接着爬就可以了
|
 |
toonoSep 4, 2018
2
我之前的做法就是分析他们的 API
|
 |
3
这个问题已经困了我一周，查了挺多资料，还是没办法，求大佬支招
|
 |
syahdSep 4, 2018 via Android
4
if 返回码＝＝ 3xx 跟着跳转
|
 |
bmosSep 4, 2018
5
首先和 1 楼说的，顺着 href 爬。
不行的话看看是不是需要 cookie，我之前提问过，有的网站需要判断 cookie 值，没有的话，就会要求 js 跳转，有 cookie 就可以直接访问。 还有其他措施，要具体分析 |
 |
crazycabbageSep 4, 2018 via iPhone
6
返回链接继续爬，遇到 js 生成页面用 splash，不要用 selenium
|
 |
uwh0am1Sep 4, 2018
7
splash 把，使用 qt 中的 webview 加载页面，可以运行页面中的 js 代码，使用简单
|
 |
encroSep 4, 2018
9
如果只是这个，正则匹配下 url 继续爬啊
|
 |
huaerxielaSep 4, 2018
12
既然是无限循环的情况，可能是服务器验证有问题，要么你代码请求不规范，要么就是被反爬拦截了，排除代码问题后，着重看 cookie 变化或者 js 加密参数的情况
|
 |
frankyxuSep 4, 2018
13
5 楼说的有道理，可能是你没带 cookie 访问，我最近刚好也遇到了这个问题，带上 cookie 就好了
|
|
15
@huaerxiela 是的，是因为没带 cookie，已经解决了，:)
|
 |
testsecSep 4, 2018 via iPhone
16
一般这种是要带上 cookie 去访问的
|
 |
hjzkenanSep 4, 2018
17
啥网站呀，贴出来看看？
|
|
18
|
 |
yangyaofeiSep 25, 2018
20
@wylwang 同样这个网站出这个问题,我发现直接用 requests 就可以...所以....这是为啥...
|
Select Language