爬取天猫评论,连第一个都没爬完就封了 想问延长休息时间有用吗? 代理池没有试过不知道有没有效果
爬取天猫评论,连第一个都没爬完就封了 想问延长休息时间有用吗? 代理池没有试过不知道有没有效果
|
lhx2008Mar 4, 2019 via Android
1
先把浏览器特征做好吧,可以爬几页,然后是代理池,哪有这么容易。
|
|
www5070504Mar 4, 2019
2
代理池都不上的。。。
|
|
shaplMar 4, 2019
3
用浏览器插件的形式,让用户浏览器去爬。。
当你的插件用户足够多,就行了。。 |
|
lusi1990Mar 5, 2019 via Android
6
阿里反爬做的很好了,没个两个天搞不完,代理肯定要上,多个用户。httpbin.org 看看自己的请求和浏览器 差多少
|
|
Johnson66Mar 5, 2019
7
评论是需要登陆 有 cookie 才能拿到的
|
|
Johnson66Mar 5, 2019
8
延长时间有用~~
|
|
cruithneMar 7, 2019
10
带着 cookie 进行请求吧,阿里系的都不好爬
|