This topic created in 4409 days ago, the information mentioned may be changed or developed.
公司要爬京东的一类商品列表。
爬了10多条，就被jd跳转到首页了。
各位爬网人士，你们都是怎么绕过去的
6 replies • 2014-10-18 11:49:43 +08:00
 |
|
频率太高了，京东有防护，适当降低频率看看
|
 |
|
请求太快了, 以前刷东西时也遇到过, 速度放慢, 加代理, 走不同cdn节点.
|
 |
|
大公司都会有防爬机制
|
 |
|
遇到验证码了吧，。。。。。。。
伪造ip试试
|
Select Language