2017-05-04 06:08:14 120.xx.xxx.xxx GET / - 80 - 58.211.2.120 Python-urllib/2.7 200 0 0 54
持续两三天了，每秒钟几十次记录，这是网站被攻击还是有人采集内容？
持续两三天了，每秒钟几十次记录，这是网站被攻击还是有人采集内容？
This topic created in 3476 days ago, the information mentioned may be changed or developed.
32 replies • 2017-07-16 11:44:37 +08:00
 |
misaka19000May 4, 2017 via Android
1
这爬虫还把自己给暴露出来。。。神奇
|
 |
woshinide300yuanMay 4, 2017
2
这不是明显的该屏蔽的吗 - -
|
 |
3
耿直的爬虫
|
2 |
notesMay 4, 2017 via Android
4
目测新手，用的还是自带的 urllib
|
 |
5
脚本小子
|
 |
wspsxingMay 4, 2017
6
UA 都不改一下，差评妥妥的。
|
 |
ywgxMay 4, 2017
7
留着过年？
|
 |
LokiSharpMay 4, 2017
8
估计故意的。。。看看有没有人处理
|
 |
richardmaMay 5, 2017
9
猖狂的爬虫，23333
|
 |
tonychowMay 5, 2017
10
显然爬虫, 都不知道隐藏下 UA
|
 |
araralorenMay 5, 2017
11
～～
再明显不过的爬虫了。。 封了 IP 呗 |
 |
crackhopperMay 5, 2017
12
666666
|
 |
yanzixuanMay 5, 2017
13
连 UA 都不知道改的，估计是新手。另外你们的网站不设置一个 Limiter，限制一下一天的总的访问次数么？
如果对方换 IP，你就限制下 1 分钟 /1 小时之内的访问次数吧。 |
 |
ttttyMay 5, 2017
14
请问一下，如果遇到爬虫直接封 IP，这样不是会导致共用公网 IP 的用户误伤吗.. 比如校园网、网吧什么的？
|
 |
hard2regMay 5, 2017 via iPhone
15
弱弱的问下，requests 的默认 ua 是啥
|
 |
jy02201949May 5, 2017
16
真是耿直啊，而且还在用 urllib，新手随便抄了网上哪个教程弄的爬虫吧
|
 |
eycfsjdMay 5, 2017
17
使用验证码机制啊
|
 |
liuxuMay 5, 2017
24
我虽然是个爬虫，但我行事坦荡，从不遮遮掩掩
|
 |
25
@hard2reg
>>> import requests >>> requests.get('http://httpbin.org/user-agent').text u'{\n "user-agent": "python-requests/2.12.3"\n}\n' |
 |
hsmoccMay 5, 2017 via iPhone
26
封 IP 显然是下策啊，一段时间内访问次数达到一个上限后出验证码吧
|
 |
27
@hsmocc 这样的话 每一次访问都要查询（次数）+插入数据库，不是很占用资源吗
|
 |
dsg001May 5, 2017
29
这种 UA 直接返回乱码数据呗
|
 |
qinbingchenMay 5, 2017
30
难道这是我?
|
 |
flyshuMay 6, 2017
31
新手刚看了知乎的入门教程来练手了
|
 |
dreamcountryJul 16, 2017
32
我的网站也有大量的这种日志，这些人真是闲的蛋疼
|
Select Language