撒花! 我们又在大家的意见中改进了 详情页爬取的功能,快来扔砖! 另外我们就之前的功能做了一个详细的讲解视频,欢迎大家看,知名声优配音哦。 欢迎更多的意见。
撒花! 我们又在大家的意见中改进了 详情页爬取的功能,快来扔砖! 另外我们就之前的功能做了一个详细的讲解视频,欢迎大家看,知名声优配音哦。 欢迎更多的意见。
|
1
好!
|
|
2
@eminemcola 好在哪!
|
|
3
广告?
|
|
4
@skywayman 不是不是
|
|
5
这么久了数据还是对不齐,哈哈
|
|
eminemcolaFeb 27, 2017
6
@GrahamCloud 哪儿都好!
|
|
7
还录制视频,赞一个
|
|
8
在 https://dashboard.zaoshu.io/ 隔几秒弹出 [任务列表中没有任务]
以及 现在竖屏打开首页还是没有显示图标 |
|
9
@sohoer 哪个数据,很多都改正了啊。
|
|
10
@mingyun 新功能还会配视频的。
|
|
11
@F0nebula 竖屏是不支持,弹出这个求问详细。
|
|
12
有 API 吗
|
|
13
@zhouxu417 马上会上,可以提需求一块琢磨。也欢迎加团队微信: Zaoshuio
|
|
14
数据爬出来放 Excel 差评啊……
|
|
15
@lingoerer 为啥差评,输出 还有很多其他格式可以选择啊。
|
|
16
|
|
17
|
|
18
@F0nebula 感谢,求加 微信: Zaoshuio
|
|
19
上次抓 JD 的数据 抓了十分钟 什么也没抓到 还报错了
|
|
20
@NirvanaCN 现在好了没有,没有就再解决一下。
|
|
21
|
|
22
打造自己的云爬虫; http://www.infosec-wiki.com/?p=308
|
|
23
@jijiwaiwai 文章很有意思。
|
|
24
@jijiwaiwai 架构很有意思,求加微信: Zaoshuio
|
|
25
一直搞不懂这种云爬虫优势在什么地方,实际爬网站的时候遇到的情况千变万化,控制频率、切换代理、验证码、邮箱验证、手机验证、伪装 header 等等,各种网站反爬虫系列一个比一个厉害,遇到没 header 的,加入黑名单,遇到只请求内容不请求 css 的,加入黑名单,遇到 phantomjs 的,加入黑名单,请求次数太猛的,加入黑名单。如果真的是爬一个简单的新闻页面, chrome 一个 F12 ,几分钟就创建一个爬虫,还需要在页面上点过去点过来啊?
|
|
26
@Reign +1
想爬的时候用它爬不成,不是工具不好,是肯定被各种反杀。 可视化选择很好,但是想选中合适的元素并不容易,除非可以自己定制选择器…… 都这么麻烦了,自己写个油猴脚本也就把事情办了,效率是低了点,但是被杀的可能性也低了,工作量不是很大的情况已经足够用了 |
|
27
|
|
28
@LittleWhiteMouse 就是因为有反杀的才有一点商业价值啊, v2 都是程序员背景为主,其实还有很多人还是最原始的方式抓取信息。
|
|
29
|
|
30
@LittleWhiteMouse 暂时不会支持选择器功能,以后可能会上。
|
|
31
Moved to /go/promotions
|
|
duhai973Apr 22, 2017
32
高不成,低不就
|