本人会一点程序基础但不是程序员,心血来潮想学python爬虫,除了需要你技术ok,还需要你有耐心.就这些,请加qq18357601
|
ufo22940268Jun 25, 2013
1
http://www.crummy.com/software/BeautifulSoup/bs4/doc/
我刚刚用这个做了一个爬虫系统,感觉良好 |
|
bravejoeJun 25, 2013
2
可以看下这个python的开源爬虫框架 http://scrapy.org/
|
|
xieren58Jun 25, 2013
3
用node.js啦,异步,处理html可以用jquery。~~~~~~
|
|
gullonJun 25, 2013
5
@ufo22940268
Beautiful是用来解析网页的。。。怎么可以说用bs4做了个爬虫系统呢 |
|
ufo22940268Jun 25, 2013
6
@gullon 我理解错了
|
|
acppJun 25, 2013
9
@ufo22940268 能说下你说的那个效率怎么样吗
|
|
seraphimhjJun 25, 2013
10
nodeJS,以前用node.io写过一个爬房价的工具
|
|
ufo22940268Jun 25, 2013 via iPhone
11
@acpp 我只是觉得用起来顺手,开发快,还有我可能理解错了爬虫的意义了
|
|
duhastmichJun 26, 2013
12
|
|
duhastmichJun 26, 2013
13
@Ricepig 爬虫不异步或者多线程那效率也太低了吧。。
|
|
gullonJun 26, 2013
14
|