V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  dsg001  ›  全部回复第 40 页 / 共 45 页
回复总数  891
1 ... 32  33  34  35  36  37  38  39  40  41 ... 45  
2017 年 3 月 30 日
回复了 dsg001 创建的主题 Python 用 requests 替代 scrapy 的下载器,发现速度很慢,求解
@kakadong 嗯,所以需要重写下载器,方便 twisted 异步调用
2017 年 3 月 30 日
回复了 dsg001 创建的主题 Python 用 requests 替代 scrapy 的下载器,发现速度很慢,求解
@onlyice 面向需求学习 ←_←
2017 年 3 月 29 日
回复了 dsg001 创建的主题 Python 用 requests 替代 scrapy 的下载器,发现速度很慢,求解
@knightdf 找到相关源码了 scrapy/core/downloader/handlers/__init__.py
@bazingaterry 太别扭了
2017 年 3 月 29 日
回复了 dsg001 创建的主题 Python 用 requests 替代 scrapy 的下载器,发现速度很慢,求解
@knightdf 能分享个 demo 不,文档啃的太慢
@bazingaterry 一直没研究锅 twisted
@lilydjwg 实际代码中用的 requests.Session ,但速度比原生还是差的太多
2017 年 3 月 29 日
回复了 realpg 创建的主题 程序员 百度貌似又开发了赚钱的新买卖啊
[画外音:通过运营商 DPI 技术,可以截取搜索引擎的搜索行为,并将其与电话号码相关联。]
http://mp.weixin.qq.com/s/Bux8ZaRuaoKGZAbvsOX3GA
2017 年 3 月 27 日
回复了 ansheng 创建的主题 Python 关于如何进阶学习 Python
2017 年 3 月 22 日
回复了 lufficc 创建的主题 Blogger 强大的 V 友们,垃圾评论你们怎么过滤的?
不过滤,定时输出分析,经常发现不错的脑洞
2017 年 3 月 22 日
回复了 abcbuzhiming 创建的主题 PHP Laravel 可不可以不用那个 ORM
不用 laravel ,但 orm 只用 equolent
2017 年 3 月 21 日
回复了 Reign 创建的主题 程序员 大家看看我这种网页广告布局能不能行?
危险,有些站没问题,有些站因为这个被 K
2017 年 3 月 21 日
回复了 rosu 创建的主题 程序员 [分享][常坐电脑前面,这些健康问题你注意到了么?]
总结:不熬夜 不久坐
@tabris17 猫眼的一些数据就是这种显示 https://jizhi.im/blog/post/maoyan-anti-crawler
就大纲而言,对新人太繁琐,对老鸟太浅显
2017 年 3 月 19 日
回复了 call43848 创建的主题 站长 你的博客或网站用 Google PageSpeed 测一下能得 100 分么?
大概都是 95+,引用的外部 css 、 js 无法优化
2017 年 3 月 12 日
回复了 strahe 创建的主题 Python 不使用 ORM 时如何更好组织代码?
@changwei python 有啥好用的构造器推荐不
chrome 的 headers 完整复制到 requests
2017 年 3 月 11 日
回复了 bboysoul 创建的主题 程序员 问大家一个问题,你的电脑多久没关机了
win7 最长半年
模块,简单安全
2017 年 3 月 6 日
回复了 hihihihihi 创建的主题 Python 爬虫把自己爬死了。。。。点解?
本机 gevent+requests 跑百万 url 没问题,路由器应该事设置有问题吧
2017 年 3 月 6 日
回复了 liuzhaowei55 创建的主题 知乎 所以知乎是也要改版了吗?
凭什么 Chrome34 没问题, Firefox40 就提示版本太低
2017 年 3 月 4 日
回复了 yangjiaronga 创建的主题 Python Scrapy xpath 匹配不到一些数据
'''
<tr> <td style="vertical-align:top;">Copper, Cu&#160;</td> <td class="dataCell" style="vertical-align:top;">&lt;= 0.03 %<span class="dataCondition"></span></td> <td class="dataCell" style="vertical-align:top;">&lt;= 0.03 %<span class="dataCondition"></span></td> <td class="dataComment" style="vertical-align:top;"></td> </tr>
'''

测试 lxml 能输出, scrapy 应该也没问题,查看 html 源码吧
1 ... 32  33  34  35  36  37  38  39  40  41 ... 45  
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1106 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 30ms · UTC 23:47 · PVG 07:47 · LAX 16:47 · JFK 19:47
♥ Do have faith in what you're doing.