V2EX › yhf 的所有回复 › 第 5 页 / 共 18 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

1 2 3 4 5 6 7 8 9 10 ... 18

❮

❯

2016 年 1 月 25 日

回复了 cheneydog 创建的主题 › 问与答 › 怎样检验自己的 sql 水平，有没有 sql 的 oj。

Leetcode 有。

2016 年 1 月 23 日

回复了 yhf 创建的主题 › Python › 请教一道 Python 多线程爬虫的面试题

@reorx 谢谢！我试试。

2016 年 1 月 23 日

回复了 yhf 创建的主题 › Python › 请教一道 Python 多线程爬虫的面试题

@Damnever 谢谢！那把 queue.put()操作放在锁外面应该怎么写呢？

2016 年 1 月 23 日

回复了 yhf 创建的主题 › Python › 请教一道 Python 多线程爬虫的面试题

@binux 多谢！

为了减少加锁的次数，我在 extract_urls()获得所有 urls 后再一次性判断是否在 set 中，这样一个线程中只加一次锁，这样性能会有较大提升吗？

<script src="https://gist.github.com/yhfyhf/39e4b3ec3d36a3e73f54.js"></script>

后面的我还不是太理解，你提到的只将抓取放在线程中， merge 部分不放到线程中。可是抓取过程中会产生新的 url ，我需要判断这个 url 是否在 set 中，所以判断语句我还是需要放在线程中呀？还请 binux 大大再解释一下，非常感谢！

2016 年 1 月 11 日

回复了 sgtiaww 创建的主题 › Hadoop › 有谁现在正在准备学 Hadoop 或 Spark？

来迟了，非常想学:(

2015 年 12 月 4 日

回复了 Cee 创建的主题 › 健康 › 刚刚出院了，人生太美好。

祝好

2015 年 12 月 2 日

回复了 Valyrian 创建的主题 › Go 编程语言 › 用 Paxos 可以做什么 app？

我猜是 CMU?

2015 年 11 月 18 日

回复了 cmonday 创建的主题 › 问与答 › 值得为了感觉前途比较好的 Startup 大幅降低薪水吗？

@liboyue 你回复错人了吧....