• 请不要在回答技术问题时复制粘贴 AI 生成的内容
cwjokaka
V2EX  ›  程序员

[python3] B 站用户数据收集...(重发)

  •  2
     
  •   cwjokaka ·
    cwjokaka · Jul 15, 2019 · 3966 views
    This topic created in 2672 days ago, the information mentioned may be changed or developed.

    前天发了一次贴,秒沉。果然还是在大众摸鱼日发合适一点。

    写了一个爬虫,用于收集 B 站用户数据,算是学 python 的实践项目吧^_^

    Supplement 1  ·  Jul 15, 2019

    欢迎提建议,打算业余时间会添加新特性(获取更丰富的数据、数据统计等)

    19 replies  •  2019-07-16 08:26:24 +08:00
    locoz
    locoz
    Jul 15, 2019
    1
    太惨了,帮你捞一下
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    2
    @locoz 感谢,我也自顶一下
    Deteriorator
    Deteriorator
    Jul 15, 2019
    3
    帮你捞一下
    xwcs
    xwcs
    Jul 15, 2019
    4
    帮你捞一下
    i0error
    i0error
    Jul 15, 2019
    5
    捞一下
    i0error
    i0error
    Jul 15, 2019
    6
    去看了一下,很基础啊......建议有数据了分析一波再发。
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    7
    @i0error 是的,目前只是爬取阶段,而且相关数据内容有些少
    hzwjz
    hzwjz
    Jul 15, 2019
    8
    按理说,不应该是在原帖的基础之上,想办法么?重复发帖了吧
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    9
    @hzwjz 是可以,但前天发的贴沉到海底,应该上不来了←_←
    SpiderXiantang
    SpiderXiantang
    Jul 15, 2019 via Android
    10
    用 dfs 爬取的吗
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    11
    @SpiderXiantang 没有.只简单调下接口而已
    hjq98765
    hjq98765
    Jul 15, 2019
    12
    捞一下,学习学习
    lzj307077687
    lzj307077687
    Jul 15, 2019
    13
    刚开始学 py 学习下~
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    14
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    15
    ↑上去↑
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    16
    有哪里写的不足(bug)的地方可以说一说←_←(个人顶帖行为)
    telnetning
    telnetning
    Jul 15, 2019 via iPhone
    17
    楼主,是不是应该主动显示关闭下数据库连接
    cwjokaka
    cwjokaka
    OP
    Jul 15, 2019
    18
    @telnetning 是有这个问题,但我发现 worker 线程根本不用停下来。。。数据库连接也就不管了
    cwjokaka
    cwjokaka
    OP
    Jul 16, 2019 via Android
    19
    最后一顶
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1884 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 37ms · UTC 01:26 · PVG 09:26 · LAX 17:26 · JFK 20:26
    ♥ Do have faith in what you're doing.