我想把一个网站上的文章爬取下来,有没有办法可以自动触发 chrome 插件(简悦),他可以重新排版,保存的日记中。但是怎么批量的去做这件事情呢?大家有什么 idea ?
我想把一个网站上的文章爬取下来,有没有办法可以自动触发 chrome 插件(简悦),他可以重新排版,保存的日记中。但是怎么批量的去做这件事情呢?大家有什么 idea ?
|
6J73U552K5UVij4RJul 13, 2021
1
用 selenium ?然后加载的时候把 chrome 插件 load 进去,再用 xpath 操作?
|
|
itechifyJul 13, 2021
3
爬虫爬得好
|
|
ingdawnJul 13, 2021
4
坐牢坐到老
|
|
seamonsterJul 13, 2021
5
真刑啊,日子越来越有判头了
|
|
zelentreJul 13, 2021
6
很刑.
|
|
HankLuJul 13, 2021
7
很简单
|
|
ztcaoll222Jul 13, 2021
8
先这样
|
|
HashV2Jul 13, 2021
9
再这样
|
|
JettWuJul 13, 2021
10
进去进得早
|
|
yunyuyuanJul 13, 2021
11
然后再这样
|
|
nepiedgJul 13, 2021
12
最后在这样
|
|
jingcocoJul 13, 2021
13
有个 网联网记忆的 工具,初衷是解决有些网站过了几年下线了 没法看的问题。
|
|
kasusaJul 13, 2021
14
python 写,selenium 库,模拟点击按钮,用 xpath 定位下一篇按钮,刷新再来。
就这么个流程吧。 不过我感觉网上还是垃圾信息多。都爬下来有什么用呢? |
|
caicaiwoshishuiJul 13, 2021 via iPhone
15
楼上队形笑死我
|
|
6J73U552K5UVij4RJul 14, 2021
16
@hackingwu 可以的,用 js dom 就可以,xpath 估计也可以。
|
|
solopythonJul 14, 2021
17
试试 Newspaper3k
|
|
muzuigetJul 14, 2021
18
写个浏览器扩展就可以了,专事专办。
|