要求:
1. 同个三个 url 抓取数据,有分页,需要解析 JSON 和 HTML 的数据,处理以后保存到 sqlite 数据库中
2. 提供从数据库中导出 csv 表单的方法
3. 不需要 UI ,直接命令操作即可,抓取过程需要登陆,直接浏览器登陆后,读取浏览器 cookie 即可
4. 使用 python 编写,需要考虑到抓取过程中意外中断,再继续抓取的情况
我估计代码量应该不超过 1K 行,之前没接触过这些外包,就咨询一下外包的价格
1. 同个三个 url 抓取数据,有分页,需要解析 JSON 和 HTML 的数据,处理以后保存到 sqlite 数据库中
2. 提供从数据库中导出 csv 表单的方法
3. 不需要 UI ,直接命令操作即可,抓取过程需要登陆,直接浏览器登陆后,读取浏览器 cookie 即可
4. 使用 python 编写,需要考虑到抓取过程中意外中断,再继续抓取的情况
我估计代码量应该不超过 1K 行,之前没接触过这些外包,就咨询一下外包的价格
