现有一个 json 文件,希望下载其中所有的 “ url ” 的文件:
http://a1.phobos.apple.com/us/r1000/000/Features/atv/AutumnResources/videos/entries.json
如何在 Linux 上批量下载呢?使用 wget 一个个复制粘贴效率太低了。
现有一个 json 文件,希望下载其中所有的 “ url ” 的文件:
http://a1.phobos.apple.com/us/r1000/000/Features/atv/AutumnResources/videos/entries.json
如何在 Linux 上批量下载呢?使用 wget 一个个复制粘贴效率太低了。
|
hanxiV2EXAug 29, 2018 via Android
1
解析 json,对每个 url 执行 wget 命令
|
|
exkernelAug 29, 2018
2
sed 一下就出来了, 不会的话用[jq]( https://stedolan.github.io/jq/)
|
|
omphAug 29, 2018
3
优雅一点的,用程序解析 json 中的 url,然后下载
暴力点的,正则出 url |
|
fireappAug 29, 2018 via iPhone
4
sed | awk | wget 搞定
|
|
JHerschelAug 29, 2018
5
import json
file = open('pathToFile') file_to_json = json.load(file) for a in file_to_json: for b in a['assets']: print(b['url']) wget 或者 requests 搞定。 |
|
zerofinyAug 29, 2018
6
```
curl http://a1.phobos.apple.com/us/r1000/000/Features/atv/AutumnResources/videos/entries.json | grep url | sed -e 's/"url"\ ://;s/\,//g' | awk '{print "curl -L -O "$1}' | sh ``` |
|
ps1aniugeAug 30, 2018
8
win linux 通用 powershell:
|
|
ps1aniugeAug 30, 2018
9
$a = Invoke-RestMethod http://a1.phobos.apple.com/us/r1000/000/Features/atv/AutumnResources/videos/entries.json |ConvertFrom-Json
$a.assets.url 和楼上的道理一样。只不过这个网址现在好像,啥命令都不行了,502 Bad Gateway 了。 |
|
ps1aniugeSep 1, 2018
11
$url = 'http://a1.phobos.apple.com/us/r1000/000/Features/atv/AutumnResources/videos/entries.json'
$a = Invoke-RestMethod -Uri $url $a.assets.url 测试通过 我不知道网址内容是否变了,反正现在不需要搞 json 了。 |
|
iwtbauhSep 5, 2018 via Android
12
jshon 了解一下
#!/bin/bash url=`jshon -e xxxx -e url1 -u` curl -s ... |
|
abcbcSep 23, 2018
13
用 jq 来处理很简单:
curl -L http://a1.phobos.apple.com/us/r1000/000/Features/atv/AutumnResources/videos/entries.json | jq -r '.[].assets | .[].url' | xargs -I {} curl -LO {} |