最近在学习计算机视觉相关知识,对抖音特效比较感兴趣,比如自动带墨镜特效等等,请问底层相关技术是什么啊,有什么好的学习建议,求指导
最近在学习计算机视觉相关知识,对抖音特效比较感兴趣,比如自动带墨镜特效等等,请问底层相关技术是什么啊,有什么好的学习建议,求指导
|
owen800qSep 5, 2023 via iPhone
1
别想那么复杂,本质上和游戏特效一样,AE 做了个动画,在 app 播放,你找个美工帮你画,你也可以做出来
|
|
R4rvZ6agNVWr56V0Sep 5, 2023
2
ARCore 、AIKit 类似的技术
|
|
4
打错,ARCore 、ARKit
|
|
6
关键词 opencv ffmpeg filter shader
|
|
7
https://github.com/CMU-Perceptual-Computing-Lab/openpose
使用 openpose 识别画面,当识别出双眼时跟踪眼睛坐标就可以叠加墨镜图像 嘴唇的颜色叠加同理 瘦脸,就是把视频帧的脸部轮廓范围缩小 缩头,拉腿跟瘦脸同理 以上缺点是当某一帧识别不到对应部位时,都会临时失效 虽然抖音这些大公司不一定会用 openpose ,但是可以反推出抖音也是类似的原理,因为抖音视频里都会有上面这个缺点。 |
|
8
我找到一个做 webAR 的公司: https://www.8thwall.com/blog/post/41172151240/introducing-8th-wall-face-effects ,就是想实现里面例子的效果
|
|
10
web 的话,效果差强人意,方案也多,这是目前人多的,但是不是开箱即用,要自己写代码
https://github.com/pmndrs/react-xr |
|
HelsingSep 6, 2023 via iPhone
12
说到底还是图像识别和处理,去了解一下商汤的商用 SDK 方案就知道了
|
|
MENGKESep 6, 2023
13
正在开发一款 web 的特效视频播放器,过一段时间会开源
|