ffmpeg实战-音视频合成案例
转发自白狼栈:查看原文
很多小伙伴私下里留言说,之前没接触过音视频,对于ffmpeg可以做什么还是有些懵。
今天我们一起看下我们究竟可以用 ffmpeg 做什么?
很多小伙伴应该都玩过抖音,你在“拍同款”的时候,有没有留意过“正在合成中”的提示,视频越长合成的时间越长,少则几秒多则几十秒,这个其实就是app本地在做视频合成。
让用户等这么久,感觉体验很差。服务端可以合成吗,答案是“可以”。
【ffmpeg实战-音视频合成案例】但其实ffmpeg在编码的时候,非常吃cpu和内存,尤其是cpu,服务器cpu100%都是家常便饭。那增加cpu不就完事了吗?我们后面会实际测试8核8G、16核16G的机器,发现依然会爆,所以这是一个无底洞,消耗不起。
所以抖音能让服务端做吗?肯定不能,用户量大,app本地能做,最关键都是免费用户。
所以从技术的成本考虑,这也是为什么抖音上很多特效都是短视频,有的甚至只有10秒钟,起码这样不会让用户等太久。
在学习音视频相关的知识之前,我们先简单看两个应用场景。如果你刚巧有一些音视频的基础,顺便可以练练手。
场景1、公司有很多原视频,想以某种效果(比如电视机播放)更好的展示给用户
期望效果如图所示
文章图片
素材比较难找,图片是百度的,电视机中间显示视频的部分已经被ps处理了,略微粗糙;视频是抖音下载的,原视频也做了局部模糊。
相信每个公司都有好的UI,当前案例仅作为学习。
需要注意的点:
- 视频可以裁剪,可以缩放,不能变形
- 注意电视机内屏的四个角是圆形的
- 原视频只取了中间部分,没有高斯模糊的背景
- 原视频尾部含有抖音的部分同样也被裁剪了
下载图片素材
下载视频素材
下载合成效果
场景2、公司有很多素材视频以及对应的标题和字幕,想开放给用户配音,合成自己的作品
期望效果如图所示
文章图片
素材同样来源于抖音,左侧视频是用户视频,右侧视频的中间部分是视频素材,底部是该素材的高斯模糊视频,此外还有标题,字幕,字体都是事先准备好的。
素材已经上传至github,请点击链接获取。
下载左侧用户视频
下载右侧素材视频
下载右侧的字幕文件1,字幕文件2
下载字体
最终合成的视频效果
同一效果可能有多种不同的做法,如果你花费了一些时间都做出来了,先恭喜你。
为了降低服务器资源和合成的时间,请思考这两个视频效果如何各用一条命令完成。
第一次接触音视频的小伙伴可能会对这样的合成效果感到惊讶,学完ffmpeg基础部分,你至少应该会用一条命令解决以上甚至更复杂的音视频需求。
推荐阅读
- 《机器学习实战》高清中文版PDF英文版PDF+源代码下载
- --木木--|--木木-- 第二课作业#翼丰会(每日一淘6+1实战裂变被动引流# 6+1模式)
- ffmpeg源码分析01(结构体)
- 2020-07-29《吴军·阅读与写作50讲》24实战才能转化效能
- Python实战计划学习笔记(9)为大规模爬取准备
- 韵达基于云原生的业务中台建设 | 实战派
- 【V课会】第3季-30天小学思维导图实战营
- 【思维导图实战派】刻意练习计划“遇见……”|【思维导图实战派】刻意练习计划“遇见……” 1/300 人教版数学五下第三单元《正方体和长方体的认识》
- OpenCV|OpenCV-Python实战(18)——深度学习简介与入门示例
- 分布式|《Python3网络爬虫开发实战(第二版)》内容介绍