ffmpeg concat video and mix audio

2019-12-19 00:04:44

参考地址 https://www.jianshu.com/p/0109e53fafd5

需求

将N个片段视频文件连接,并合并额外的音频文件

解决方案:

ffmpeg中,官网给出两种连接媒体文件(音频、视频、etc..)的解决方案。

  • the concat "demuxer"

  • the concat "protocol"

对比而言, demuxer更加灵活一些,需要媒体文件是属于相同的编解码器,但是可以属于不同的容器格式(mp3,wav, mp4, mov, etc..).
protocol只适用于少数集中容器格式。

使用concat demuxer连接视频文件

demuxer从一个文本文件中读取文件或者其他指令的列表,然后注意的对他们进行解复用。就像把他们的数据包混合到一起。

步骤:

1.创建一个文件mylist.txt,包含你想要连接的所有文件,格式如下:

file 'path/to/file1'
file 'path/to/file2'
file 'path/to/file3'

其中的文件路径可以是相对路径或者是绝对路径。

2.ffmpeg命令

ffmpeg -f concat -safe 0 -i mylist.txt -c copy output

如果对应的路径为相对路径 参数-safe 0就不是必须的。

3.自动生成输入文本文件的

可以使用如下shell脚本生成。

# with bash or zsh for loop
for f in *.mp4; do echo "file '$f'" >> mylist.txt; done
# or with printf
printf "file '%s'\n" *.mp4 > mylist.txt

使用Concat protocol 连接视频文件

demuxer 是在文件流级别工作,而cancat protocol则是在文件级别操作。
可以将使用MPEG-2传输流的文件连接在一起。类似于在类unix系统上使用cat,或在windows系统上使用copy.

1.下面的命令连接了三个MPEG-2 TS文件,并将它们连接在一起,但不进行重编码

ffmpeg -i "concat:input1.ts|input2.ts|input3.ts" -c copy output.ts

2.使用中间文件

ffmpeg -i input1.mp4 -c copy -bsf:v h264_mp4toannexb -f mpegts intermediate1.ts
ffmpeg -i input2.mp4 -c copy -bsf:v h264_mp4toannexb -f mpegts intermediate2.ts
ffmpeg -i "concat:intermediate1.ts|intermediate2.ts" -c copy -bsf:a aac_adtstoasc output.mp4

3.使用命名管道避免中间文件

mkfifo temp1 temp2
ffmpeg -i input1.mp4 -c copy -bsf:v h264_mp4toannexb -f mpegts temp1 2> /dev/null & \
ffmpeg -i input2.mp4 -c copy -bsf:v h264_mp4toannexb -f mpegts temp2 2> /dev/null & \
ffmpeg -f mpegts -i "concat:temp1|temp2" -c copy -bsf:a aac_adtstoasc output.mp4

所有MPEG格式(MPEG-4 Part 10 / AVC, MPEG-4 Part 2, MPEG-2 Video, MPEG-1 Audio Layer II,
MPEG-2 Audio Layer III (MP3), MPEG-4 Part III (AAC)).都可以转换成MPEG-TS.但是其中的一些参数需要改变,比如-bsf比特流过滤器需要改变

合并音频和视频

默认情况下,ffmpeg只会处理一个音频流和一个视频流,

先给命令:

ffmpeg -i input.mp4 -i input.mp3 -c copy -map 0:v:0 -map 1:a:0 output.mp4

相关解释:

  • map 参数制指定了从哪一个输入流中映射到输出中。

  • 0:v:0 从第一个输出文件中取第一个视频流,1:a:0从第二个文件中取第一个音频流。 v/a参数不是必需的。
    但是如果输入文件中包含多个流,这样有助于消除歧义。

  • 如果你的音频流时长超过视频流,或者相反,你可以使用-shortest参数,使ffmpeg参数在处理到两个输入短的结束时结束。

  • -c copy 复制音频流和视频流,这意味着进程会处理的更快,并且质量也与之前一样。但是在添加一个wav音频到视频中时,最好先
    压缩一下音频。例如:
    ffmpeg -i input.mp4 -i input.wav -c:v copy -map 0:v:0 -map 1:a:0 -c:a aac -b:a 192k output.mp4
    命令中,我们复制了视频流,但是使用ffmpeg内置的AAC编码器重编码了音频,设置为了192kBit/s.

  • 如果你的输出并不支持特定的编解码器, 例如(添加WAV到MP4,或者AAC到AVI中)重编码也是需要的。

我的解决方案:

由于需要合并片段文件和相应的音频文件,首先会拆离视频文件中的音频文件, 并与另外的音频文件混合。可以使用sox或者ffmpeg

然后在执行连接命令。

命令如下:

ffmpeg -hide_banner -f concat -i list.txt -i if.mp3 -c:v copy -c:a aac -strict -2 -map 0:v:0 -map 1:a:0  test.mp4

参考资料:




  • 2019-08-15 13:32:18

    Node.js是如何解决服务器高性能瓶颈问题的

    在Java、PHP或者.net等服务器端语言中,会为每一个客户端连接创建一个新的线程。而每个线程需要耗费大约2MB内存。也就是说,理论上,一个8GB内存的服务器可以同时连接的最大用户数为4000个左右。要让Web应用程序支持更多的用户,就需要增加服务器的数量,而Web应用程序的硬件成本当然就上升了。

  • 2019-08-15 13:33:53

    nodejs的10个性能优化技巧

    在我接触JavaScript(无论浏览器还是NodeJS)的时间里,总是遇到有朋友有多线程的需求。而在NodeJS方面,有朋友甚至直接说到,NodeJS是单线程的,无法很好的利用多核CPU。那么我们在使用过程中,就要非常注意性能优化了

  • 2019-08-16 13:18:48

    使用ffmpeg进行ts切片并AES-128加密

    由于解密的key文件都是公开的,所以并不能算上完全加密,用户只要把你的key+m3u8里的ts切片文件全部下载,用ffmpeg还是能解,这时就要考虑url的key防止用户直接下载和盗链。 ​

  • 2019-08-18 22:22:54

    Error:error: unable to remove file: Permission denied

    JNI里写的C++增加了函数或修改了,如果此时是Debug模式下,而且还没退出程序,就出现这个Permission denied的提示。解决也很简单:就是退出App即可。如果退出无响应,直接拔usb,重新插上也可以

  • 2019-08-19 10:24:29

    浅析Express中的路由与应用模式

    Express是一个基于Node.js的轻量级web开发框架,具有体积小,使用灵活等特点。查看Express的源码,如果不计供使用的中间件,主体框架只有一千余行代码,非常简练。

  • 2019-08-19 15:50:17

    记录PHP的进程和线程理解

    线程是进程的一个执行流,线程不能分配系统资源,它是进程的一部分,比进程更小的独立运行的单位。 解释一下:进程有两个特性:一是资源的所有权,一个是调度执行(指令集),线程是调度执行中的一部分,是指进程执行过程的路径,也叫程序执行流。线程有时候也叫轻量级进程。

  • 2019-08-20 08:51:52

    一台Linux服务器可以负载多少个连接?

    我们在压测一台目标服务器,想看下负载的连接数,当我们压到一定数量的时候,控制台突然报"too many open files",这是因为linux系统创建一个TCP连接的时候,都会创建一个socket句柄,每个socket句柄就是一个文件句柄。

  • 2019-08-20 08:56:42

    Linux下Http高并发参数优化之TCP参数

    Linux 内核参数考虑的是最通用场景,并不符合用于支持高并发访问的Web服务器的定义,所以需要修改Linux内核参数。其次,对 Nginx 的一些参数,也需要根据服务情况进行调整。

  • 2019-08-20 11:05:30

    php,nginx,线程和进程分析

    大多数的 Linux 程序都倾向于使用进程而不是线程,因为 Linux 下相对来说创建进程的开销比较小,而 Linux 的线程功能又不是很强大。