Clone
17
v1_CN_FFMPEG
winlin edited this page 2022-01-06 11:57:15 +08:00
This file contains ambiguous Unicode characters

This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.

HOME > CN > Transcode

Live Streaming Transcode

SRS可以对推送到SRS的RTMP流进行转码然后输出到RTMP服务器也可以是SRS自己

Use Scenario

FFMPEG的重要应用场景包括

  • 推送一路高码率转多路输出。譬如游戏直播中推送一路1080p流到SRSSRS可以转码输出1080p/720p/576p多路低码率可以给移动设备观看。这样节省了推流带宽一般源站为BGP带宽很贵也减轻了客户端压力譬如客户端边玩游戏边直播
  • 支持多屏输出。譬如网页推流主播编码为vp6/mp3或speex推流到SRS后无法支持HLS要求h264+aac可以转码成h264+aac后切片成HLS或者推送到其他服务器再分发。
  • 加水印。适用于需要对流进行加水印的情况譬如打上自己的logo。SRS支持文字水印和图片水印也可以支持视频作为水印或者将两路流叠加参考ffmpeg的用法
  • 其他滤镜SRS支持所有ffmpeg的滤镜。

Workflow

SRS转码的主要流程包括

  1. 编码器推送RTMP流到SRS的vhost。
  2. SRS的vhost若配置了转码则进行转码。
  3. 转码后按照配置推送到SRS本身或者其他RTMP服务器。

Transcode Config

SRS可以对vhost的所有的流转码或者对某些app的流转码或者对某些流转码。

listen              1935;
vhost __defaultVhost__ {
    # 对所有流转码
    transcode {
        enabled     on;
        ffmpeg      ./objs/ffmpeg/bin/ffmpeg;
        engine ff {
            # whether the engine is enabled
            # default: off.
            enabled         on;
            # ffmpeg filters, follows the main input.
            vfilter {
            }
            # video encoder name. can be:
            # libx264: use h.264(libx264) video encoder.
            # copy: donot encoder the video stream, copy it.
            # vn: disable video output.
            vcodec          libx264;
            # video bitrate, in kbps
            vbitrate        1500;
            # video framerate.
            vfps            25;
            # video width, must be even numbers.
            vwidth          768;
            # video height, must be even numbers.
            vheight         320;
            # the max threads for ffmpeg to used.
            vthreads        12;
            # x264 profile, @see x264 -help, can be:
            # high,main,baseline
            vprofile        main;
            # x264 preset, @see x264 -help, can be: 
            # ultrafast,superfast,veryfast,faster,fast
            # medium,slow,slower,veryslow,placebo
            vpreset         medium;
            # other x264 or ffmpeg video params
            vparams {
            }
            # audio encoder name. can be:
            # libaacplus: use aac(libaacplus) audio encoder.
            # copy: donot encoder the audio stream, copy it.
            # an: disable audio output.
            acodec          libaacplus;
            # audio bitrate, in kbps. [16, 72] for libaacplus.
            abitrate        70;
            # audio sample rate. for flv/rtmp, it must be:
            # 44100,22050,11025,5512
            asample_rate    44100;
            # audio channel, 1 for mono, 2 for stereo.
            achannels       2;
            # other ffmpeg audio params
            aparams {
            }
            # output stream. variables:
            # [vhost] the input stream vhost.
            # [port] the intput stream port.
            # [app] the input stream app.
            # [stream] the input stream name.
            # [engine] the tanscode engine name.
            output          rtmp://127.0.0.1:[port]/[app]?vhost=[vhost]/[stream]_[engine];
        }
    }
}

该配置对频道的所有流转码。譬如:

  • 推送流rtmp://dev:1935/live/livestream
  • 观看原始流rtmp://dev:1935/live/livestream
  • 观看转码流rtmp://dev:1935/live/livestream_ff

输出配置使用了变量替换,主要的参数是:

  • [vhost] 输入流的vhost。譬如dev
  • [port] 输入流的端口。譬如1935
  • [app] 输入流的app。譬如live
  • [stream] 输入流名称。譬如livestream
  • [engine] 转码engine名称engine后面就是名称。譬如ff 注意转码会使用自动检测保证推送到自己的流不会被再次转码。但转码推送到SRS自己的流可以被切片成HLS。譬如若开启了HLS上面的live/livestream和转码出来的流live/livestream_ff都能观看HLS。

对app或流转码时只要在transcode后面加app和stream就可以。譬如

listen              1935;
vhost __defaultVhost__ {
    # 对app为live的所有流转码
    transcode live{
    }
}

以及对指定的流转码:

listen              1935;
vhost __defaultVhost__ {
    # 对app为live并且流名称为livestream的流转码
    transcode live/livestream{
    }
}

Transcode Rulers

SRS的转码参数全是FFMPEG的参数有些参数SRS做了自定义见下表。

SRS参数 FFMPEG参数 实例 说明
vcodec vcodec ffmpeg ... -vcodec libx264 ... 指定视频编码器
vbitrate b:v ffmpeg ... -b:v 500000 ... 输出的视频码率
vfps r ffmpeg ... -r 25 ... 输出的视频帧率
vwidth/vheight s ffmpeg ... -s 400x300 -aspect 400:300 ... 输出的视频宽度x高度以及宽高比
vthreads threads ffmpeg ... -threads 8 ... 编码线程数
vprofile profile:v ffmpeg ... -profile:v high ... 编码x264的profile
vpreset preset ffmpeg ... -preset medium ... 编码x264的preset
acodec acodec ffmpeg ... -acodec libaacplus ... 音频编码器
abitrate b:a ffmpeg ... -b:a 70000 ... 音频输出码率。libaacplus16-72k
asample_rate ar ffmpeg ... -ar 44100 ... 音频采样率
achannels ac ffmpeg ... -ac 2 ... 音频声道

另外还有三个是可以加其他ffmpeg参数

  • vfilter添加在vcodec之前的滤镜参数。
  • vparams添加在vcodec之后acodec之前的视频编码参数。
  • aparams添加在acodec之后-y之前的音频编码参数。

这些参数应用的顺序是:

ffmpeg -f flv -i <input_rtmp> {vfilter} -vcodec ... {vparams} -acodec ... {aparams} -f flv -y {output}

具体参数可以查看SRS的日志譬如

[2014-02-28 21:38:09.603][4][trace][start] start transcoder, 
log: ./objs/logs/encoder-__defaultVhost__-live-livestream.log, 
params: ./objs/ffmpeg/bin/ffmpeg -f flv -i 
rtmp://127.0.0.1:1935/live?vhost=__defaultVhost__/livestream 
-vcodec libx264 -b:v 500000 -r 25.00 -s 768x320 -aspect 768:320 
-threads 12 -profile:v main -preset medium -acodec libaacplus 
-b:a 70000 -ar 44100 -ac 2 -f flv 
-y rtmp://127.0.0.1:1935/live?vhost=__defaultVhost__/livestream_ff 

FFMPEG Log Path

FFMPEG启动后SRS会将stdout和stderr都定向到日志文件譬如./objs/logs/encoder-__defaultVhost__-live-livestream.log有时候日志会比较大。可以配置ffmpeg输出较少日志

listen              1935;
vhost __defaultVhost__ {
    transcode {
        enabled     on;
        ffmpeg      ./objs/ffmpeg/bin/ffmpeg;
        engine ff {
            enabled         on;
            vfilter {
                # -v quiet
                v           quiet;
            }
            vcodec          libx264;
            vbitrate        500;
            vfps            25;
            vwidth          768;
            vheight         320;
            vthreads        12;
            vprofile        main;
            vpreset         medium;
            vparams {
            }
            acodec          libaacplus;
            abitrate        70;
            asample_rate    44100;
            achannels       2;
            aparams {
            }
            output          rtmp://127.0.0.1:[port]/[app]?vhost=[vhost]/[stream]_[engine];
        }
    }
}

对ffmpeg添加-v quiet参数即可。

Copy Without Transcode

可以配置vcodec/acodec copy实现不转码。譬如视频为h264编码但是音频是mp3/speex需要转码音频为aac然后切片为HLS输出。

listen              1935;
vhost __defaultVhost__ {
    transcode {
        enabled     on;
        ffmpeg      ./objs/ffmpeg/bin/ffmpeg;
        engine ff {
            enabled         on;
            vcodec          copy;
            acodec          libaacplus;
            abitrate        70;
            asample_rate    44100;
            achannels       2;
            aparams {
            }
            output          rtmp://127.0.0.1:[port]/[app]?vhost=[vhost]/[stream]_[engine];
        }
    }
}

或者拷贝视频和音频:

listen              1935;
vhost __defaultVhost__ {
    transcode {
        enabled     on;
        ffmpeg      ./objs/ffmpeg/bin/ffmpeg;
        engine ff {
            enabled         on;
            vcodec          copy;
            acodec          copy;
            output          rtmp://127.0.0.1:[port]/[app]?vhost=[vhost]/[stream]_[engine];
        }
    }
}

Drop Video or Audio

可以禁用视频或者音频只输出音频或视频。譬如电台可以丢弃视频对音频转码为aac后输出HLS。

可以配置vcodec为vnacodec为an实现禁用。例如

listen              1935;
vhost __defaultVhost__ {
    transcode {
        enabled     on;
        ffmpeg      ./objs/ffmpeg/bin/ffmpeg;
        engine vn {
            enabled         on;
            vcodec          vn;
            acodec          libaacplus;
            abitrate        45;
            asample_rate    44100;
            achannels       2;
            aparams {
            }
            output          rtmp://127.0.0.1:[port]/[app]?vhost=[vhost]/[stream]_[engine];
        }
    }
}

该配置只输出纯音频编码为aac。

Other Transcode Config

conf/full.conf中有很多FFMPEG转码配置的实例也可以参考ffmpeg的命令行。

  • mirror.transcode.srs.com 将视频流上半截,翻转到下半截,看起来像个镜子。
  • drawtext.transcode.srs.com 加文字水印。
  • crop.transcode.srs.com 剪裁视频。
  • logo.transcode.srs.com 添加图片logo。
  • audio.transcode.srs.com 只对音频转码。
  • copy.transcode.srs.com 不转码只转封装类似于SRS的Forward。
  • all.transcode.srs.com 转码参数的详细说明。
  • ffempty.transcode.srs.com 一个ffmpeg的mock不转码只打印参数。
  • app.transcode.srs.com 对指定的app的流转码。
  • stream.transcode.srs.com 对指定的流转码。
  • vn.transcode.srs.com 只输出音频,禁止视频输出。

Transcode on ARM cpu

SRS可以在ARM下调用系统的ffmpeg转码参考Raspberry pi 转码

注意使用自己的工具时需要禁用ffmpeg但是打开transcode选项--with-transcode --without-ffmpeg这样就不会编译ffmpeg但是编译了直播转码功能。参考Build

FFMPEG Transcode the Stream by Flash encoder

flash可以当作编码器推流参考演示中的编码器或者视频会议。flash只支持speex/nellymoser/pcma/pcmu但flash会有一个特性没有声音时就没有音频包。FFMPEG会依赖于这些音频包如果没有会认为没有音频。

所以FFMPEG用来转码flash推上来的RTMP流时可能会有一个问题ffmpeg认为没有音频。

另外FFMPEG取flash的流的时间会很长也可能是在等待这些音频包。

FFMPEG

FFMPEG相关链接

Winlin 2014.2