ZLMediaKit icon indicating copy to clipboard operation
ZLMediaKit copied to clipboard

[BUG] RK3588使用mk动态库,rtsp推流时每隔60帧出现一次耗时过高异常

Open TRYOKETHEPEN opened this issue 1 year ago • 3 comments

现象描述

使用RK3588开发板,在输入帧上绘制推理结果框,通过mpp硬件编码后,更新推流媒体时,每间隔60帧,会出现一次耗时尖峰。 项目流程如下图: 流程图 每一帧的总处理(从输入帧到更新推流媒体)耗时为40ms左右,但是每隔60帧,会出现一帧耗时在100ms左右,称为耗时尖峰。 通过注释相关代码,定位到是更新推流媒体这三行代码导致的: 推流相关2

如果mpp编码格式及推流媒体格式为H.264,则是第63、123、183、...帧出现耗时尖峰(帧序号从1开始)。 如果mpp编码格式及推流媒体格式为H.265,则是第62、122、182、...帧出现耗时尖峰。

如何复现?

100%出现。 (1)输入视频流为640*360,30fps,H.265,尝试更换输入视频流,现象不变。 (2)尝试更改推流参数: 推流相关1 不指定codec_args v_args的具体内容,或者将v_args.video.fps分别修改为30/20/60,现象均不变。

相关日志或截图

没有报错信息,只是耗时异常

展开查看详细日志
日志内容...

配置

这里也有一个疑问:使用.so动态库,配置文件实际上有作用吗?之前尝试推流本地mp4,修改配置文件后,编译时仍然报错“创建MP4点播失败,请编译时打开"ENABLE_MP4"选项”。

展开查看详细配置
## 配置文件影响性能的参数

1、protocol.enable_xxx

#控制转协议开关,关闭某些协议节省cpu和内存。

2、protocol.xxx_demand

#控制按需转协议,开启转协议且按需转协议时,无人观看时节省cpu和内存,但是第一个播放器无法秒开,影响体验

3、protocol.paced_sender_ms

#平滑发送定时器频率,用于解决数据源发送不平滑导致转发不平滑播放器卡顿问题,开启后定时器根据数据时间戳驱动数据发送,提高用户体验。 #但是增加cpu和内存使用。定时器间隔越小,cpu占用越高,但是平滑度越好,建议设置30~100ms。此功能结合protocol.modify_stamp为2(抑制时间戳跳跃)最佳。

4、general.mergeWriteMS

#开启合并写,减少发送数据时系统调用次数以及线程间数据共享频率,大大提高转发性能,但是牺牲播放延时和发送平滑度。

5、rtp_proxy.gop_cache

#开启startSendRtp级联接口的gop缓存功能,用于国标级联秒开。该选项不影响zlmediakit对外提供直播服务的秒开。 #开启该选项后增加内存使用,对cpu影响较小,如果不调用startSendRtp接口,建议关闭。

6、hls.fileBufSize

#调整该配置可以提高hls协议写磁盘io性能。

7、record.fileBufSize

#调整该配置可以提高mp4录制写磁盘io性能。

[api] #是否调试http api,启用调试后,会打印每次http请求的内容和回复 apiDebug=1 #一些比较敏感的http api在访问时需要提供secret,否则无权限调用 #如果是通过127.0.0.1访问,那么可以不提供secret secret=035c73f7-bb6b-4889-a715-d9eb2d1925cc #截图保存路径根目录,截图通过http api(/index/api/getSnap)生成和获取 snapRoot=./www/snap/ #默认截图图片,在启动FFmpeg截图后但是截图还未生成时,可以返回默认的预设图片 defaultSnap=./www/logo.png #downloadFile http接口可访问文件的根目录,支持多个目录,不同目录通过分号(;)分隔 downloadRoot=./www

[ffmpeg] #FFmpeg可执行程序路径,支持相对路径/绝对路径 bin=/usr/bin/ffmpeg #FFmpeg拉流再推流的命令模板,通过该模板可以设置再编码的一些参数 cmd=%s -re -i %s -c:a aac -strict -2 -ar 44100 -ab 48k -c:v libx264 -f flv %s #FFmpeg生成截图的命令,可以通过修改该配置改变截图分辨率或质量 snap=%s -i %s -y -f mjpeg -frames:v 1 %s #FFmpeg日志的路径,如果置空则不生成FFmpeg日志 #可以为相对(相对于本可执行程序目录)或绝对路径 log=./ffmpeg/ffmpeg.log

自动重启的时间(秒), 默认为0, 也就是不自动重启. 主要是为了避免长时间ffmpeg拉流导致的不同步现象

restart_sec=0

#转协议相关开关;如果addStreamProxy api和on_publish hook回复未指定转协议参数,则采用这些配置项 [protocol] #转协议时,是否开启帧级时间戳覆盖

0:采用源视频流绝对时间戳,不做任何改变

1:采用zlmediakit接收数据时的系统时间戳(有平滑处理)

2:采用源视频流时间戳相对时间戳(增长量),有做时间戳跳跃和回退矫正

modify_stamp=2 #转协议是否开启音频 enable_audio=0 #添加acc静音音频,在关闭音频时,此开关无效 add_mute_audio=0 #无人观看时,是否直接关闭(而不是通过on_none_reader hook返回close) #此配置置1时,此流如果无人观看,将不触发on_none_reader hook回调, #而是将直接关闭流 auto_close=0

#推流断开后可以在超时时间内重新连接上继续推流,这样播放器会接着播放。 #置0关闭此特性(推流断开会导致立即断开播放器) #此参数不应大于播放器超时时间;单位毫秒 continue_push_ms=15000

#平滑发送定时器间隔,单位毫秒,置0则关闭;开启后影响cpu性能同时增加内存 #该配置开启后可以解决一些流发送不平滑导致zlmediakit转发也不平滑的问题 paced_sender_ms=0

#是否开启转换为hls(mpegts) enable_hls=1 #是否开启转换为hls(fmp4) enable_hls_fmp4=1 #是否开启MP4录制 enable_mp4=1 #是否开启转换为rtsp/webrtc enable_rtsp=1 #是否开启转换为rtmp/flv enable_rtmp=1 #是否开启转换为http-ts/ws-ts enable_ts=1 #是否开启转换为http-fmp4/ws-fmp4 enable_fmp4=1

#是否将mp4录制当做观看者 mp4_as_player=1 #mp4切片大小,单位秒 mp4_max_second=3600 #mp4录制保存路径 mp4_save_path=./www

#hls录制保存路径 hls_save_path=./www

以下是按需转协议的开关,在测试ZLMediaKit的接收推流性能时,请把下面开关置1
如果某种协议你用不到,你可以把以下开关置1以便节省资源(但是还是可以播放,只是第一个播放者体验稍微差点),
如果某种协议你想获取最好的用户体验,请置0(第一个播放者可以秒开,且不花屏)

#hls协议是否按需生成,如果hls.segNum配置为0(意味着hls录制),那么hls将一直生成(不管此开关) hls_demand=1 #rtsp[s]协议是否按需生成 rtsp_demand=0 #rtmp[s]、http[s]-flv、ws[s]-flv协议是否按需生成 rtmp_demand=1 #http[s]-ts协议是否按需生成 ts_demand=1 #http[s]-fmp4、ws[s]-fmp4协议是否按需生成 fmp4_demand=1

[general] #是否启用虚拟主机 enableVhost=0 #播放器或推流器在断开后会触发hook.on_flow_report事件(使用多少流量事件), #flowThreshold参数控制触发hook.on_flow_report事件阈值,使用流量超过该阈值后才触发,单位KB flowThreshold=1024 #播放最多等待时间,单位毫秒 #播放在播放某个流时,如果该流不存在, #ZLMediaKit会最多让播放器等待maxStreamWaitMS毫秒 #如果在这个时间内,该流注册成功,那么会立即返回播放器播放成功 #否则返回播放器未找到该流,该机制的目的是可以先播放再推流 maxStreamWaitMS=15000 #某个流无人观看时,触发hook.on_stream_none_reader事件的最大等待时间,单位毫秒 #在配合hook.on_stream_none_reader事件时,可以做到无人观看自动停止拉流或停止接收推流 streamNoneReaderDelayMS=20000 #拉流代理时如果断流再重连成功是否删除前一次的媒体流数据,如果删除将重新开始, #如果不删除将会接着上一次的数据继续写(录制hls/mp4时会继续在前一个文件后面写) resetWhenRePlay=1 #合并写缓存大小(单位毫秒),合并写指服务器缓存一定的数据后才会一次性写入socket,这样能提高性能,但是会提高延时 #开启后会同时关闭TCP_NODELAY并开启MSG_MORE mergeWriteMS=0 #服务器唯一id,用于触发hook时区别是哪台服务器 mediaServerId=your_server_id

#最多等待未初始化的Track时间,单位毫秒,超时之后会忽略未初始化的Track wait_track_ready_ms=10000 #如果流只有单Track,最多等待若干毫秒,超时后未收到其他Track的数据,则认为是单Track #如果协议元数据有声明特定track数,那么无此等待时间 wait_add_track_ms=3000 #如果track未就绪,我们先缓存帧数据,但是有最大个数限制,防止内存溢出 unready_frame_cache=100

[hls] #hls写文件的buf大小,调整参数可以提高文件io性能 fileBufSize=65536 #hls最大切片时间 segDur=2 #m3u8索引中,hls保留切片个数(实际保留切片个数大2~3个) #如果设置为0,则不删除切片,而是保存为点播 segNum=3 #HLS切片延迟个数,大于0将生成hls_delay.m3u8文件,0则不生成 segDelay=0 #HLS切片从m3u8文件中移除后,继续保留在磁盘上的个数 segRetain=5 #是否广播 hls切片(ts/fmp4)完成通知(on_record_ts) broadcastRecordTs=0 #直播hls文件删除延时,单位秒,issue: #913 deleteDelaySec=10 #是否保留hls文件,此功能部分等效于segNum=0的情况 #不同的是这个保留不会在m3u8文件中体现 #0为不保留,不起作用 #1为保留,则不删除hls文件,如果开启此功能,注意磁盘大小,或者定期手动清理hls文件 segKeep=0 #如果设置为1,则第一个切片长度强制设置为1个GOP。当GOP小于segDur,可以提高首屏速度 fastRegister=0

[hook] #是否启用hook事件,启用后,推拉流都将进行鉴权 enable=0 #播放器或推流器使用流量事件,置空则关闭 on_flow_report= #访问http文件鉴权事件,置空则关闭鉴权 on_http_access= #播放鉴权事件,置空则关闭鉴权 on_play= #推流鉴权事件,置空则关闭鉴权 on_publish= #录制mp4切片完成事件 on_record_mp4=

录制 hls ts(或fmp4) 切片完成事件

on_record_ts= #rtsp播放鉴权事件,此事件中比对rtsp的用户名密码 on_rtsp_auth= #rtsp播放是否开启专属鉴权事件,置空则关闭rtsp鉴权。rtsp播放鉴权还支持url方式鉴权 #建议开发者统一采用url参数方式鉴权,rtsp用户名密码鉴权一般在设备上用的比较多 #开启rtsp专属鉴权后,将不再触发on_play鉴权事件 on_rtsp_realm= #远程telnet调试鉴权事件 on_shell_login= #直播流注册或注销事件 on_stream_changed= #过滤on_stream_changed hook的协议类型,可以选择只监听某些感兴趣的协议;置空则不过滤协议 stream_changed_schemas=rtsp/rtmp/fmp4/ts/hls/hls.fmp4 #无人观看流事件,通过该事件,可以选择是否关闭无人观看的流。配合general.streamNoneReaderDelayMS选项一起使用 on_stream_none_reader= #播放时,未找到流事件,通过配合hook.on_stream_none_reader事件可以完成按需拉流 on_stream_not_found= #服务器启动报告,可以用于服务器的崩溃重启事件监听 on_server_started= #服务器退出报告,当服务器正常退出时触发 on_server_exited= #server保活上报 on_server_keepalive= #发送rtp(startSendRtp)被动关闭时回调 on_send_rtp_stopped= #rtp server 超时未收到数据 on_rtp_server_timeout=

#hook api最大等待回复时间,单位秒 timeoutSec=10 #keepalive hook触发间隔,单位秒,float类型 alive_interval=10.0 #hook通知失败重试次数,正整数。为0不重试,1时重试一次,以此类推 retry=1 #hook通知失败重试延时,单位秒,float型 retry_delay=3.0

[cluster] #设置源站拉流url模板, 格式跟printf类似,第一个%s指定app,第二个%s指定stream_id, #开启集群模式后,on_stream_not_found和on_stream_none_reader hook将无效. #溯源模式支持以下类型: #rtmp方式: rtmp://127.0.0.1:1935/%s/%s #rtsp方式: rtsp://127.0.0.1:554/%s/%s #hls方式: http://127.0.0.1:80/%s/%s/hls.m3u8 #http-ts方式: http://127.0.0.1:80/%s/%s.live.ts #支持多个源站,不同源站通过分号(;)分隔 origin_url= #溯源总超时时长,单位秒,float型;假如源站有3个,那么单次溯源超时时间为timeout_sec除以3 #单次溯源超时时间不要超过general.maxStreamWaitMS配置 timeout_sec=15 #溯源失败尝试次数,-1时永久尝试 retry_count=3

[http] #http服务器字符编码,windows上默认gb2312 charSet=utf-8 #http链接超时时间 keepAliveSecond=30 #http请求体最大字节数,如果post的body太大,则不适合缓存body在内存 maxReqSize=40960 #404网页内容,用户可以自定义404网页 #notFound=

404 Not Found

您访问的资源不存在!


ZLMediaKit-4.0
#http服务器监听端口 port=80 #http文件服务器根目录 #可以为相对(相对于本可执行程序目录)或绝对路径 rootPath=./www #http文件服务器读文件缓存大小,单位BYTE,调整该参数可以优化文件io性能 sendBufSize=65536 #https服务器监听端口 sslport=443 #是否显示文件夹菜单,开启后可以浏览文件夹 dirMenu=1 #虚拟目录, 虚拟目录名和文件路径使用","隔开,多个配置路径间用";"隔开 #例如赋值为 app_a,/path/to/a;app_b,/path/to/b 那么 #访问 http://127.0.0.1/app_a/file_a 对应的文件路径为 /path/to/a/file_a #访问 http://127.0.0.1/app_b/file_b 对应的文件路径为 /path/to/b/file_b #访问其他http路径,对应的文件路径还是在rootPath内 virtualPath= #禁止后缀的文件使用mmap缓存,使用“,”隔开 #例如赋值为 .mp4,.flv #那么访问后缀为.mp4与.flv 的文件不缓存 forbidCacheSuffix= #可以把http代理前真实客户端ip放在http头中:https://github.com/ZLMediaKit/ZLMediaKit/issues/1388 #切勿暴露此key,否则可能导致伪造客户端ip forwarded_ip_header= #默认允许所有跨域请求 allow_cross_domains=1 #允许访问http api和http文件索引的ip地址范围白名单,置空情况下不做限制 allow_ip_range=::1,127.0.0.1,172.16.0.0-172.31.255.255,192.168.0.0-192.168.255.255,10.0.0.0-10.255.255.255

[multicast] #rtp组播截止组播ip地址 addrMax=239.255.255.255 #rtp组播起始组播ip地址 addrMin=239.0.0.0 #组播udp ttl udpTTL=64

[record] #mp4录制或mp4点播的应用名,通过限制应用名,可以防止随意点播 #点播的文件必须放置在此文件夹下 appName=record #mp4录制写文件缓存,单位BYTE,调整参数可以提高文件io性能 fileBufSize=65536 #mp4点播每次流化数据量,单位毫秒, #减少该值可以让点播数据发送量更平滑,增大该值则更节省cpu资源 sampleMS=500 #mp4录制完成后是否进行二次关键帧索引写入头部 fastStart=0 #MP4点播(rtsp/rtmp/http-flv/ws-flv)是否循环播放文件 fileRepeat=0

[rtmp] #rtmp必须在此时间内完成握手,否则服务器会断开链接,单位秒 handshakeSecond=15 #rtmp超时时间,如果该时间内未收到客户端的数据, #或者tcp发送缓存超过这个时间,则会断开连接,单位秒 keepAliveSecond=15 #rtmp服务器监听端口 port=1935 #rtmps服务器监听地址 sslport=0

rtmp是否直接代理模式

directProxy=1 #h265 rtmp打包采用增强型rtmp标准还是国内拓展标准 enhanced=0

[rtp] #音频mtu大小,该参数限制rtp最大字节数,推荐不要超过1400 #加大该值会明显增加直播延时 audioMtuSize=600 #视频mtu大小,该参数限制rtp最大字节数,推荐不要超过1400 videoMtuSize=1400 #rtp包最大长度限制,单位KB,主要用于识别TCP上下文破坏时,获取到错误的rtp rtpMaxSize=10

rtp 打包时,低延迟开关,默认关闭(为0),h264存在一帧多个slice(NAL)的情况,在这种情况下,如果开启可能会导致画面花屏

lowLatency=0

H264 rtp打包模式是否采用stap-a模式(为了在老版本浏览器上兼容webrtc)还是采用Single NAL unit packet per H.264 模式

有些老的rtsp设备不支持stap-a rtp,设置此配置为0可提高兼容性

h264_stap_a=1

[rtp_proxy] #导出调试数据(包括rtp/ps/h264)至该目录,置空则关闭数据导出 dumpDir= #udp和tcp代理服务器,支持rtp(必须是ts或ps类型)代理 port=10000 #rtp超时时间,单位秒 timeoutSec=15 #随机端口范围,最少确保36个端口 #该范围同时限制rtsp服务器udp端口范围 port_range=30000-35000 #rtp h264 负载的pt h264_pt=98 #rtp h265 负载的pt h265_pt=99 #rtp ps 负载的pt ps_pt=96 #rtp opus 负载的pt opus_pt=100 #RtpSender相关功能是否提前开启gop缓存优化级联秒开体验,默认开启 #如果不调用startSendRtp相关接口,可以置0节省内存 gop_cache=1

[rtc] #rtc播放推流、播放超时时间 timeoutSec=15 #本机对rtc客户端的可见ip,作为服务器时一般为公网ip,可有多个,用','分开,当置空时,会自动获取网卡ip #同时支持环境变量,以$开头,如"$EXTERN_IP"; 请参考:https://github.com/ZLMediaKit/ZLMediaKit/pull/1786 externIP= #rtc udp服务器监听端口号,所有rtc客户端将通过该端口传输stun/dtls/srtp/srtcp数据, #该端口是多线程的,同时支持客户端网络切换导致的连接迁移 #需要注意的是,如果服务器在nat内,需要做端口映射时,必须确保外网映射端口跟该端口一致 port=8000 #rtc tcp服务器监听端口号,在udp 不通的情况下,会使用tcp传输数据 #该端口是多线程的,同时支持客户端网络切换导致的连接迁移 #需要注意的是,如果服务器在nat内,需要做端口映射时,必须确保外网映射端口跟该端口一致 tcpPort = 8000 #设置remb比特率,非0时关闭twcc并开启remb。该设置在rtc推流时有效,可以控制推流画质 #目前已经实现twcc自动调整码率,关闭remb根据真实网络状况调整码率 rembBitRate=0 #rtc支持的音频codec类型,在前面的优先级更高 #以下范例为所有支持的音频codec preferredCodecA=PCMU,PCMA,opus,mpeg4-generic #rtc支持的视频codec类型,在前面的优先级更高 #以下范例为所有支持的视频codec preferredCodecV=H264,H265,AV1,VP9,VP8

#webrtc比特率设置 start_bitrate=0 max_bitrate=0 min_bitrate=0

[srt] #srt播放推流、播放超时时间,单位秒 timeoutSec=5 #srt udp服务器监听端口号,所有srt客户端将通过该端口传输srt数据, #该端口是多线程的,同时支持客户端网络切换导致的连接迁移 port=9000 #srt 协议中延迟缓存的估算参数,在握手阶段估算rtt ,然后latencyMul*rtt 为最大缓存时长,此参数越大,表示等待重传的时长就越大 latencyMul=4 #包缓存的大小 pktBufSize=8192

[rtsp] #rtsp专有鉴权方式是采用base64还是md5方式 authBasic=0 #rtsp拉流、推流代理是否是直接代理模式 #直接代理后支持任意编码格式,但是会导致GOP缓存无法定位到I帧,可能会导致开播花屏 #并且如果是tcp方式拉流,如果rtp大于mtu会导致无法使用udp方式代理 #假定您的拉流源地址不是264或265或AAC,那么你可以使用直接代理的方式来支持rtsp代理 #如果你是rtsp推拉流,但是webrtc播放,也建议关闭直接代理模式, #因为直接代理时,rtp中可能没有sps pps,会导致webrtc无法播放; 另外webrtc也不支持Single NAL Unit Packets类型rtp #默认开启rtsp直接代理,rtmp由于没有这些问题,是强制开启直接代理的 directProxy=0 #rtsp必须在此时间内完成握手,否则服务器会断开链接,单位秒 handshakeSecond=15 #rtsp超时时间,如果该时间内未收到客户端的数据, #或者tcp发送缓存超过这个时间,则会断开连接,单位秒 keepAliveSecond=15 #rtsp服务器监听地址 port=554 #rtsps服务器监听地址 sslport=0 #rtsp 转发是否使用低延迟模式,当开启时,不会缓存rtp包,来提高并发,可以降低一帧的延迟 lowLatency=0 #强制协商rtp传输方式 (0:TCP,1:UDP,2:MULTICAST,-1:不限制) #当客户端发起RTSP SETUP的时候如果传输类型和此配置不一致则返回461 Unsupported transport #迫使客户端重新SETUP并切换到对应协议。目前支持FFMPEG和VLC rtpTransportType=-1 [shell] #调试telnet服务器接受最大bufffer大小 maxReqSize=1024 #调试telnet服务器监听端口 port=0

各种环境信息

  • 代码提交记录/git commit hash:
  • 操作系统及版本:Debian 11, 内核5.10.160
  • 硬件信息:RK3588,aarch64平台
  • 其他需要补充的信息:动态库:不知道怎么查看版本,不会编译动态库,用的是:https://github.com/airockchip/rknn-toolkit2/tree/master/rknpu2/examples/3rdparty/zlmediakit

TRYOKETHEPEN avatar Feb 21 '24 02:02 TRYOKETHEPEN

这应该是关键帧比较大 大量的memcpy导致的。 zlm在创建mk_frame时,也可以不拷贝的:

/**
 * 创建frame对象,并返回其引用
 * @param codec_id 编解码类型,请参考MKCodecXXX定义
 * @param dts 解码时间戳,单位毫秒
 * @param pts 显示时间戳,单位毫秒
 * @param data 单帧数据
 * @param size 单帧数据长度
 * @param cb data指针free释放回调, 如果为空,内部会拷贝数据
 * @param user_data data指针free释放回调用户指针
 * @return frame对象引用
 */
API_EXPORT mk_frame API_CALL mk_frame_create(int codec_id, uint64_t dts, uint64_t pts, const char *data, size_t size,
                                            on_mk_frame_data_release cb, void *user_data);

请设置on_mk_frame_data_release回调。

xia-chu avatar Feb 21 '24 03:02 xia-chu

这应该是关键帧比较大 大量的memcpy导致的。 zlm在创建mk_frame时,也可以不拷贝的:

/**
 * 创建frame对象,并返回其引用
 * @param codec_id 编解码类型,请参考MKCodecXXX定义
 * @param dts 解码时间戳,单位毫秒
 * @param pts 显示时间戳,单位毫秒
 * @param data 单帧数据
 * @param size 单帧数据长度
 * @param cb data指针free释放回调, 如果为空,内部会拷贝数据
 * @param user_data data指针free释放回调用户指针
 * @return frame对象引用
 */
API_EXPORT mk_frame API_CALL mk_frame_create(int codec_id, uint64_t dts, uint64_t pts, const char *data, size_t size,
                                            on_mk_frame_data_release cb, void *user_data);

请设置on_mk_frame_data_release回调。

感谢解答! 请问回调里需要做什么操作吗?我修改了如下,还是有一些不规则出现的耗时异常: 1 2 修改前: 未设置回调 修改后: 设置回调

TRYOKETHEPEN avatar Feb 21 '24 06:02 TRYOKETHEPEN

上面的信息都是在对输出推流没有任何消费的前提下的。 使用VLC读取输出推流,发现了新的现象。

汇总如下: 横轴为时间,纵轴为每帧的耗时(ms)。 H.264输出格式,未设置回调。输出推流被消费前,出现的规则尖峰的间隔即为上面提到的60帧: H264不设置回调 H.265输出格式,未设置回调。输出推流被消费前,出现的规则尖峰的间隔即为上面提到的60帧: H265不设置回调 H.264输出格式,设置了回调: H264设置回调 H.265输出格式,设置了回调。输出推流被消费前,出现的规则尖峰的间隔为60帧: H265设置回调 花屏现象:”已解码格式“会在如图和空白之间快速跳变 花屏

TRYOKETHEPEN avatar Feb 21 '24 07:02 TRYOKETHEPEN

在回调中free(ptr)啊

xia-chu avatar Feb 22 '24 04:02 xia-chu

在回调中free(ptr)啊

抱歉前段时间出国了没看。 mk_frame_create()之后取消free(enc_data),在回调中free(ptr),耗时尖峰现象有所缓解。

TRYOKETHEPEN avatar Feb 28 '24 01:02 TRYOKETHEPEN

你可以先注释掉mk_media_input的调用 看看还有没有问题。 我不觉得一定是zlm的问题,你也可以pref top看下。

另外你可以适当关闭一些转协议试试,你为什么要开这么多协议:

enable_hls=1

#是否开启转换为hls(fmp4)

enable_hls_fmp4=1

#是否开启MP4录制

enable_mp4=1

#是否开启转换为rtsp/webrtc

enable_rtsp=1

#是否开启转换为rtmp/flv

enable_rtmp=1

#是否开启转换为http-ts/ws-ts

enable_ts=1

#是否开启转换为http-fmp4/ws-fmp4

enable_fmp4=1

xia-chu avatar Mar 07 '24 02:03 xia-chu

你可以先注释掉mk_media_input的调用 看看还有没有问题。 我不觉得一定是zlm的问题,你也可以pref top看下。

另外你可以适当关闭一些转协议试试,你为什么要开这么多协议:

enable_hls=1

#是否开启转换为hls(fmp4)

enable_hls_fmp4=1

#是否开启MP4录制

enable_mp4=1

#是否开启转换为rtsp/webrtc

enable_rtsp=1

#是否开启转换为rtmp/flv

enable_rtmp=1

#是否开启转换为http-ts/ws-ts

enable_ts=1

#是否开启转换为http-fmp4/ws-fmp4

enable_fmp4=1

感谢回复。 (1)注释掉mk_media_input的调用就不会出现这个尖峰了。 (2)关闭rtsp以外的转协议后,还是会出现周期性尖峰。但是尖峰高度有所降低。 (3)将lowLatency设为1,尖峰现象就消失了。

TRYOKETHEPEN avatar Mar 08 '24 09:03 TRYOKETHEPEN

lowLatency 1,你注释这个后,数据都不会有了当然不会消耗cpu了 2,正常 3,lowLatency 是用来控制算法缓存rtp包的的选项,设置为1 就是来包后马上发送不会缓存,这个应该是正常的,但是应该是增加平均cpu的消耗来达到的

xiongguangjie avatar Mar 11 '24 01:03 xiongguangjie

估计是大量的memcopy导致尖峰

xia-chu avatar Mar 11 '24 08:03 xia-chu