DM8168 DVRRDK4.0.0.3 H264编码 rtmp播放停顿问题

lei wang18

各位好！我使用的开发环境是DM8168+DVRRDK_04.00.00.03的环境。现在遇到的问题是：

H264编码得到的数据+aac声音数据后publish到rtmp server后，用flash player播放，在每个IDR帧的时候画面都会停顿一下（flash player会提示丢掉了几帧）。保存成mp4后播放正常。

我的参数设置如下：

        pChPrm->enableAnalyticinfo = 0;
        pChPrm->enableWaterMarking = 0;
        pChPrm->enableSVCExtensionFlag = VENC_IH264_SVC_EXTENSION_FLAG_DISABLE;
        pChPrm->encodingPreset     = VENC_XDM_USER_DEFINED;
        pChPrm->maxBitRate         = -1;
        pChPrm->rcType             = VENC_RATE_CTRL_CBR;
        pChPrm->numTemporalLayer   = VENC_TEMPORAL_LAYERS_1;

        pDynPrm->frameRate          = 30; // NOT USED
        pDynPrm->targetBitRate      = 2000 * 1000;
        pDynPrm->intraFrameInterval = 30；
        pDynPrm->inputFrameRate     = pDynPrm->frameRate;
        pDynPrm->rcAlg              = pChPrm->rcType; // MUST be same as pChPrm->rcType
        pDynPrm->qpMin             = 10;
        pDynPrm->qpMax              = 40;
        pDynPrm->qpInit             = -1; // SHOULD BE SET to -1 ALWAYS
        pDynPrm->vbrDuration        = 8;
        pDynPrm->vbrSensitivity     = 0;

非常感谢！！！

11 年多前

0 Chris Meng 11 年多前

TI__Guru**** 155073 points

lei wang18 说：

用flash player播放，在每个IDR帧的时候画面都会停顿一下（flash player会提示丢掉了几帧）。

你用其他有多个IDR帧的h264码流用网络发给flash player播放是否有类似的问题？

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

不会。我有另外的PC下使用IntelMediaSdk编码的相同配置的H264流，使用相同的播放器和rtmpserver，播放非常正常。另外，我把8168编码时的sps调整成和MediaSDK一样也未能解决问题。（FlashPlayer播放时提示丢掉的帧数是固定的）。同时我注意到PPS中的pic_order_present_flag设置为1，MediaSDK里的这个标志是0.另外还尝试过 encodingPreset = VENC_XDM_HIGH_SPEED模式，但这种模式的I帧不是IDR，不能直播，定时foreIDR的话问题依旧。

论坛里面有一个13年的帖子，里面说的应该也是这个问题。我现在DVRRDK的版本改成04.01.00.02。在另一个版本03.00.00.00问题一样。

0 Chris Meng 11 年多前回复 lei wang18

TI__Guru**** 155073 points

你好，

请问你的qpI，qpP设置的是是多少？是-1么？如果是，能否不要设置为-1，而是其他确定的值，看看？

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

你好，感谢回复。

原始的qpI和qpP确实是-1，但调整成确定的值后（分别测试过20-20，10-30），问题依旧存在。

0 Chris Meng 11 年多前回复 lei wang18

TI__Guru**** 155073 points

你好，

pic_order_present_flag=1这个在IVAHD的编码器里面是写死不能改的。

你能否再尝试设置 IH264ENC_Params::picOrderCountType = IH264_POC_TYPE_2 (2)，看是否有改善？

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

你好，

这个已经修改过（encLink_h264.c），代码如下：

staticParams->picOrderCountType = 2;

staticParams->rateControlParams.allFrameSkip = 0;

staticParams->vuiCodingParams.aspectRatioInfoPresentFlag = 1;

staticParams->vuiCodingParams.aspectRatioIdc = 1;

staticParams->log2MaxFNumMinus4 = 4;

staticParams->rateControlParams.qpI = 20;

staticParams->rateControlParams.qpP = 30;

SPS相关的几个修改参数的组合分别测试过，基本没有改善。

Flash播放时，每遇到一个IDR帧，播放器会提示丢掉固定帧数，图像会停顿一下。。。

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

你好，

这个已经修改过（encLink_h264.c），代码如下：

staticParams->picOrderCountType = 2;

staticParams->rateControlParams.allFrameSkip = 0;

staticParams->vuiCodingParams.aspectRatioInfoPresentFlag = 1;

staticParams->vuiCodingParams.aspectRatioIdc = 1;

staticParams->log2MaxFNumMinus4 = 4;

staticParams->rateControlParams.qpI = 20;

staticParams->rateControlParams.qpP = 30;

SPS相关的几个修改参数的组合分别测试过，基本没有改善。

Flash播放时，每遇到一个IDR帧，播放器会提示丢掉固定帧数，图像会停顿一下。。。

（重复一次，从邮件直接连过来的，忘记使用“回复”）

0 Chris Meng 11 年多前回复 lei wang18

TI__Guru**** 155073 points

你好，

能否提供你使用的flash的版本？提供一段flash可以正常播放的码流和一段用DM8168编码的码流（flash不能正常解码有掉帧）。

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

你好，

IE下flash版本11.3.300.270,chrome下flash版本15.0.0.236

码流使用附件提供？（40M左右）

record.rar

0 Chris Meng 11 年多前回复 lei wang18

TI__Guru**** 155073 points

你好，

视频收到了。我内部问问看。

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

你好，

谢谢。录像文件不大看的出来，rtmp直播时很明显。

0 Chris Meng 11 年多前回复 lei wang18

TI__Guru**** 155073 points

你好，

你提供的ti8168_1130.h264视频本身就是一顿一顿的。你能否再提供一些信息（比如log）表明rtmp直播flash播放时候在IDR帧的时候掉帧的？

0 lei wang18 11 年多前回复 Chris Meng

Prodigy 140 points

你好，

“视频本身一顿一顿”的是一个什么概念？这个流就是使用和dvrrdk中的的demo录制的，视频源和我用Intelmsdk录像的源是同一个源

0 Chris Meng 11 年多前回复 lei wang18

TI__Guru**** 155073 points

你好，

例如187到188帧图像变化比较大，像是中间有丢帧一样。

最好你录制的时候是同一时刻两个方案一起录像，录像的场景也尽量类似。

最重要是你能回答我之前的问题：“你能否再提供一些信息（比如log）表明rtmp直播flash播放时候在IDR帧的时候掉帧的？”

0 Jason_Zhang 10 年多前

Prodigy 150 points

你好请问是否已经解决？如何解决的，方便说一下吗

0 Ternence_Hsu 10 年多前回复 Jason_Zhang

Guru 22552 points

你有换播放器测试吗？

我之前有遇到，用vlc播放卡，换一个播放器就正常了 video-js 播放是非常的流畅的，你也可以试一下

0 Jason_Zhang 10 年多前回复 Ternence_Hsu

Prodigy 150 points

我这边测试是jwplayer播放正常，但是fms自带的播放器以及其他播放器卡顿，请问后来有没有找出不同播放器的区别，或者这个问题的根本原因，因为我这边客户指定fms，谢谢

0 lei wang18 9 年多前回复 Jason_Zhang

Prodigy 140 points

Jason_Zhang 说：

我这边测试是jwplayer播放正常，但是fms自带的播放器以及其他播放器卡顿，请问后来有没有找出不同播放器的区别，或者这个问题的根本原因，因为我这边客户指定fms，谢谢

问题一直未解决。我们的判断是某个编码细节导致flash播放器遇到IDR帧时把缓存着的未播放的P帧丢掉了，然后需要等待后继几帧到来后才继续播放，表现出来的现象就是视频停顿一下。

其实TI的测试方法很简单，随便找个demo板测试一下rtmp publish就行了，肯定能复现。

0 lei wang18 9 年多前回复 Jason_Zhang

Prodigy 140 points

Jason_Zhang 说：

我这边测试是jwplayer播放正常，但是fms自带的播放器以及其他播放器卡顿，请问后来有没有找出不同播放器的区别，或者这个问题的根本原因，因为我这边客户指定fms，谢谢

如果您解决了，希望不吝指教！谢谢。

0 Ternence_Hsu 9 年多前回复 lei wang18

Guru 22552 points

如果是VLC播放是否卡顿？

你们的rtmp 推流是如何实现推服务器的，是直接使用的库，还是自己写程序打包推送到服务器的呢？

0 lei wang18 9 年多前回复 Ternence_Hsu

Prodigy 140 points

ternence hsu 说：

如果是VLC播放是否卡顿？

你们的rtmp 推流是如何实现推服务器的，是直接使用的库，还是自己写程序打包推送到服务器的呢？

使用ffplay测试过，不卡。

使用librtmp库publish。

使用flash播放器的时候，如果把buffertime设置成1秒，也不卡。。。

0 Ternence_Hsu 9 年多前回复 lei wang18

Guru 22552 points

我想问题可能在flash播放器这边；

建议测试一下低比特率，（可以降低分辨率测试），看flash能否正常的播放；

你rtmp服务器是用的nginx+rtmpmoudle搭建的吗?

0 VampireDaVinci 9 年多前回复 Ternence_Hsu

Genius 4245 points

不会卡，这个产品我们卖了2年了，问题肯定出在嵌入式这端。

0 lei wang18 9 年多前回复 VampireDaVinci

Prodigy 140 points

VampireDaVinci 说：

不会卡，这个产品我们卖了2年了，问题肯定出在嵌入式这端。

请问是如何解决的？

0 VampireDaVinci 9 年多前回复 lei wang18

Genius 4245 points

什么叫如何解决的，我就没遇到过你这个问题

0 lei wang18 9 年多前回复 VampireDaVinci

Prodigy 140 points

VampireDaVinci 说：

什么叫如何解决的，我就没遇到过你这个问题

抱歉，以为你们也遇到过类似问题。那请问您编码出来的h264码流是什么格式的？

我们得到的码流是SPS PPS SEI IDR P。。。（29个P）。。P SPS PPS SEI IDR。。。如此循环。

但是flash播放器播放到每个IDR时都会丢掉几个包，造成卡顿现象。如何把IDR帧hack成NON IDR，则不卡。

我们甚至怀疑dvrsdk压缩的IDR帧实际上是NON IDR帧，向前引用了。。。

0 Ternence_Hsu 9 年多前回复 lei wang18

Guru 22552 points

你发一个已经编码好的数据到我邮箱，我帮你看看你编码的数据

处理器

处理器论坛

DM8168 DVRRDK4.0.0.3 H264编码 rtmp播放停顿问题