设置AVSampleBufferDisplayLayer渲染采样缓冲区的速率[英] Set rate at which AVSampleBufferDisplayLayer renders sample buffers

本文是小编为大家收集整理的关于设置AVSampleBufferDisplayLayer渲染采样缓冲区的速率的处理方法,想解了设置AVSampleBufferDisplayLayer渲染采样缓冲区的速率的问题怎么解决?设置AVSampleBufferDisplayLayer渲染采样缓冲区的速率问题的解决办法?那么可以参考本文帮助大家快速定位并解决问题。

问题描述

我正在使用 AVSampleBufferDisplayLayer 来显示来自网络连接的 h.264 格式的 CMSampleBuffers.视频播放流畅且工作正常,但我似乎无法控制帧速率.具体来说,如果我在 AVSampleBufferDisplayLayer 中以每秒 60 帧的速度排队,它会显示这 60 帧,即使视频是以 30 FPS 的速度录制的.

创建样本缓冲区时,可以通过将计时信息数组传递给 CMSampleBufferCreate 来设置演示时间戳(计时信息不存在于 h.264 流中,但可以计算或以容器格式传递).我设置的演示时间戳相隔大约 0.033 秒,持续时间为 0.033,但显示层仍然每秒显示尽可能多的帧.

有两种方法可以在 AVSampleBufferDisplayLayer 上将缓冲区排入队列:当缓冲区准备好时,通过调用 -[AVSampleBufferDisplayLayer enqueueSampleBuffer:] 来"约束",或者通过调用 -[AVSampleBufferDisplayLayer requestMediaDataWhenReadyOnQueue:usingBlock:] 并将缓冲区排入队列来"不受约束"堵塞.我已经尝试了这两种方法,但即使第二种方法也尽可能快地显示缓冲区 - 例如,如果我在接收端排队了 300 帧,那么第一次执行上述方法中的块时 readyForMoreMediaData 无论有多少都保持为真缓冲区被排入队列,并且它们都在很短的时间内显示出来.

如果在 CMSampleBuffer 上设置了 kCMSampleAttachmentKey_DisplayImmediately 附件,此行为类似于人们所期望的,但当前未设置(默认值为 false).

我尝试设置图层 controlTimeBase,但似乎没有任何效果.我不知道要尝试的其他事情,也无法在网上找到示例.有谁知道如何控制 AVSampleBufferDisplayLayer 显示帧的帧速率?

推荐答案

Timebase 需要设置为您打算解码的第一帧的演示时间戳 (pts).我通过从所有后续 pts 中减去初始 pts 并将 Timebase 设置为 0,将第一帧的 pts 索引为 0.无论出于何种原因,这不起作用.

你想要这样的东西(在调用解码之前调用):

CMTimebaseRef controlTimebase;
CMTimebaseCreateWithMasterClock( CFAllocatorGetDefault(), CMClockGetHostTimeClock(), &controlTimebase );

displayLayer.controlTimebase = controlTimebase;

// Set the timebase to the initial pts here
CMTimebaseSetTime(displayLayer.controlTimebase, CMTimeMake(ptsInitial, 1));
CMTimebaseSetRate(displayLayer.controlTimebase, 1.0);

为 CMSampleBuffer 设置 PTS...

CMSampleBufferSetOutputPresentationTimeStamp(sampleBuffer, presentationTimeStamp);

也许确保没有设置立即显示....

CFDictionarySetValue(dict, kCMSampleAttachmentKey_DisplayImmediately, kCFBooleanFalse);

这在 WWDC 2014 Session 513 中有非常简短的介绍.

本文地址:https://www.itbaoku.cn/post/924513.html