前沿

1. 音视频圈子都说硬编码没啥可调整、可优化的空间，于是闲来无事，手写个 VideoToolbox 实现 H264 的 demo。
2. 分析下 videotoolbox SDK 文档，梳理下 H264 硬编码的流程，实战一把。

VideoToolbox

• VideoToolbox是苹果提供的一套底层的视频处理框架，允许开发者直接访问硬件编解码器，利用iOS设备的GPU、DSP等硬件资源，实现高效的视频编解码操作。它能够为视频提供压缩和解压缩服务，同时也能对存储在CoreVideo像素缓冲区的图像进行格式转换，具有性能高、实时性好的特点，且利用GPU或专用处理器进行编解码，不用大量占用CPU资源，但低码率下通常质量低于软编。
• 重要数据结构
  • CMBlockBuffer：用于存储压缩后的视频数据，如H.264视频流中的NAL单元。
  • CMSampleBuffer：作为编码、解码数据的容器，包含时间戳和持续时间等元数据信息，可包含一个CVPixelBuffer或CMBlockBuffer。
  • CMFormatDescription：提供编解码格式的信息，包括视频的宽度、高度、格式类型等。