背景介绍

在开发视频播放器时，音视频同步是最让人头疼的问题之一。我曾经遇到过视频卡成PPT、音频像卡带一样的尴尬场景，后来发现核心问题出在对PTS和DTS的理解不足上。这两个时间戳就像交通信号灯，如果协调不好，整个播放就会乱套。

核心概念

1. DTS(Decoding Time Stamp)：告诉解码器什么时候该解码这一帧数据
2. PTS(Presentation Time Stamp)：告诉播放器什么时候该显示这一帧画面

关键区别： - 对于B帧来说，DTS和PTS可能不同（因为B帧需要参考后续帧） - PTS才是决定画面显示时机的最终依据

实现流程

完整处理流程可以分为以下几个关键步骤：

1. 解封装获取packet
2. 从packet中提取DTS/PTS
3. 解码得到frame
4. 计算正确的显示时间
5. SDL渲染控制

关键代码

AVPacket packet;
AVFrame *frame = av_frame_alloc();

while(av_read_frame(format_ctx, &packet) >= 0) {
    // 解码处理
    avcodec_send_packet(codec_ctx, &packet);
    while(avcodec_receive_frame(codec_ctx, frame) == 0) {
        // 计算显示时间戳
        double pts = frame->pts == AV_NOPTS_VALUE ? 
                    frame->pkt_dts * av_q2d(time_base) :
                    frame->pts * av_q2d(time_base);

        // 音视频同步控制逻辑
        sync_clock(pts);

        // SDL渲染
        render_frame(frame);
    }
    av_packet_unref(&packet);
}

性能优化

实际开发中还需要考虑：

1. 缓冲策略：
2. 视频缓冲建议保持3-5帧

3. 音频缓冲可以稍大一些（8-10帧）

4. 同步算法选择：

5. 视频同步到音频（推荐）
6. 音频同步到视频
7. 外部时钟同步

常见问题

遇到这些问题时不要慌：

1. 画面卡顿：检查是否正确处理了B帧的PTS
2. 音画不同步：确认音频和视频使用相同的时间基准
3. 时间戳为NOPTS：需要手动计算替代值

进阶思考

当基础功能实现后，可以尝试： 1. 动态调整同步阈值 2. 添加丢帧策略 3. 支持可变帧率视频

开发播放器就像指挥交响乐，PTS和DTS就是你的指挥棒。掌握它们的节奏，才能让音视频完美和谐。