陈超 Android音视频流媒体开发专家班

如果你已经在做 Android 开发，最近却被要求「把摄像头画面推到服务器」「在 App 里播一路 RTSP 流」「自己控制解码和渲染」，这门课值得先看一眼。它不讲 UI、不讲架构，专攻音视频流媒体这条线上最容易被卡住的几个环节：流怎么传、码流怎么解、画面怎么上屏。

它解决的是哪类具体问题

日常业务开发里，音视频需求往往以「接个第三方 SDK」收场。但一旦遇到延迟高、花屏、音画不同步、弱网卡顿，或者公司要求自研播放器内核、对接私有协议设备，SDK 就顶不住了。这门课针对的正是这些场景：从 RTSP 会话的建立与保活，到 RTP/UDP 收包与丢包处理，再到用 FFmpeg 完成解封装和解码，最后用 OpenGL ES 把 YUV 数据渲染到 Surface 上。整条链路走通之后，你对「一帧画面从摄像头到屏幕」中间发生了什么，会有可调试、可修改的认知，而不是只会在回调里拿数据。

适合什么基础，先看哪几块

前提是有 Android 开发经验，能读写 Java 或 Kotlin，理解线程、Handler、SurfaceView 这类基本概念；C/C++ 不要求熟练，但至少要能看懂指针和结构体，因为解码和协议部分会大量涉及 native 层。完全没有音视频概念的也可以进，但建议不要一上来就啃协议细节。更合理的顺序是：先把 FFmpeg 解码这一块跑通，理解 AVFormatContext、AVCodecContext、AVPacket、AVFrame 之间的关系，能让一段本地文件或一路流稳定出帧；再回头补 RTSP 和 UDP 的协议部分，这时你会清楚每个字段到底影响链路的哪一环；最后攻 OpenGL ES 渲染，重点放在 YUV 纹理上传和着色器写法上。Linux 多用户并发服务器那一块偏服务端，如果只是做客户端播放，可以放到最后按需看。

学完能做到什么，资料怎么用

比较现实的目标是：能独立写出一个可用的 Android 端 RTSP 播放器，支持基本播放控制，能定位常见的花屏、绿屏、卡顿问题，并且知道该在收包、解码还是渲染环节去查。再进一步，可以按业务需要替换渲染方式、调整缓冲策略，或把解码能力复用到推流、录制等场景。

资料配合练习时，别只看不写。建议每看完一个模块就自己动手复现一遍：协议部分抓包对照，解码部分打印帧信息核对参数，渲染部分先用一张静态 YUV 图验证着色器是否正确。遇到跑不通的地方，优先检查时间戳和色彩格式这两个高频坑点。整体节奏上，这门课信息密度偏高，适合按模块拆开、边做边学，不适合一次性刷完。