1.���Ž���Դ��
2.ffplay视频播放原理分析
3.视频网站怎么解析视频地址？
4.Qt开发全网最牛的播放播放《网易云音乐播放器》软件
5.UE4 LevelSequence源码剖析（一）
6.零基础读懂视频播放器控制原理： ffplay 播放器源代码分析
���Ž���Դ��
在探讨之前，让我们明确一点：Android的解析解析ImageView实际上并不支持直接加载GIF动图，因为ImageView基于Canvas绘制，源码源码而Canvas仅支持drawBitmap一次绘制一张。播放播放那么，解析解析Glide是源码源码svgedit 源码解析如何巧妙地让ImageView展现出GIF动画的呢？
让我们从Glide的源码入手，今天的播放播放主角是GifDrawable。这个类虽然有大约行代码，解析解析但理解其工作原理并非无迹可寻。源码源码首先，播放播放我们注意到一个开始播放第一帧的解析解析方法，这可能是源码源码入口点。
代码结构中，播放播放当GIF有多帧时，解析解析会订阅特定事件。源码源码关键在于观察三句代码：一是递增帧位置，表明采用无限轮播算法；二是加载资源回调，通过Target接口来触发；三是消息传递，用Handler进行控制。
在加载资源的回调中，我们看到消息机制在发挥作用。当接收到消息，会根据what参数进行处理。在handleMessage中，处理了延迟消息和清理消息。延迟消息会获取新帧数据并绘制到ImageView，同时清除旧帧，接着进入下一个帧的加载和清除过程。
总结来说，Glide加载GIF的原理相当直观：GIF被解析为一系列，通过无限轮播，每次新帧的加载都触发一次请求。在完成绘制后，旧帧会被清除，然后继续下一轮的加载。整个过程通过Handler的消息传递机制驱动循环播放。以上内容摘自Android轮子哥的分享。
ffplay视频播放原理分析
作者|赵家祝FFmpeg框架由命令行工具和函数库组成，ffplay是其中的一种命令行工具，提供了播放音视频文件的功能，不仅可以播放本地多媒体文件，还可以播放网络流媒体文件。本文从ffplay的整体播放流程出发，借鉴其设计思路，学习如何设计一款简易的播放器。
一、播放器工作流程在学习ffplay源码之前，为了方便理解，我们先宏观了解一下播放器在播放媒体文件时的工作流程。
解协议：媒体文件在网络上传输时，需要经过流媒体协议将媒体数据分段成若干个数据包，这样就可以满足用户一边下载一边观看的需求，而不需要等整个媒体文件都下载完成才能观看。常见的流媒体协议有RTMP、HTTP、HLS、MPEG-DASH、MSS、HDS等。由于流媒体协议中不仅仅包含媒体数据，还包含控制播放的信令数据。因此，解协议是主机官方源码移除协议中的信令数据，输出音视频封装格式数据。
解封装：封装格式也叫容器，就是将已经编码压缩好的视频流和音频流按照一定的格式放到一个文件中，常见的封装格式有MP4、FLV、MPEG2-TS、AVI、MKV、MOV等。解封装是将封装格式数据中的音频流压缩编码数据和视频流压缩编码数据分离，方便在解码阶段使用不同的解码器解码。
解码：压缩编码数据是在原始数据基础上采用不同的编码压缩得到的数据，而解码阶段就是编码的逆向操作。常见的视频压缩编码标准有H./H.、MPEG-2、AV1、V8/9等，音频压缩编码标准有AAC、MP3等。解压后得到的视频图像数据是YUV或RGB，音频采样数据是PCM。
音视频同步：解码后的视频数据和音频数据是独立的，在送给显卡和声卡播放前，需要将视频和音频同步，避免播放进度不一致。
二、main函数ffplay的使用非常简单，以ffplay-iinput.mp4-loop2为例，表示使用ffplay播放器循环播放input.mp4文件两遍。执行该命令时，对应的源码在fftools/ffplay.c中，程序入口函数是main函数。
注：本文ffplay源码基于ffmpeg4.4。
2.1环境初始化
初始化部分主要调用以下函数：
init_dynload：调用SetDllDirectory("")删除动态链接库（DLL）搜索路径中的当前工作目录，是Windows平台下的一种安全预防措施。
av_log_set_flag：设置log打印的标记为AV_LOG_SKIP_REPEATED，即跳过重复消息。
parse_loglevel：解析log的级别，会匹配命令中的-loglevel字段。如果命令中添加-report，会将播放日志输出成文件。
avdevice_register_all：注册特殊设备的封装库。
avformat_network_init：初始化网络资源，可以从网络中拉流。
parse_options：解析命令行参数，示例中的-iinput.mp4和-loop2就是通过这个函数解析的，支持的选项定义在options静态数组中。解析得到的文件名、文件格式分别保存在全局变量input_filename和file_iformat中。
2.2SDL初始化
SDL的全称是SimpleDirectMediaLayer，是一个跨平台的多媒体开发库，支持Linux、Windows、MacOS等多个平台，实际上是对DirectX、OpenGL、Xlib再封装，在不同操作系统上提供了相同的函数。ffplay的播放显示是通过SDL实现的。
main函数中主要调用了以下三个SDL函数：
SDL_Init：初始化SDL库，传入的参数flags，默认支持视频、mit scratch 源码音频和定时器，如果命令中配置了-an则禁用音频，配置了-vn则禁用视频。
SDL_CreateWindow：创建播放视频的窗口，该函数可以指定窗口的位置、大小，默认是*大小。
SDL_CreateRenderer：为指定的窗口创建渲染器上下文，对应的结构体是SDL_Render。我们既可以使用渲染器创建纹理，也可以渲染视图。
2.3解析媒体流
stream_open函数是ffplay开始播放流程的起点，该函数传入两个参数，分别是文件名input_filename和文件格式file_iformat。下面是函数内部的处理流程：
（1）初始化VideoState：VideoState是ffplay中最大的结构体，所有的视频信息都定义在其中。初始化VideoState时，先定义VideoState结构体指针类型的局部变量is，分配堆内存。然后初始化结构体中的变量，例如视频流、音频流、字幕流的索引，并赋值函数入参filename和iformat。
（2）初始化FrameQueue：FrameQueue是解码后的Frame队列，Frame是解码后的数据，例如视频解码后是YUV或RGB数据，音频解码后是PCM数据。初始化FrameQueue时，会对VideoState中的pictq（视频帧队列）、subpq（字幕帧队列）、sampq（音频帧队列）依次调用frame_queue_init函数进行初始化。FrameQueue内部是通过数组实现了一个先进先出的环形缓冲区，windex是写指针，被解码线程使用；rindex是读指针，被播放线程使用。使用环形缓冲区的好处是，缓冲区内的元素被移除后，其它元素不需要移动位置，适用于事先知道缓冲区最大容量的场景。
（3）初始化PacketQueue：PacketQueue是解码前的Packet队列，用于保存解封装后的数据。初始化PacketQueue时，会对VideoState中的videoq（视频包队列）、audio（音频包队列）、subtitleq（字幕包队列）依次调用packet_queue_init函数进行初始化。不同于FrameQueue，PacketQueue采用链表的方式实现队列。由于解码前的包大小不可控，无法明确缓冲区的最大容量，如果使用环形缓冲区，容易触发缓冲区扩容，需要移动缓冲区内的数据。因此，使用链表实现队列更加合适。
（4）初始化Clock：Clock是时钟，在音视频同步阶段，有三种同步方法：视频同步到音频，音频同步到视频，以及音频和视频同步到外部时钟。初始化Clock时，会对VideoState中的canny opencv源码vidclk（视频时钟）、audclk（音频时钟）、extclk（外部时钟）依次调用init_clock函数进行初始化。
（5）限制音量范围：先限制音量范围在0~之间，然后再根据SDL的音量范围作进一步限制。
（6）设置音视频同步方式：ffplay默认采用AV_SYNC_AUDIO_MASTER，即视频同步到音频。
（7）创建读线程：调用SDL_CreateThread创建读线程，同时设置了线程创建成功的回调read_thread函数以及接收参数is（stream_open函数最开始创建的VideoState指针类型的局部变量）。如果线程创建失败，则调用stream_close做销毁逻辑。
（8）返回值：将局部变量is作为函数返回值返回，用于处理下面的各种SDL事件。
2.4SDL事件处理
event_loop函数内部是一个for循环，使用SDL监听用户的键盘按键事件、鼠标点击事件、窗口事件、退出事件等。
三、read_thread函数read_thread函数的作用是从磁盘或者网络中获取流，包括音频流、视频流和字幕流，然后根据可用性创建对应流的解码线程。因此read_thread所在的线程实际上起到了解协议/解封装的作用。核心处理流程可以分为以下步骤：
3.1创建AVFormatContext
AVFormatContext是封装上下文，描述了媒体文件或媒体流的构成和基本信息。avformat_alloc_context函数用于分配内存创建AVFormatContext对象ic。
拿到AVFormatContext对象后，在调用avformat_open_input函数打开文件前，需要设置中断回调函数，用于检查是否应该中断IO操作。
?ic->interrupt_callback.callback=decode_interrupt_cb;ic->interrupt_callback.opaque=is;decode_interrupt_cb内部返回了一个VideoState的abort_request变量，该变量在调用stream_close函数关闭流时会被置为1。
3.2打开输入文件
在准备好前面的一些赋值操作后，就可以开始根据filename打开文件了。avformat_open_input函数用于打开一个文件，并对文件进行解析。如果文件是一个网络链接，则发起网络请求，在网络数据返回后解析音频流、视频流相关的数据。
3.3搜索流信息
搜索流信息使用avformat_find_stream_info函数，该从媒体文件中读取若干个包，然后从其中搜索流相关的信息，最后将搜索到的流信息放到ic->streams指针数组中，数组的大小为ic->nb_streams。
由于在实际播放过程中，用户可以指定是否禁用音频流、视频流、字幕流。因此在解码要处理的流之前，会判断对应的流是否处于不可用状态，如果是可用状态则调用av_find_best_stream函数查找对应流的索引，并保存在st_index数组中。
3.4设置窗口大小
如果找到了视频流的索引，则需要渲染视频画面。由于窗体的大小一般使用默认值*，这个值和视频帧真正的大小可能是不相等的。为了正确显示承载视频画面的窗体，需要计算视频帧的宽高比。调用av_guess_sample_aspect_ration函数猜测帧样本的宽高比，调用set_default_window_size函数重新设置显示窗口的大小和宽高比。
3.5创建解码线程
根据st_index判断音频流、营销源码论坛视频流、字幕流的索引是否找到，如果找到了就依次调用stream_component_open创建对应流的解码线程。
3.6解封装处理
接下来是一个for(;;)循环：
（1）响应中断停止、暂停/继续、Seek操作；
（2）判断PacketQueue队列是否满了，如果满了就休眠ms，继续循环；
（3）调用av_read_frame从码流中读取若干个音频帧或一个视频帧；
（4）从输入文件中读取一个AVPacket，判断当前AVPacket是否在播放时间范围内，如果是则调用packet_queue_put函数，根据类型将其放在音频/视频/字幕的PacketQueue中。
四、stream_component_open函数3.5小节讲到，stream_component_open函数负责创建不同流的解码线程。那么它是如何创建解码线程的呢？
4.1创建AVCodecContext
AVCodecContext是编解码器上下文，保存音视频编解码相关的信息。使用avcodec_alloc_context3函数分配空间，使用avcodec_free_context函数释放空间。
4.2查找解码器
根据解码器的id，调用avcodec_find_decoder函数，查找对应的解码器。与之类似的一个函数是avcodec_find_encoder，用于查找FFmpeg的编码器。两个函数返回的结构体都是AVCodec。
如果指定了解码器名称，则需要调用avcodec_find_decoder_by_name函数查找解码器。
不管是哪种方式查找解码器，如果没有找到解码器，都会抛异常退出流程。
4.3解码器初始化
找到解码器后，需要打开解码器，并对解码器初始化，对应的函数是avcodec_open2，该函数也支持编码器的初始化。
4.4创建解码线程
判断解码类型，创建不同的解码线程。
switch(avctx->codec_type){ caseAVMEDIA_TYPE_AUDIO://音频...if((ret=decoder_init(&is->auddec,avctx,&is->audioq,is->continue_read_thread))<0)gotofail;...if((ret=decoder_start(&is->auddec,audio_thread,"audio_decoder",is))<0)gotoout;...caseAVMEDIA_TYPE_VIDEO://视频...if((ret=decoder_init(&is->viddec,avctx,&is->videoq,is->continue_read_thread))<0)gotofail;if((ret=decoder_start(&is->viddec,video_thread,"video_decoder",is))<0)gotoout;...caseAVMEDIA_TYPE_SUBTITLE://字幕...if((ret=decoder_init(&is->subdec,avctx,&is->subtitleq,is->continue_read_thread))<0)gotofail;if((ret=decoder_start(&is->subdec,subtitle_thread,"subtitle_decoder",is))<0)gotoout;...}线程创建在decoder_start函数中，依然使用SDL创建线程的方式，调用SDL_CreateThread函数。
五、video_thread函数视频解码线程从视频的PacketQueue中不断读取AVPacket，解码完成后将AVFrame放入视频FrameQueue。音频的解码实现和视频类似，这里仅介绍视频的解码过程。
5.1创建AVFrame
AVFrame描述解码后的原始音频数据或视频数据，通过av_frame_alloc函数分配内存，通过av_frame_free函数释放内存。
5.2视频解码
开启for(;;)循环，不断调用get_video_frame函数解码一个视频帧。该函数主要调用了decoder_decode_frame函数解码，decoder_decode_frame函数对音频、视频、字幕都进行了处理，主要依靠FFmpeg的avcodec_receive_frame函数获取解码器解码输出的数据。
拿到解码后的视频帧后，会根据音视频同步的方式和命令行的-framedrop选项，判断是否需要丢弃失去同步的视频帧。
命令行带-framedrop选项，无论哪种音视频同步机制，都会丢弃失去同步的视频帧。
命令行带-noframedrop选项，无论哪种音视频同步机制，都不会丢弃失去同步的视频帧。
命令行不带-framedrop或-noframedrop选项，若音视频同步机制为同步到视频，则不丢弃失去同步的视频帧，否则会丢弃失去同步的视频帧。
5.3放入FrameQueue
调用queue_picture函数，将AVFrame放入FrameQueue。该函数内部调用了frame_queue_push函数，采用了环形缓冲区的处理方式，对写指针windex累加。
staticvoidframe_queue_push(FrameQueue*f){ if(++f->windex==f->max_size)f->windex=0;SDL_LockMutex(f->mutex);f->size++;SDL_CondSignal(f->cond);SDL_UnlockMutex(f->mutex);}六、音视频同步ffplay默认采用将视频同步到音频的方式，分以下三种情况：
如果视频和音频进度一致，不需要同步；
如果视频落后音频，则丢弃当前帧直接播放下一帧，人眼感觉跳帧了；
如果视频超前音频，则重复显示上一帧，等待音频，人眼感觉视频画面停止了，但是有声音在播放；
ffplay视频同步到音频的逻辑在视频播放函数video_refresh中实现。该函数的调用链是：main()->event_loop()->refresh_loop_wait_event()->video_refresh。
6.1判断播放完成
调用frame_queue_nb_remaing函数计算剩余没有显示的帧数是否等于0，如果是，则不需要走剩下的步骤。计算过程比较简单，用FrameQueue的size-rindex_shown，size是FrameQueue的大小，rindex_shown表示rindex指向的节点是否已经显示，如果已经显示则为1，否则为0。
6.2播放序列匹配
****分别调用frame_queue_peek_last和frame_queue_peek函数从FrameQueue中获取上一帧和当前帧，上一帧是上次已经显示的帧，当前帧是当前待显示的帧。
（1）比较当前帧和当前PacketQueue的播放序列serial是否相等：
如果不等，重试视频播放的逻辑；
如果相等，则进入（2）流程判断；
注：serial是用来区分是不是连续的数据，如果发生了seek，会开始一个新的播放序列，
（2）比较上一帧和当前帧的播放序列serial是否相等：
如果不相等，则将frame_timer更新为当前时间；
如果相等，不处理并进入下一流程
6.3判断是否重复上一帧
（1）将上一帧lastvp和当前帧vp传入vp_duration函数，通过vp->pts-lastvp->pts计算上一帧的播放时长。
注：pts全称是PresentationTimeStamp，显示时间戳，表示解码后得到的帧的显示时间。
（2）在compute_target_delay函数中，调用get_clock函数获取视频时钟，调用get_master_clock函数获取同步时钟，计算两个时钟的差值，根据差值计算需要delay的时间。
（3）如果当前帧播放时刻（is->frame_timer+delay）大于当前时刻（time），表示当前帧的播放时间还没有到，相当于当前视频超前音频了，则需要将上一帧再播放一遍。
last_duration=vp_duration(is,lastvp,vp);delay=compute_target_delay(last_duration,is);time=av_gettime_relative()/.0;if(time<is->frame_timer+delay){ *remaining_time=FFMIN(is->frame_timer+delay-time,*remaining_time);gotodisplay;}6.4判断是否丢弃未播放的帧
如果当前队列中的帧数大于1，则需要考虑丢帧，只有一帧的时候不考虑丢帧。
（1）调用frame_queue_peek_next函数获取下一帧（下一个待显示的帧），根据当前帧和下一帧计算当前帧的播放时长，计算过程和6.3相同。
（2）满足以下条件时，开始丢帧：
当前播放模式不是步进模式；
丢帧策略生效：framedrop>0，或者当前音视频同步策略不是音频到视频。
当前帧vp还没有来得及播放，但是下一帧的播放时刻（is->frame_timer+duration）已经小于当前系统时刻（time）了。
（3）丢帧时，将is->frame_drops_late++，并调用frame_queue_next函数将上一帧删除，更新FrameQueue的读指针rindex和size。
if(frame_queue_nb_remaining(&is->pictq)>1){ Frame*nextvp=frame_queue_peek_next(&is->pictq);duration=vp_duration(is,vp,nextvp);if(!is->step&&(framedrop>0||(framedrop&&get_master_sync_type(is)!=AV_SYNC_VIDEO_MASTER))&&time>is->frame_timer+duration){ is->frame_drops_late++;frame_queue_next(&is->pictq);gotoretry;}}七、渲染ffplay最终的图像渲染是由SDL完成的，在video_display中调用了SDL_RenderPresent(render)函数，其中render参数是最开始在main函数中创建的。在渲染之前，需要将解码得到的视频帧数据转换为SDL支持的图像格式。转换过程在upload_texture函数中实现，细节不在此处分析。
音频类似，如果解码得到的音频不能被SDL支持，需要对音频进行重采样，将音频帧格式转换为SDL支持的格式。
八、小结本文从整体播放流程出发，介绍了ffplay播放器播放媒体文件的主要流程，不深陷于代码细节。同时，对FFmpeg的一些常用函数有了一些了解，对我们自己手写一个简单的播放器有很大的帮助。
----------END----------视频网站怎么解析视频地址？
1. 以腾讯视频播放页地址为例，解析视频真实地址的过程如下：首先打开腾讯视频播放页，如 /x/cover/rz4mhbfco.html。
2. 在播放页的源码中，寻找视频信息。其中，视频ID（vid）的值，例如 "yaw7"，是我们需要的关键信息。
3. 使用Chrome浏览器的开发者工具监控网络请求，找到获取视频信息的getinfo接口请求地址。构造请求参数，例如清晰度标识（defn），可选值有 "sd"（标清）、"hd"（高清）、"shd"（超清）、"fhd"（P）。
4. 分析getinfo接口的请求结果，关注fi列表、ci列表和ui列表。这些列表包含了视频的详细信息，包括不同清晰度的视频文件和对应的索引信息。
5. 接着，通过监测网络请求，找到获取视频密钥（key）的getkey接口请求。构造参数，包括视频ID（vid）、码流编号（format）和filename。
6. filename参数的构造基于分段信息中的keyid。例如，对于第四个分段，将keyid中的 "." 替换为 ".p"，然后在末尾加上 ".mp4" 即可。
7. 获取getkey接口的请求结果，其中包含了视频的密钥（key）。
8. 分析视频真实地址的构造，确定地址前缀在ui列表中，filename根据分段信息计算得出，vkey参数即为获取的key。
9. 最终，运行输出得到视频的真实地址，例如 "http://.../aHR0cDovL2Jsb2cuY3Nkbi5uZXQvZ2V0dHVwLzEwMjQvMDQvMjQ="。
Qt开发全网最牛的《网易云音乐播放器》软件
深入解析Qt开发的网易云音乐播放器源码
本文将带您探索一款备受赞誉的Qt开发作品——网易云音乐播放器的内部构造。这款应用的精妙之处在于其精细的模块设计，让我们逐一剖析：1. 模型组件
首先，我们来看核心的Model Creator部分: modelcreator.h：这个头文件定义了数据模型的接口，它负责管理音乐数据的存储和更新。 modelcreator.cpp：实现类中，它实现了与数据源的交互，保证数据的实时同步。2. 管理器模块
音乐管理器模块是关键，它由以下两部分构成： musicmanager.h：定义了音乐管理的核心逻辑，如播放、暂停、下一首等操作的控制。 musicmanager.cpp：这部分实现了音乐的加载、播放控制逻辑，以及与Model Creator的交互。3. 音乐模型
最后，我们关注音乐模型的实现： musicmodel.h：定义了音乐模型类，它承载了歌曲的详细信息，如歌曲名、艺术家等。 musicmodel.cpp：实现类中，模型负责处理数据的存储和展示，为用户界面提供丰富的信息。 通过这些源码片段，我们可以看到Qt开发者如何巧妙地利用其强大的组件化架构，构建出功能强大的网易云音乐播放器。每一个模块都精心设计，确保了流畅的用户体验和高效的代码组织。UE4 LevelSequence源码剖析（一）
UE4的LevelSequence源码解析系列将分四部分探讨，本篇聚焦Runtime部分。Runtime代码主要位于UnrealEngine\Engine\Source\Runtime\MovieScene目录，结构上主要包括Channels、Evaluation、Sections和Tracks等核心模块。
ALevelSequenceActor是Runtime的核心，负责逐帧更新，它包含UMovieSceneSequence和ULevelSequencePlayer。ALevelSequenceActor独立于GameThread更新，并且在Actor和ActorComponent更新之前，确保其在RuntTickGroup之前执行。
IMovieScenePlaybackClient的关键接口用于绑定，编辑器通过IMovieSceneBindingOwnerInterface提供直观的蓝图绑定机制。UMovieSceneSequence是LevelSequence资源实例，它支持SpawnableObject和PossessableObject，便于控制对象的拥有和分离。
ULevelSequencePlayer作为播放控制器，由ALevelSequenceActor的Tick更新，具有指定对象在World和Sublevel中的功能，还包含用于时间控制的FMovieSceneTimeController。UMovieSceneTrack作为底层架构，由UMovieSceneSections组成，每个Section封装了Section的帧范围和对应Channel的数据。
序列的Eval过程涉及EvalTemplate和ExecutionTokens，它们协同工作模拟Track。FMovieSceneEvaluationTemplate定义了Track的模拟行为，而ExecutionTokens则是模拟过程中的最小单元。真正的模拟操作在FMovieSceneExecutionTokens的Apply函数中执行，通过BlendingAccumulator进行结果融合。
自定义UMovieSceneTrack需要定义自己的EvaluationTemplate，这部分将在编辑器拓展部分详细讲解。序列的Runtime部分展示了如何在GameThread中高效管理和模拟场景变化，为后续的解析奠定了基础。
零基础读懂视频播放器控制原理： ffplay 播放器源代码分析
视频播放器的工作原理基于对音视频帧序列的控制。不同播放器可能在音视频同步上采用更复杂的帧预测技术，以提升音频与视频的同步性。ffplay，作为FFmpeg自带的播放器，使用了FFmpeg解码库与用于视频渲染显示的SDL库。本文将详细分析ffplay源码，旨在用基础且系统的方法，解读音视频同步、播放/暂停、快进/后退等控制原理。
相较于在移动端查看音视频代码，使用PC端通过VS进行查看和调试，能更高效迅速地分析播放器原理。由于ffplay在命令行界面的使用体验不够直观，本文将分析在CSDN上移植到VC的ffplay代码（ffplay for MFC）。
文章将按照以下结构展开：
一、解析MP4文件结构，理解视频文件的构成与参数。
二、从最简单的播放器入手，分析FFmpeg解码与SDL显示流程。
三、提出并解答五个关键问题，涉及音视频组合、同步、时间与帧数控制等。
四、深入ffplay代码，从总体流程图入手，理解其代码结构。
五、详细分析视频播放器的操作控制机制，包括关键结构体VideoState的作用，PTS和DTS的原理与应用，以及如何实现音视频同步。
六、总结反思，强调基础概念、流程图与PC端调试的重要性。
通过本文，我们将深入解析ffplay播放器的音视频播放与控制原理，旨在提供更直观、基础的解读方式，帮助读者理解和掌握视频播放器的核心技术。
Miracast技术详解（四）：Sink源码解析
Miracast Sink端源码最早出现在Android 4.2.2版本中，开发者可以通过googlesource平台查看源码细节。在Android 4.3之后，Google移除了这部分源码，移除的详细记录可以在相应源码仓库中找到。虽然Sink端源码被移除，但Source端源码仍在，Android手机的投射功能可以实现Miracast投屏发送端的使用。
为了方便查看源码并利用IDE的代码提示及类/方法跳转等功能，推荐使用Android Studio进行源码导入。首先新建Native Project，将libstagefright源码拷贝至cpp目录，并导入相关的include头文件。CMakeLists.txt中添加源码引用，重新同步项目，以引用类与头文件，提高查看源码的效率。
Sink端核心类包括WifiDisplaySink.cpp、RTPSink.cpp、TunnelRenderer.cpp。在wfd.cpp的main()方法中，Sink端初始化，关键操作包括启动WifiDisplaySink，并通过post(kWhatStart)启动初始化。
RTSP通讯涉及多个步骤，首先通过createRTSPClient()创建TCP连接，并传入AMessage对象。连接状态及数据异步通知通过kWhatError与kWhatConnected回调实现。连接成功后，进行RTSP协商与会话建立，处理RTSP指令流程，包括M1-M7指令的请求与响应。
RTSP流程中，对消息类型进行判断，处理Request及Response，如onOptionsRequest()、onGetParameterRequest()及onSetParameterRequest()。onSetParameterRequest()处理M5请求时，触发Sink端向Source端发送SETUP请求。sendSetup()方法中初始化RTPSink，建立UDP连接并注册回调，最终发送PLAY M7请求，Source端开始发送流媒体数据。
在RTP通讯阶段，初始化RTPSink并建立UDP连接。在onReceiveSetupResponse()回调中，发送PLAY M7请求，Source端通过指定UDP端口发送RTP数据包，包含音视频信息。
播放阶段，RTP数据包经过TunnelRenderer处理，完成音视频裸流解析与播放。整个流程涉及消息处理、RTSP协商、UDP连接建立、TS包解析、音视频裸流提取、播放等关键步骤。移植Native Sink端的难点在于隔离与处理相关依赖代码，包括异步消息机制、网络连接部分等，移植时建议基于Android应用层实现相关功能，以减少Native依赖，提高移植效率。
