1.����Դ��
2.Xilinx系列FPGA实现4K视频拼接,分屏分屏基于Video Mixer实现,源码源码提供1套工程源码和技术支持
����Դ��
实现网页文字聊天相对简单,系统但要实现视频聊天则较为复杂。分屏分屏本文将介绍一个纯网页版的源码源码视频聊天和桌面分享的Demo,可直接在浏览器中运行,系统农场游戏app源码无需安装插件。分屏分屏
一. 主要功能及支持平台
1. 本Demo的源码源码主要功能包括:
(1)一对一语音视频聊天。
(2)远程桌面观看。系统
(3)当客户端掉线时,分屏分屏会自动重连,源码源码网络恢复后重连成功。系统
2. 支持的分屏分屏平台包括:
(1)支持的操作系统有:Windows、信创国产Linux(银河麒麟、源码源码统信UOS)、系统Android、iOS、Mac、js夹娃娃源码鸿蒙OS。
(2)支持的CPU架构有:X/X、ARM、MIPS、Loongarch。
(3)支持几乎所有主流浏览器:Chrome、Edge、Firefox、Safari、浏览器、QQ浏览器等。
(4)此外,使用APP套壳,在WebView控件中加载Demo页面,也能正常进行视频聊天。这可以在C/S架构的客户端或手机APP中嵌入WebView控件来引入视频聊天或桌面分享功能。
二. 开发环境
1. 服务端:
服务端开发环境是智慧农场的源码Visual Studio ,开发语言是C#。
2. Web端:
PC版Web开发环境是VS Code 1.,使用vue 3。
手机版Web开发环境是HBuilder 3.8.,uni-app(导出H5)。
三. 运行效果
此Demo的源码分为三个部分:服务端、PC端Web(横版)和手机端Web(竖版)。首先来看移动端Web的运行效果。
(1)登录界面有三个输入框:服务器IP、用户账号和用户密码,用户账号和用户密码均可随便填写。
(2)首页界面有一个已连接的提示框,表示目前与服务端是连接状态,因网络或其他原因断开时,会提示已断开连接。
(3)发起视频聊天:输入对方的账号,点击请求视频会话按钮即可向对方发起视频聊天请求,公司注册行业源码对方接受请求后即可聊天。
(4)手机端不支持分享自己的桌面,但可以观看PC端桌面。
(5)PC端运行效果:登录后主页界面,左上角是关于自己的一些信息,右边窗口显示连接对方的摄像头或桌面。
(6)输入对方的账号,点击请求远程桌面,对方同意后即可观看别人的屏幕。
四. 服务端源码说明
注意,由于浏览器限制,将Web端部署到公网需要使用HTTPS协议,否则无法访问摄像头。
服务端也需要使用WSS协议,因此需要准备SSL证书用于部署。若仅在本地运行,则无需准备。QQ查询网站源码
若不部署,则将服务端初始化代码中的第六行注释掉,并将第七行中的MultimediaServerFactory.CreateMultimediaServer方法中的wssOption用null替换掉。
若部署在服务器上,则需要将第五行XCertificate2中的两个参数分别修改为证书路径和密码。
五. Web端源码说明
本Demo中的Web端包含两套代码,移动端Web采用uni-app开发,PC端Web采用Vue框架开发。关键点如下:
1. 消息定义:定义了个消息类型,用于Web端之间进行通信,定义放在Vuex或src目录下的omcs目录下。
2. 自定义消息处理器:在登录成功后,通过调用多媒体管理器上的SetCustomMessageReceivedCallback方法,向multimediaManager注册回调函数,接收消息类型和发起者用户名数据,根据消息类型完成业务操作。
3. 一对一语音视频:实现逻辑为用户A向用户B发送VideoRequest消息,用户B收到消息后选择同意与否,并将携带用户B意愿数据的VideoResult消息发送给用户A。
4. 桌面分享:实现逻辑与语音视频类似,请求消息类型为DesktopRequest,响应消息类型为DesktopResult。
5. 断网重连:网络断开时,每5秒进行与服务器的重新连接,注入ConnectionInterrupted和ConnectionRebuildSucceed回调,在断开和重新连接成功时进行操作。
六. 如何在本地部署运行Web端
Web端包含两套代码,移动端Web目录是H5MediaDemo_WebH5,PC端Web目录是H5MediaDemo_WebPC。
1. 移动端web:通过HBuilder X运行,打开运行→运行到浏览器,选择浏览器即可运行。
2. PC端web:需要NodeJS环境,安装成功后,在命令行窗口输入node -v和npm -v检查是否安装成功。
在项目根目录下输入npm run dev运行项目。
七. 源码下载
(1)PC版源码
(2)手机版源码
此外,已部署测试服务器方便测试。
(1)PC Web测试网址
(2)手机 Web测试网址
网页版视频聊天Demo实现介绍到此结束,感谢!
Xilinx系列FPGA实现4K视频拼接,基于Video Mixer实现,提供1套工程源码和技术支持
Xilinx系列FPGA实现4K视频拼接,基于Video Mixer实现,提供1套工程源码和技术支持
实现4K视频拼接的方案主要有两种:一种是纯Verilog方案,但这种方案难以实现4K分辨率;另一种是使用Xilinx的HLS方案,该方案简单易实现,但仅适用于Xilinx自家的FPGA。
本文采用Xilinx官方推出的Video Mixer IP核实现4K视频拼接。该方案使用4路Xilinx官方的Video Test Pattem Generator IP核生成分辨率为x@Hz的彩条视频,并通过AXI4-Stream接口输出。彩条视频的形状各不相同,分别为竖条、交叉网格、棋盘和格子形状。视频通过Xilinx官方的XDMA写入FPGA板载DDR4缓存,再由Video Mixer从DDR4中读出并进行拼接处理,拼接方式为4分屏显示。拼接后的视频通过HDMI 1.4/2.0 Transmitter Subsystem IP核编码后输出,同时,系统还提供了AXI4-Stream流和DDC控制信号。
设计中使用的Video Mixer IP核支持最大分辨率为8K,并最多可拼接路视频,输入和输出视频格式均为AXI4-Stream。该IP核通过AXI_Lite接口进行寄存器配置,并提供自定义配置API。相比于自写的HLS视频拼接方案,官方的Video Mixer IP核在逻辑资源占用上大约减少%,且效率更高。
本文还提供了详细的工程设计框图,包括TPG测试彩条、VDMA图像缓存、Video Mixer、HDMI 1.4/2.0 Transmitter Subsystem、Video PHY Controller以及输出均衡电路等模块的配置和功能描述。同时,还推荐了几款适合该工程的FPGA开发板,并提供了两种不同的工程源码架构。对于不同需求的读者,本文还提供了一定程度的移植说明,以及工程代码获取方式。
此外,本文还列出了实现4K视频拼接所必需的硬件设备,并提供了输出效果的静态和动态演示。对于有需求的读者,本文还提供了一种获取工程代码的方式。
总之,本文提供了一种基于Xilinx系列FPGA的4K视频拼接实现方案,包括设计原理、关键模块功能、工程源码架构、移植说明以及获取代码的方式,旨在帮助读者掌握4K视频拼接的设计能力,以便能够根据自己的项目需求进行移植和设计。