随着网络基础设施的快速发展和相关产业的爆发,录播─体机已经成为文化传媒、教育培训和直播带货等行业的刚需。RK3588芯片有着不错的8K编解码能力,内置双8KVPU,支持8K@30硬件编码和8K@60硬件解码和输出,并且作为一颗通用型SoC,RK3588有着丰富的拓展接口,下面将介绍基于KR3588平台的便携式8K录播一体机解决方案。
RK3588是一款基于ARM架构的8核芯片,8nm制程工艺,拥有4个A76大核和4个A55效能核心,集成了G610 GPU和6TOPS算力的NPU,集成双8KVPU ( 8K图形处理器),自带48M ISP,最高支持32GBLPDDR5内存。强大的硬件性能、高度集成的功能设计和超低的功耗,为便携式的编解码设备提供了基础。采用RK3588方案的便携式录播一体机整体尺寸跟平板电脑基本一致,可根据需求选择10~20寸的屏幕,可通过电池供电,也可通过外部电源供电,方便携带,可快速搭建录播系统。
从上面的功能框图我们可以看到,RK3588在多通道视频输入视频输出音频输入输出方面有丰富的接口设置,并且支持PCIE3.0协议的M.2高速固态硬盘,支持双千兆以太网口,支持主流的中小尺寸屏幕和触摸屏,支持双5G移动通讯模块,支持WiFi 6高速模块,可以满足大数据星的吞吐需求,使用外置高增益天线,可以保证多频段多通路的高速信号稳定传输。RK3588官方支持的操作系统有安卓12和Linux操作系统,开发者可根据场景选择合适的操作系统。
RK3588在双师课堂、智慧课堂、教育培训场景的应用
双师课堂和智慧课堂是教育行业的重要需求,可以有效改善教育资源分配,提高教学质量和课堂效率。在教育领域一般2~4机位即可满足需求。RK3588可支持2路4K@60fps的信号采集,可有效保证主机位的高清画质。除了对老师和学生的声音影像捕捉,还有教学课件、投影仪、高拍仪等外部视频信号的的记录,RK3588的多通道编码功能可轻松实现采集记录和网络推流。
在网络教育培训领域,尤其是舞蹈、健身等运动型的教育培训,高帧速和双机位是很有必要的。除此之外,借助RK3588自带的三核NPU人工智能处理器,可直接实现AI教练功能,借助AlI算法,可对学员进行捕捉分析动作,给出相应的评级。可大幅降低教练的工作强度,提高效率。
舞台的直播导播、录播
多机位的导播一直是传媒领域的重要应用,传统的导播设备比较繁杂,占地面积大,携带不方便,即使有基于X86平台的移动设备,但是X86平台的编码效率跟功耗表现相对ARM平台较弱。采用RK3588的导播设备,可支持7路HDMI信号直接输入,通过网络可支持32路108OP信号输入。并且基于ARM平台的设备体积小、功耗低,通过KR3588—体机可快速实现导播系统的部署。
RK3588集成独立8K硬件编码器,支持8K@30fps的硬件编码或等效编码能力,不但可以将视频信号以视频流的形式进行网络网络直播,还可以本地保存。RK3588支持PCEI3.0协议的M.2高速硬盘,可满足高码率视频的读写需求。自带高算力NPU,除了常规录播还可以实现画面拼接,形成以舞台为中心的全景视频,同一时间点观众可以从不同角度观看。
新闻播报、体育赛事等现场直播
新闻播报和体育赛事等现场直播对时效性要求高,RK3588直播一体机支持5G通讯模块,真正可以做到低延时的视频推送。用户可以选择双5G移动数据模块或者是5G加WiFi6模块的组合,双5G模块可借助混合网络进一步扩大数据传输带宽,实现高码率视频的实时推送。而WiFi模块可以通过局域网与无线网络摄像机组网,增加视频传输距离,在体育赛事中十分实用,可以部署多角度机位,一人便可以实现导播、解说等操作。
针对室外环境和背景噪音较大的场景,借助RK3588的NPU算力,可运行高品质的降噪算法,并且可以进行实时翻译,支持STT和TTS等功能,可实现同声传译、手语翻译等功能,可大幅提高观众的观影体验。
RK3588录播一体机用于电商直播带货
直播带货已成为主流的电商销售方式,目前带货主播大都是通过手机直播,一小部分主播通过X86的PC来直播。手机随身携带,使用方便,但是摄像头成像效果较差,并且屏幕太小不方便交互。虽然目前旗舰手机得到摄像头像素很高,但是受限于传感器尺寸,成像质量与专业得到录像设备相差很远,因此大多数追求高质量的主播会选择个人电脑和专业摄像机来搭建直播室,但是这种方案硬件成本很高。
传统的X86处理器( Intel、AMD等) 视频编解码的效率很低,要想实现高分辨率的直播就需要通过专业的显卡来实时渲染,这就造成整个直播系统的硬件造价高,对于一些中小型主播来说,这部分投入不菲。而ARM芯片大都是采用SoC的设计形式,内部会集成专门的硬件编解码核心,效率高,功耗低。RK3588的的最高编码分辨率为8K@30fps ,相比X86平台有着极大的优势。并且RK3588平台也可以像电脑那样外接专业的摄像机,以获取更优秀的画质。
RK3588支持原生的安卓12操作系统,与手机操作一致,用户学习成本低,可以无缝迁移到RK3588一体机平台。并且与手机的前后摄像头相比,RK3588—体机可以支持多个机位,方便切换,可为团队提供服务。开发者可以利用RK3588自带的Al处理器来开发直播背景抠图、虚拟形象直播、多人互动直播等功能。
RK3588实现VR全景直播
VR全景直播是新兴的直播方式,目前市面上此类设备还很少,并且大都是通过鱼眼镜头拍摄,后期矫正的方法获得全景视频。这种威廉希尔官方网站
方案延时较高,并且图像质量比较差,无法给用户带来好的体验。RK3588支持8K@30的视频编码或等效的视频编码。借助RK3588的多摄像头接入功能,强大的ISP、NPU和编码器,可实现6个摄像头的全景视频拼接,采用无畸变摄像头,每个摄像头视角只要能到达60°就可以完成360度的全景拼接,可以大幅节约算力,降低延时。VR全景直播在展会、旅游、房地产等领域将会有广泛应用。
结语
本文提到的便携式8K导播录播─体机解决方案是以现有的SC900 RK3588 SOM为基础进行开发,搭配客制化的接口拓展底板使用,采用核心板加底板的产品形态可有效降低研发风险,并且设计灵活,可根据客户的实际需求定制产品,快速实现硬件的修改验证。ScenSmart可以提供基于RK3588平台的全功能开发,提供稳定的硬件设计和BSP平台,客户只需要专注应用层开发即可。
原作者:ScenSmart智造平台