而进行中的用户行为数据也会被同步回传至边缘云进行处理,由此形成整个VR医疗培训闭环流程。
合作过程中,VR培训系统面临着一些通用性的行业挑战:
首先,远程实时查房等VR应用带来海量的数据采集、处理和传输需求,如全部工作负载均通过远端数据中心/云服务完成,势必带来巨大网络压力。而VR应用中的沉浸式、交互式体验,也需要方案能有效缩短系统的端到端整体时延;
其次,医疗场景的特殊性需要VR应用能在现有网络带宽下,提供更高分辨率的视频格式 (例如8K) 来展现各类细节,这对视频编解码过程的优化能力提出了巨大挑战。
面对两大挑战,方案的核心关键词就是两点:更快、更真。谭待表示,“快和真在很多时候是矛盾的,破解这个矛盾就需要有更好的算法,更强的工程能力和更好的基础设施来支持。”
火山引擎与英特尔一起,通过引入英特尔® 高级矢量扩展512 (英特尔® AVX-512),优化BVC编解码器,为边缘云数据中心的渲染计算处理提供强劲支撑,来使VR应用加速增效,实现超清、高质视频的实时快速解码。
BVC编解码器是火山引擎多媒体实验室自研产品,在VR医疗培训应用方案中,用以提高VR医疗培训应用使用时的沉浸感和交互感,以及支持8K视频分辨率带来的编码与传输压力。
英特尔® AVX-512是由英特尔提供的单指令多数据 (Single Instruction Multiple Data,SIMD) 指令集。 得益于其在寄存器位宽等方面的优势,内置英特尔® AVX-512 指令集的英特尔® 至强® 可扩展处理器,在音视频处理、数据加密压缩以及深度学习等高密度计算处理场景中有着出色的性能表现。
而最新一代的第四代英特尔® 至强® 可扩展处理器更内置一系列加速器,包括全新的AI加速器——英特尔®高级矩阵扩展(英特尔®AMX),覆盖包括训练和微调在内的更多深度学习使用场景,可以为不断变化且要求日益增高的应用提供更为可观的计算性能。
围绕着医院部署VR的需求,英特尔与火山引擎一起,分别针对BVC编解码器中处理器资源占用比较高的插值模块和一些基础计算模块,通过英特尔® AVX-512 指令集进行优化,以提高视频编解码和压缩的能力,从而满足医院VR医疗培训应用影像压缩率高、编码速度快、占用带宽低等的复杂需求。
英特尔云及行业解决方案集团首席技术官吴闻新表示,“总体来看,从视频的采集、渲染到推送,我们最终达到了医院的要求,延迟在20毫秒以内,也能在15M的低带宽下,实现8K的效果,有效解决医生教学间的画面精细度问题,为带教和问诊提供了更加科学的现场参考环境。”
中国智能网版权所有,未经书面授权不得复制或建立镜像
Copyright 2001-2018 www.lplzn.com. All Rights Reserved