近日，杭州市科学技术局发布2023年杭州市农业与社会发展重点研发项目（亚运）名单，经过层层选拔，西电杭州研究院“面向智能观赛的真人级全息直播亭与高维度交互式自由观赛系统”项目成功入选。
据了解，“真人级全息直播亭与高维度交互式自由观赛系统”是一套集实时全息通信、3D成像与任意视点漫游观赛体验的沉浸式高维度媒体传播与交互系统。该系统基于相机阵列光场计算成像理论，获取、重构和渲染真实世界的光场，使得用户能够身临其境地漫游在不同重建场景中。
该项目由西安电子科技大学杭州研究院李静教授带领的凤凰眼视觉团队研发。针对亚运会智能、交互、沉浸的观赛需求，团队融合多视点、多类型传感器信息，突破了传统图像二维平面限制，实现了人体3D影像记录和实时真人级全息通信，将在亚运会期间为运动员、观众和游客提供前所未有的“杭州亚运3D印象”以及瞬间穿越的实时全息体验。此外，通过交互式高维度观赛系统生成六自由度空间视频，观众可以超越相机空间部署限制，从任意角度和位置欣赏选手们的精彩发挥，自由控制“时间与空间”。
目前，研发团队已与杭州亚运会组委会、亚运场馆方完成多轮沟通，全系统研发和测试工作有序进行。团队针对光场采集硬件系统架构、3D影像记录功能以及应急备案进行了全面的测试和升级，进一步体现实时性、交互性和沉浸感。该系统将为杭州亚运会带来全新的智能观赛方式，为运动员、观众和游客提供全方位、身临其境的三维影像记录与和交互沉浸的观赛体验。