近日，杭州市科学技术局发布2023年杭州市农业与社会发展重点研发项目（亚运）名单，经过层层选拔，西电杭州研究院“面向智能观赛的真人级全息直播亭与高维度交互式自由观赛系统”项目成功入选。

项目介绍

“真人级全息直播亭与高维度交互式自由观赛系统”是一套集实时全息通信、3D成像与任意视点漫游观赛体验的沉浸式高维度媒体传播与交互系统。该系统基于相机阵列光场计算成像理论，获取、重构和渲染真实世界的光场，使得用户能够身临其境地漫游在不同重建场景中。

该项目由西电杭州研究院李静教授带领的凤凰眼视觉团队研发。针对亚运会智能、交互、沉浸的观赛需求，团队融合多视点、多类型传感器信息，突破了传统图像二维平面限制，实现了人体3D影像记录和实时真人级全息通信，将在亚运会期间为运动员、观众和游客提供前所未有的“杭州亚运3D印象”以及瞬间穿越的实时全息体验。此外，通过交互式高维度观赛系统生成六自由度空间视频，观众可以超越相机空间部署限制，从任意角度和位置欣赏选手们的精彩发挥，自由控制“时间与空间”。

目前，研发团队已与杭州亚运会组委会、亚运场馆方完成多轮沟通，全系统研发和测试工作有序进行。团队针对光场采集硬件系统架构、3D影像记录功能以及应急备案进行了全面的测试和升级，进一步体现实时性、交互性和沉浸感。该系统将为杭州亚运会带来全新的智能观赛方式，为运动员、观众和游客提供全方位、身临其境的三维影像记录与和交互沉浸的观赛体验。