■记者 蒙少华
“简单来说,空间视频是一种高维度、可交互的视频。伴随着影像技术的发展,记录的清晰度逐步提升,但长久以来,这些影像记录大都局限于二维平面,而大家却生活在三维空间之中。因此,大家渴望突破平面维度的束缚,实现对三维世界的记录与还原。例如,借助空间视频技术,观众能够穿越到虚拟的三维世界,获得独特非凡的视觉体验。”IM电竞官方网站通信工程学院凤凰眼视觉团队负责人李静这样阐述空间视频技术的理念。
秉持着“视频升维”的研究初衷,围绕“非完备采样条件下的光场表达与复原”这一科知识题,通信工程学院凤凰眼视觉团队与HUAWEI携手联合研发空间视频关键技术与系统,并在2023年杭州亚运会、2021年央视春晚、第十四届全运会、2020年湖南卫视《舞蹈风暴》、2019年成都世乒赛等重大赛事中成功落地应用,助力开创5G高新视频场景体验的崭新时代。
“勇敢了一次,打开了一扇门”
基于HUAWEI高校技术合作处的牵线搭桥,李静与HUAWEI技术专家在前期多相机计算成像研究的基础上,不断深化合作,于2018年展开了空间视频生成技术的系列研究。
彼时还是一名硕士研究生的代嫣冉,听到老师对空间视频愿景的描述,显得“既迷茫又有些兴奋”。“迷茫是因为当时对于空间视频的相关技术不了解,但有老师的指引与鼓励倒也不惧怕,是有些兴奋的,觉得自己不仅是在学习、做科研,还有使命扛在肩上。”
万事开头难,2019年底,凤凰眼视觉团队迎来了第一次正式的外场任务:在“2019国际乒联男子乒乓球国际足联世界杯”比赛现场,和HUAWEI一起完成国内首次空间视频自由视角直播。
“接到任务时,时间紧,挑战大,那时确实有所犹豫,担心无法按期完成。团队内部随即展开讨论,剖析大家面临着哪些技术挑战,时间紧迫的压力能否克服。最终,团队决定齐心协力,勇敢地迎难而上!”回忆起初次筹备外场任务的场景,李静依旧记忆犹新,“科研过程中每时每刻都会遇到困难,但是一个个微创新的积累,大家的工作就会一点点进步。”
从系统研发、技术预案准备,到人员安排、设备部署、现场联调,整个团队拧成一股绳,战胜时间与心理上的压力,冲破重重阻碍,最终,与HUAWEI联合研发的空间视频自由视角直播系统成功应用于“2019年国际乒联男子国际足联世界杯”中,通过自由视角、自由缩放,观众可以在观看直播过程中可以任意切换视角,观看马龙、樊振东等运动员的精彩表现。
回顾首次尝试的成功,李静老师感慨道:“那一次的勇敢,打开了空间视频研究的新局面。”
“经过一次实战,队伍就锻炼了一次”
对于凤凰眼视觉团队来说,每一次外场任务都不是一件容易的事。从合作双方讨论需求,到团队内部需求论证、现场实景勘探,以及前期预案准备、现场落地应用都会面临各种各样的考验。“现场是一个不受控的环境,它会有突发情况,必须快速处理好”,李静说道。
《舞蹈风暴》现场工作照
2020年10月10日,《舞蹈风暴》第二季携势开播,李静团队同样全程参与并承担了多项关键技术研发。代嫣冉回忆起那次经历,显得印象深刻:“《舞蹈风暴》第二季采用了国际首创的‘3D蝶形立体风暴时刻’,140台高清影视相机有一半安装在可升降的蝶形拱桥上,并且每一台相机均配有动态云台,如何对数量众多,且可升降旋转的多相机阵列进行快速自动标定成为面临的首要挑战。大家和HUAWEI联合团队对这种全新的构型进行了大量仿真,并在湖南卫视搭建了全尺寸成像和标定系统,通过反复优化,在保证高精度的条件下将标定时间从小时缩短到数分钟,实现了3D立体风暴时刻的完美呈现。”
最终,凤凰眼视觉团队和HUAWEI联合打造的全新“3D立体风暴时刻”在《舞蹈风暴》第二季震撼亮相,该系统可以从空间任意角度全方位展现舞蹈细节,精准捕捉舞者表演的精彩瞬间,也为观众打开了舞蹈观赏的新视界。
“在节目录制现场,来自不同岗位,不同团队的数百人协同工作,需要大家每个人都紧密配合,一遍遍演练,一遍遍调整”,李静老师说,“大家也要提前做好充分的预案,应对各种突发情况,这也就是为什么大家说经过一次实战,队伍就锻炼起来了。”
“很有冲劲的时候,每个人都有大能量”
目前,凤凰眼视觉团队已经和HUAWEI一起将空间视频关键技术与系统搬上了多项重大赛事。“凝结时空”的自由视角技术全方位定格了吴京在央视春晚舞台上演绎太极拳、诠释精武国魂时的每一个刚柔并济收放自如的瞬间;“智能亚运体验空间”在杭州第19届亚运会期间受到市民的欢迎;苏炳添在十四运夺冠的精彩瞬间也被成功捕捉,观众可以近距离感受田径比赛中独特的科技魅力。
杭州亚运会现场工作照
北体冰场现场工作照
井下煤矿综采面三维成像工作照
而凤凰眼视觉团队的成员们,也在其中收获理论常识技能以及项目落地的经验。李静分享道:“学生们一起去做这个事儿,很有冲劲的时候,每个人都迸发出巨大的能量。因为大量一线的项目经历,学生们既接触到了行业最先进的技术和设备,也可以全程参与科研攻关、研发以及落地应用的过程,将所学的常识和实践做紧密地结合。同时,在实践过程中遇到困难,去攻克困难的过程可以很好地培养学生们的责任感、敬业精神以及攻克科研难题的信心。”
已经成为一名博士研究生的代嫣冉,回忆起这一段段珍贵的科研历程,坦言道:“能看到大家的科研成果落地应用,受到大家的欢迎和喜爱,心中满是成就感,我觉得自己做的事情非常有意义。”
除了选择继续深造以外,凤凰眼视觉团队中的不少成员选择进入互联网企业就职。“很多已经毕业的学生经常会非常高兴地跟我分享他们在工作中的进步与感悟”,对于学生们取得的每一点进步,李静都感到十分欣慰,“看到团队输送的人才在各自的岗位平台上充满后劲、持续成长,大家也感受到了人才培养的价值和满满的成就感。”
“强化校企科研合作,让更多科技成果尽快转化为现实生产力”,在全国教育大会上,习大大总书记对高校科技成果转化作出重要部署。依托西电与HUAWEI的长期深度合作,空间视频技术成功落地应用,凤凰眼视觉团队成员在各自工作岗位上独当一面、核心攻关,也充分体现了企业、高校产学研主体深度融合,在人才培养、科技成果转化方面形成新合力。
2022年,李静获得HUAWEI火花奖。她谈到,“做难事,必有所得,有时候科研工作如同黑暗中前行,火花能够点燃、激励大家,照亮大家前进。”
2024年,回顾一路的科研和教学工作,李静说:“老师不应是学生的天花板,而应化作学生的阶梯,助力学生成长。对于大学生而言,最为关键的便是不惧失败、勇于开拓,在这个过程里、学生独立思考能力、学术能力、实践能力、合作能力以及做事的专业程度都会得到提升。涉足新兴学科、交叉领域、攻克一线难题,这一过程固然辛苦,然而一群人朝着同一个目标齐心协力、并肩作战的过程,亦是充满快乐的。”
责任编辑:冯毓璇