当前位置: 主页 > 未来 > 详情
热头条丨“竖屏世界杯”的背后,升级的不只是技术

科技日报   2022-11-26 18:25:38


(资料图片仅供参考)

科技日报记者 马爱平

日前,卡塔尔世界杯开幕,这也是央视第12次转播世界杯。据悉,央视频在本届世界杯首次尝试引入竖屏直播,并结合智能技术为观众提供更为丰富的观赛体验。

据央视频相关负责人了解,本届世界杯,央视频获得了国际足联(FIFA)独家授权,以竖屏制作能力为依托,推出了“竖屏世界杯”。相比起横屏观看世界杯,竖屏观赛更具身临其境之感。观众可以追随球员的运动,捕捉到以往观赛所难以观察到的比赛细节与球场情态,仿佛置身球场之中。尤其是对于专业球迷来说,他们的观赛需求不仅仅是一个个精彩进球瞬间,还有球队的攻守转化、球员的跑位变化以及精妙的技战术动作,竖屏观看能够更加精准地满足他们的需要。

“为了给用户带来更加多元的观赛体验,我们从赛事前方选取了近30路并发信号回传,并从中挑选最为适合竖屏制作的信号源,来进行‘横转竖’处理。世界杯比赛场次多、赛程长、流程密集,针对足协项目的特点,我们为世界杯量身打造了竖屏赛事画面标准,结合客户端UI设计,将视频裁切比例定为3:4,最终输出一个9:16的竖屏赛事画面,让图像表达与赛事画面、互动评论、赛事包装相整合,确保准确、高效地输送给观众更具沉浸感的画面信息。”央视频相关负责人说。

世界杯的竖屏转播,看似是呈现画幅的变化,但其挑战性并非简单的“横转竖”的视频裁切,而是涉及整个转播理念的创新与制播方式的全方位更新,要求有极高的技术掌控力和转播专业度。

央视频相关负责人介绍,首先是“智能科技+剪辑技术”的思维升级。竖屏赛事转播从画幅、方式和观感上都打破了受众的接受习惯与心理期待。为确保效果的可视性,其采用“人工智能+视音频技术”进行竖屏世界杯赛事的制作。在裁剪视频播出信号的同时,体育导演在构图语言和叙事方式上都切换竖屏的思维进行重新包装,以专业度升级应对技术挑战。其次是运营“内容+呈现”的适配。除了直播前线的技术升级,其在客户端上也针对本次世界杯AI生产平台智能剪辑内容运营,进行了界面适配。包括竖版横滑泳道的承载展示升级、底层播放页面的改造升级等。力图将内容变化与呈现模式相协调。

“竖屏直播”成为本次世界杯直播的最大亮点,可以看到大量的AI(人工智能)技术层面的参与。

“在拍摄对象跟踪上。由于足球比赛本身就具有距离远、跟踪对象复杂等特点,我们引入AI人工智能技术,以解决竖屏直播中运动员分散轨迹多变、足球体积小又运动速度快、目标相互遮挡、赛场背景环境复杂等问题。这就要求技术团队不仅熟悉赛事直播规律,更要懂得神经网络模型和算法优化平衡等技术运用。在竖屏画面处理上,AI智能横转竖系统自带高精度延时控制能力,可以将多路延时固定在一个相同的延时,相互间仅有毫秒级的误差。在无损画质的条件下,实时裁切渲染稳定每秒25-50帧的处理速度,保证不掉帧,这需要人工导播与机器技术的完美配合。在AI横竖屏剪辑生产上,赛事AI剪辑系统基于深度学习、ASR、NLP等技术,对场上画面、球员号码、赛事数据、环境声、足球轨迹、解说员语音等信息自动识别,并且有专业足球专家参与模型训练。经过上万场次的机器学习积累,实现对直播流画面视觉焦点自动追踪,并按横竖屏分辨率精准自动切条,将直播信号转化为数量庞大的点播视频素材和成品。”央视频相关负责人说。

在用户智能交互上。作为首款跨平台云渲染3D卡通智能语音助手,基于新一代多模态人机交互技术打造的“央小云”,依托智能ASR、TTS、NLP等AI技术,推动交互体验从原本的“单向观看”向“双向互动”演化,拥有了自学习和自适应能力。

相关资讯