世界杯的竖屏转播,看似是呈现画幅的变化,但其挑战性并非简单的“横转竖”的视频裁切,而是涉及整个转播理念的创新与制播方式的全方位更新,要求有极高的技术掌控力和转播专业度。
央视频相关负责人介绍,首先是“智能科技+剪辑技术”的思维升级。竖屏赛事转播从画幅、方式和观感上都打破了受众的接受习惯与心理期待。为确保效果的可视性,其采用“人工智能+视音频技术”进行竖屏世界杯赛事的制作。在裁剪视频播出信号的同时,体育导演在构图语言和叙事方式上都切换竖屏的思维进行重新包装,以专业度升级应对技术挑战。其次是运营“内容+呈现”的适配。除了直播前线的技术升级,其在客户端上也针对本次世界杯AI生产平台智能剪辑内容运营,进行了界面适配。包括竖版横滑泳道的承载展示升级、底层播放页面的改造升级等。力图将内容变化与呈现模式相协调。
“竖屏直播”成为本次世界杯直播的最大亮点,可以看到大量的AI(人工智能)技术层面的参与。
“在拍摄对象跟踪上。由于足球比赛本身就具有距离远、跟踪对象复杂等特点,我们引入AI人工智能技术,以解决竖屏直播中运动员分散轨迹多变、足球体积小又运动速度快、目标相互遮挡、赛场背景环境复杂等问题。这就要求技术团队不仅熟悉赛事直播规律,更要懂得神经网络模型和算法优化平衡等技术运用。在竖屏画面处理上,AI智能横转竖系统自带高精度延时控制能力,可以将多路延时固定在一个相同的延时,相互间仅有毫秒级的误差。在无损画质的条件下,实时裁切渲染稳定每秒25-50帧的处理速度,保证不掉帧,这需要人工导播与机器技术的完美配合。在AI横竖屏剪辑生产上,赛事AI剪辑系统基于深度学习、ASR、NLP等技术,对场上画面、球员号码、赛事数据、环境声、足球轨迹、解说员语音等信息自动识别,并且有专业足球专家参与模型训练。经过上万场次的机器学习积累,实现对直播流画面视觉焦点自动追踪,并按横竖屏分辨率精准自动切条,将直播信号转化为数量庞大的点播视频素材和成品。”央视频相关负责人说。
在用户智能交互上。作为首款跨平台云渲染3D卡通智能语音助手,基于新一代多模态人机交互技术打造的“央小云”,依托智能ASR、TTS、NLP等AI技术,推动交互体验从原本的“单向观看”向“双向互动”演化,拥有了自学习和自适应能力。返回搜狐,查看更多