以“科技感”十足的智慧智能手段点亮世界杯报道

admin 体育 2024-02-29 61 0

  世界杯火热开赛,谁是你心中的冠军队伍?快去为你支持的球队助威吧!2022.11.18-12.18 世界杯期间,参与球队助威,即有机会瓜分盐粒奖池。助威次数越多,助威球队每场获胜后瓜分赢取的盐粒越多。每日达成任务成就还可获得额外创作分奖励,加速获得助威次数。点击下方链接,马上去助威吧>>>为你支持的球队助威,赢知乎盐粒

  先看央视的新闻原话:总台将通过CCTV-1、CCTV-2、CCTV-5、CCTV-5+、CCTV-13、CCTV-16等电视频道,央视频、央视体育、央视网、央视新闻等新媒体客户端以及广播频率共同搭建“全媒体”传播矩阵。总台还将充分释放“5G+4K/8K+AI”技术优势,以“科技感”十足的智慧智能手段点亮世界杯报道。

  这次的技术优势主要为“5G+4K/8K+AI”。

  其中5G是指通过5G赋能,将总台超高清电视节目在央视频、央视新闻等新媒体客户端播出。主要就是手机端的播放,虽然最近很多宣传说VR看世界杯,其实也是可以完全胜任的。

  5G相比于4G,可以提供更高的速率、更低的时延、更多的连接数、更快的移动速率、更高的安全性以及更灵活的业务部署能力。5G的最高速度可以达到10Gbps,换算下来是1250MB/s,但是实际用户体验的速率最高只能达到2Gbps,换算下来也只有250MB/s。而且还有很多地区根本达不到这个速度。

  2022年世界杯高清转播分辨率最高可达4K(注意:8K是指8K超高清转播车),4K转播视频码率一般为16-50Mbps时,画质已经非常好了。蓝光原盘的码率可能会达到100Mbps。咱们以极高的50Mbps来算,但是那么你的网速至少要达到6MB/s的下载速度。(注意:实际上根本不可能给你这么高的码率的)4K纪录片,风味人间

  可以看看我NAS里面下载的4K纪录片,实际码率只有9Mbps,但是观看清晰度已经爆表。

  但是仅仅这个码率对于服务器压力已经极其之大,如何降低服务器压力,这就需要涉及AI啦。

  第一个是竖屏直播,其中大量引用AI技术。

  央视频相关负责人原话:在拍摄对象跟踪上。由于足球比赛本身就具有距离远、跟踪对象复杂等特点,我们引入AI人工智能技术,以解决竖屏直播中运动员分散轨迹多变、足球体积小又运动速度快、目标相互遮挡、赛场背景环境复杂等问题。这就要求技术团队不仅熟悉赛事直播规律,更要懂得神经网络模型和算法优化平衡等技术运用。在竖屏画面处理上,AI智能横转竖系统自带高精度延时控制能力,可以将多路延时固定在一个相同的延时,相互间仅有毫秒级的误差。在无损画质的条件下,实时裁切渲染稳定每秒25-50帧的处理速度,保证不掉帧,这需要人工导播与机器技术的完美配合。在AI横竖屏剪辑生产上,赛事AI剪辑系统基于深度学习、ASR、NLP等技术,对场上画面、球员号码、赛事数据、环境声、足球轨迹、解说员语音等信息自动识别,并且有专业足球专家参与模型训练。经过上万场次的机器学习积累,实现对直播流画面视觉焦点自动追踪,并按横竖屏分辨率精准自动切条,将直播信号转化为数量庞大的点播视频素材和成品。

  作为首款跨平台云渲染3D卡通智能语音助手,基于新一代多模态人机交互技术打造的“央小云”,依托智能ASR、TTS、NLP等AI技术,推动交互体验从原本的“单向观看”向“双向互动”演化,拥有了自学习和自适应能力。

  第二个是AI视频优化能力,可以很大的压缩视频码率,同时也不降低画质。极速高清技术,又叫“智能静态编码技术”,次要应用机器深度学习,经过视频场景智能分类、编码参数婚配、前置处置、编码静态优化、码率智能控制、detail reduce、ROI处置等技术和流程,对直播或许点播视频流停止智能处置,以分配最优编码参数,从而以更低的带宽本钱给用户提供更高清的视频直播流。

  谈到这个,咱们也可以聊一下帧间压缩,帧间压缩要参考其他帧数据,因为视频拍摄时,相邻两帧间的图像关联性高,所以一般来说帧间的压缩率比帧内高。

  举个例子:固定机位下人在动背景没动,使用帧内压缩会压缩每一帧画面,并且详细记录每一帧信息,后期不会损失清晰度,但是这样子体积会很大;使用帧间压缩只会压缩人在动的这一部分画面,背景部分则保持不变。不会详细记录每一帧信息,体积就会小很大。

  就是视频只记录人的动作变化,不记录草坪,因为草坪不变,就一直使用之前帧的草坪画面,这样子就可以极大降低视频码率。而智能静态编码技术也是依托于此进行开发延伸的。

  观众消失技术。

  延时转播技术

  球迷消失技术 直播延迟技术 “删减技术”

  1:延时转播技术

  2:观众智能消失技术

以“科技感”十足的智慧智能手段点亮世界杯报道

以“科技感”十足的智慧智能手段点亮世界杯报道

评论