多功能视频编码(VVC,Versatile Video Coding)是海外电信定约电信圭臬化部门(ITU-T)和海外圭臬化组织 / 海外电工委员会(ISO / IEC)团结制定的最新海外视频编码圭臬。与前代高效视频编码(HEVC)比较,VVC 编解码器概况在保证疏导视频质料的情况下,缩减视频数据大小约 50%。在采集视频流量延续增长的时间,视频压缩变得越来越穷困。跟着使用生成式东谈主工智能(AI)制作视频实质的海潮行将到来,同期视频实质制作和实质破钞的节律延续加速,减少多媒体实质的比特数仍是一个穷困问题。
让咱们来望望那些使 VVC 区别于现时所使用的视频编码器的基础创新,以及高通技能公司为打造一个充满活力的 VVC 生态系统所作念出的致力于。
面向常见用户体验,优化视频编码
不啻于显赫裁汰数据大小,在视频会议、屏幕分享和全景视频等特定视频场景中,VVC 编解码器还引入了多种颠倒实用的智能器具。
视频会议
新冠疫情对东谈主们的责任形态产生了潜入的影响,以致东谈主们对而已办公器具(尤其
是视频会议软件)的需求剧增,视频通话已成为个东谈主和专科用途中很穷困的通讯形态。
在视频通话中,会捏续监测两头的采集带宽,并相应迁移入站和出站视频质料,使视频数据符合可用带宽。关于曩昔的视频编解码器,比如高效视频编码(HEVC)和高档视频编码(AVC),当视频鉴别率发生变化以符合可用采集带宽时,工作器需要发送一种特殊类型的帧,称为“即时解码刷新”(IDR)帧。这会中断时候预测,意味着无法援用来自先前帧和后续帧的数据估算。
VVC 提供了一种叫作念“参考图像重采样”(RPR)的特殊功能,不错弥补现时这一代视频编解码器的不及。在解码时,RPR 概况调动视频的鉴别率,而无需 IDR 帧。这概况幸免大都 IDR 帧带来的数据量激增,从而达成更畅通的视频通话体验,不会出现卡顿。
VVC 中的参考图像重采样可达成更畅通的视频通话体验
屏幕分享
屏幕分享在团队相助中变得越来越受迎接,尤其是在而已办公的时间。借助屏幕分享功能,团队成员不错纵欲地展示他们的责任并及时进行神色相助。跟着屏幕分享使用需求的延续增长,与录像头生成实质总计被渲染、羼杂或访佛的图形数据的使用需求也在增长。
从一运行,VVC 即是一种旨在守旧对屏幕分享实质进行编码的编解码器。VVC 编解码器包括五个主要的与屏幕实质编码联系的底层器具:变换跳过残差编码(TSRC)、基于块的差分脉冲编码调制(BDPCM)、帧内块拷贝(IBC)、自符合颜料变换(ACT)和调色板模式。
通过减少需要传输的数据量,这些器具匡助提高编码屏幕实质的颜色准确度和总体数据成果。曩昔的视频编解码器增多了一些屏幕编码校正特点,但这些不够高效,且并非被扫数末端守旧。比较之下,由 VVC 界说的屏幕分享实质的编码器具在主头绪(Main Profile)中被默许守旧,何况应该在大多数守旧 VVC 的树立上可用。
相较于其他视频编解码器所展现出的高成果,不错说,VVC 将会是那些领有全部或部分屏幕分享实质运用的主流选择。
VVC 改善屏幕分享的颜色准确度和总体数据成果
全景视频
全景视频已特出传统视频的被迫范式,提供更高程度的千里浸感和交互感。此项创新性技能概况使用户与场景或环境交互,在捏造空间中感受参与感和临场感。捏造试验(VR)是一个一经在咱们日常生涯中达成的千里浸式技能表率,在文娱之外,对电子医疗、电化教师和文化遗产展示等穷困经济鸿沟产生影响。
VVC 为全景视频引入智能器具:码流索求与归拢、子图像、捏造畛域和水平环绕指引赔偿。全景视频常常需要以时候同步的形态同期束缚多个基本码流。关于曩昔的视频编解码器,每个基本码流需要一个实例化的视频解码器。不外,码流的索求与归拢界说了一种在压缩域拼接和剪裁视频的形态,解耦了视频运用所需的基本码流数和在末端上运行所需的视频解码器实例数。
子图像是 VVC 中引入的全新图像分区决议。它是一个矩形编码区域,寂寥于附进区域进行编码,因此可寂寥索求图像。子图像不错对应于一个感敬爱的区域,比如破钞者通过 VR 头显看到的区域。基于用户视向,它概况守旧优先束缚并向头显末端发送更高保真度的子图像。
VVC 守旧子图像,改善 360 度视频体验
在 360 度视频中,当咱们将其升沉为二维示意时,某些投影(举例立方热心图 cubemaps)的非对皆面畛域可能出现阻隔点。但通过在边际处禁用环路滤波,不错减少这些伪影。借助 VVC,咱们概况通过水平或垂直捏造畛域来进行环路滤波的戒指,捏造畛域的建立也会在码流中进行标记和传输。
环绕指引赔偿守旧从图像的左畛域除外运行践诺指引赔偿,在水普通朝上进行环绕预测,并使用来自图像右侧的像素值,反之也是。这一全新的活泼性有助于使用等距柱状投影措施对全景视频进行编码。
率先的基础视频技能
20 多年来,高通技能公司在穷困视频技能的发展中演出了至关穷困的变装,这些技能透顶调动了视觉实质在智高手机、平板电脑、PC、电视和其他末端上被拍摄、传输以及破钞的形态。这些创新使视频质料更佳,实质更丰富,同期还裁汰了带宽和存储空间,为生态系统中的破钞者和公司都创造了广宽效益。咱们的发明家获取平庸认同,咱们技能发明的影响力不仅限于迁移生态系统,对愈加平庸的鸿沟也有所助益。业界平庸部署由高通技能公司助力激动的视频技能,其中包括率先的视频编解码器、流契约(streaming protocol)和多媒体文献措施。
在激动 VVC 技能发展方面也不例外。与 HEVC 相通,高通技能公司是本文中所先容的 VVC 圭臬的主要孝顺者。
通过智高手机 VVC 演示,激动生态系统上前发展
VVC 在生态系统中的发展势头苍劲,当今一经被加入 DVB 中枢轨范(Digital Video Broadcasting Project / 海外数字视频播送组织),用于播送和宽带运用的视频编码。巴西数字电视播送技能圭臬 ISDB-T International(又称 SBTVD),也领受了 VVC 算作主要视频编解码器 —— 预测其他播送圭臬也将接踵领受该视频编码圭臬。
在高通技能公司,咱们对 VVC 编解码器奈何提高当下的视频体验感到慷慨。为此,咱们一经运行与生态系统中的伙伴合作,期待将 VVC 技能带给破钞者。
近日,咱们联袂腾讯公司,在集成 Adreno GPU 的第二代骁龙 8 迁移平台上对其 VVC 软件解码器进行了优化。该预商用原型达成了高出 30% 的性能提高,概况褂讪且及时畅通地播放 4K 10-bit 60 帧 / 秒(FPS)的超高清 VVC 实质。7 月 28-31 日,2023 年中国海外数码互动文娱博览会(ChinaJoy 2023)于上海举办,咱们初次演示了这款经优化后的解码器。咱们驯服,经优化的软件解码器(举例这款来自腾讯公司的解码器)将有助于加速在视频实质工作中领受 VVC 编解码器的进度。
告白声明:文内含有的对外跳转承接(包括不限于超承接、二维码、口令等格式),用于传递更多信息,从简甄选时候,扫尾仅供参考,IT之家扫数著述均包含本声明。