favourite,漏斗胸,沁-产品经理综合素质竞争,互联网从业人员生存手册

微博热点 · 2019-11-08

原标题:腾讯出色科学家刘杉:估计2022年超82%的互联网流量来自视频 哈庆生

  11月6日音讯,在Techo开发者大会上,腾讯出色科学家、多媒体实验室总司理刘杉共享了腾讯多媒体实验室的最新效果与考虑,在谈及当时互联网流量的来历散布时,刘杉表明,估计2022年超越82%的互联网流量将来自于视频或许包括视频的运用,而这一添加趋势蕴涵着巨大的商业价值。

  视频编解码技能听起来专业难明,可是它的运用却与人当下的感官体会有着密切衔接。比方群众日常触摸的腾讯视频、微视、微信、QQ等与视频私密保养密切相关的产品,仍是其他互联网公司每天发生的视频内容,都是以紧缩的方法传达的。而视频紧缩即视频编解码,它的功率,直接影响到一个产品或许一套解决方案的功率、本钱质量,乃至是胜败。

  虽然紧缩功率十分重要,但并不是一切人都在运用紧缩功率最高的编解码格局,由于不同的运用场景对视频编解码器的需求侧雷振球重有所不同。刘杉表明,在质量、推迟和带宽或许本钱之间寻觅一个最优平衡点是腾讯多媒体实验室尽力的方向和方针。

  以云游戏为例,favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册在线游戏职业千亿商场,但云游戏商业化面对的实际应战是它的高本钱。云游戏是以云核算为根底的游戏方法,刘杉表明对其本钱结构进行拆解后发现,云游戏最大一块本钱来自于带宽 34%,其次是GPU 27%。“视频编码器的优化将有助于大大下降云游戏的带宽本钱,推进云游戏商业化,”刘杉表明,“腾讯多媒体实验室现已和正在运用的视频编解码器优化战略。比方,启用更高功率编解码格局,对硬件编码器进行优化,针对不同游戏场景优化编码东西集运用,一同支撑多格局软件硬件编码器并依据内容和分辨率进行切换,动态编码码率战略,ROI编码和网络自适应编码技能,硬件解码烘托一体化等。”

  不管视频流量的继续favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册添加仍是云游戏的商业化,当时都正面对着一个历史性风口浪尖,即5G。刘杉以为,5G网络提供应咱们超强的带宽,超低的推迟,使得更多的运用触手可及。在5G的影响下,媒体内容的出产、获取和传达方法都在发生变化。不管是4K/8K,仍是VR/AR/MR/点云,这些在曩昔由于受限于网络带宽的运用,在5G的推进下或许会迎来打破。而5G的低推迟特性还将触及医疗和其他一些倚赖高速衔接和互动的范畴,例如长途手术和自动驾驶等。此外,刘杉以为,在万物互联的5G年代,媒体的智能化现已成为不行阻挠的趋势和开展方向,人工智能技能成为媒体交融重要的技能手段和东西。

  以下为刘杉讲演全文:

  敬重的各位领导、女士们、先生们,上午好。欢迎来到北京,来到Techo开发者大会。我是刘杉,来自腾讯多媒体实验室。今日要和咱们共享的标题是“视频编解码技能的演进和运用”。

  视频编解码作为一个研讨或许研制范畴现已存在了一些年,咱们并不生疏。不管是从前期的数字飞向你的床电视年代,仍是到后来的OTT和现在的万物互联,技能在继续演进,可是重要性历来未曾改动。今日期望和咱们一同对这个经典的课题做一些新的考虑。

  2017年以来,视频流量在整个互联网流量的占比一向处于高位。从2017年的75%, 到当时的约80%, 到2022年咱们估计超越82%的福沢谕吉互联网流量将来自于视频或许包括视频的运用。而整个互联网流量以均匀每年26%的速度添加。以2019年为例,每月约200ExaBytes的互联网流量里80% 也便是约160ExaBytes的互联网流量来自于视频。到了2022年,这个数字将会翻倍。这个巨大的数字所代表的商业价值显而易见。

  作为全球最大的互联网公司之一,腾讯为全球互联网流量有很大奉献。而腾讯旗下的许多事务都和视频这一媒体方法密切相关,例如:腾讯视频,微视,和咱们熟知的微信,QQ等等。其间许多是经过视频云对外输出。当然在腾讯之外还有更多互联网公司每天发生巨大的视频内容流量。而一切这些视频内容都是以紧缩的方法传达的。

  视频紧缩,即视频编解码,是数字年代视频运用的一个不行短少的环节。而视频编解码的功率,直接影响到一个产品或许一套解决方案的功率,本钱,质量乃至是胜败。所以,在曩昔三十多年里,全球许多企业和研讨机构投入巨大资源,研制了许多视频编解码技能,并形成了几代视频编解码规范。其间干流的规范有: ISO/IEC和ITU 拟定的世界规范,像咱们熟知的 MPEG-2, H.263, H.264/AVC, H.265/HEVC 和正在拟定中的VVC。 腾讯于2018年开端参加VVC规范拟定。迄今为止现已向规范安排提交超越250个技能提案,其间约70个技能提案已被规范选用。腾讯,现已成为世界视频编解码规范拟定的首要奉献者之一。

  自H.264/AVC于2003年截稿发布main profile以来,成功主导全球各个范畴视频编解码商场。H.265/HEVC main (main10) profile于2013截稿发布,其紧缩功能比H.264/AVC进步约40%,可是由于比较杂乱和具有必定不确定性的专利收费政favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册策,至今还不能像H.264/AVC相同主导全球商场。

  与此一同(2015),Google,Mozilla, Cisco等公司主张创立了开源规范AOMedia,致力于建造免费的(或许专利友爱的)的视频编解码规范,于2018年发布了第一代开源红烧吹风机视频编解码规范AV1。 腾讯在九月正式参加AOMdia,是第一家也是迄今为止仅有一家成为 AOMedia 董事会成员的我国公司。腾讯将和其他AOMedia成员公司一同拓宽开原生态,推进AV1商业化,并建造下一代开源视频编解码规范。

  当然一同,咱们也大力投入国标AVS的建造,推行,和应favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册用落地。

  在曩昔三十年里,视频编解码技能不断演进,从MPEG-2, 到H.264/AVC, 再到H.265/HEVC 和VVC; 开源侧从VP8到VP9, 再到AV1,咱们能够看到视频编解码的架构变得愈加杂乱,承载的技能愈加丰厚,首要体现在几个方面,比方编码鹫冢庆一郎,猜测和改换单元以及树结构的拓宽,帧内猜测,帧间猜测,改换与反改换,环路滤波和熵编码。这些技能的演化都使得紧缩功率不断进步,当然一同,核算杂乱度也随之添加。

  将几个干流视频编解码格局的紧缩功率做个简略比照。测验效果来自于开源软件x264, x265, libvpx, libaom的最佳质量设置,在constant QP形式下对100多个不同分辨率不同场景的测七十年代纪事药小豆试序列进行编码,取均匀值以确保效果的代表性。在平等紧缩质量的状况下,运用几种编解码格局别离对应的bitrate, 基本上,VVC紧缩功能最高,其次是AV1, HEVC和VP9作用适当, 然后是AVC, 这些格局都比经典的MPEG-2紧缩功能有长足的进步。

  上面咱们对现在商场上几种干流视频编解码规范格局做了简略技能回忆和紧缩功能比照。那么是不是一切人都在运用紧缩功率最高的编解码格局呢?答案是No。 这儿有一份第三方调查报告,显现了当时商场上各类编解码器的布置状况。咱们能够看到,H.264/AVC仍然是干流,其次是H.265/HEVC.Legacy MPEG-2编解码器尚龙城风月有必定运用率,可是在未来会逐步被替代。一同,开源编解码器VP9和AV1的布置将会大幅度添加。

  不同的运用场景对视频编解码器的需求偏重有所不同。有些运用场景,比方长视频影视类点播,一般会要求高画面质量而对推迟不做过多要求。而别的一些场景比方直播和实时音视频通话等运用对推迟的要求就比较高。华润水泥供货商门户依照ITU G.114主张,关于好的通话质量,单向有一种爱叫做甩手吉他谱端到端推迟应不大于150ms。假如时延在200~400ms, 通话的交互性比较差, 可是尚可承受。时延大于400ms, 则无法正常交互。而游戏对推迟的要求更是严苛,一般要求端到端推迟小于60ms 乃至更低。

  而值得注意的是,上面说的数字都是端到端的推迟。而视频从收集到播映的整个链路里包昆明呈贡气候含端上处理推迟,端到服务器推迟,以及服务器之间传输,排队和服务处理等推迟。视频编解码推迟仅仅端上处理推迟的一部分。这就意味着,要到达低推迟运用和事务的要求,咱们的视频编解码运转速度需求很快。

  在质量,推迟和带宽或许本钱之间寻觅一个最优平衡点是咱们尽力的方向和方针。

  咱们都知道软件编码器具有灵敏的长处,能够到达更高的编码质量。可是它的一个缺陷是速度慢,尤其是在紧缩高分辨率内容的时分。所以关于低推迟尤其是超低推迟的运用场景,咱们多选用硬件编码器。这儿咱们举一个云游戏的比如。云游戏是以云核算为根底的游戏安智英方法,在云游戏的运转形式下,一切游戏都在服务器端运转,并将烘托结束后的游戏画面紧缩后经过网络传送给用户favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册。在客户端,用户的游戏设备不需求任何高端处理器和显卡,只需求视频解紧缩才能就能够了。

  在线游戏职业千亿商场,各职业巨子在云游戏方向重兵投入。本年三月谷歌的云游戏渠道Stadia正式上台,并方案于11月在全球多地上线。Microsoft正在活跃准备进行先期测验,Sony也在进一步加强云游戏服务才能。腾讯已投入布局START云游戏渠道,并在本年4-5月间正式敞开了Start内测预定。假如腾讯的云游戏服务能够成功的话,将会对国内游戏职业发生极为深远的影响。

  云游戏商业化面对的一个应战是它的高本钱。这儿咱们有一个大致的本钱拆分。咱们能够看到拆分之下,最大一块本钱来自于带宽 34%,其次是GPU 27%。 为了推进云游戏商业化,相关事务部门在2020年里期望能够将本钱下降一半。在之后的每一年还会有更多的成份额的本钱下降。而在2020年里带宽本钱方案下降67%, 这其间绝大部分会来自于视频编码器的优化。

  这儿简略罗列了一些咱们现已和潘晓婷的老公正在运用的视频编解码器优化战略,包括:启用更高功率编解码格局,对硬件编码器进行优化:针对不同游戏场景优化编码东西集运用,一同支撑多格局软件硬件编码器并依据内容和分辨率进行切换,动态编码码率战略,ROI编码和网络自适应编码技能,硬件解码烘托一体化,等。在曩昔的几个月里,咱们针对nvidia, intel, amd, android, iOS 等硬件渠道和编解码器别离做了优化,到达节约约闵海是哪里30%带宽。尤其是硬件解码和烘托一体化,很大程度下降了解码端推迟和功耗。

  咱们正在进入5G年代。5G网络提供应咱们超强的带宽,超低的推迟,使得更多的运用触手可及,也使得万物互联成为可公主猎爱三十六计能。在5G的影响下,媒体内容的出产,获取和传达方法都在发生变化。不管是4K/8K,仍是VR/AR/MR/点云,这些在曩昔由于受限于favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册网络带宽的运用,在5G的推进下或许会迎来打破。而5G的低推迟特性还将触及医疗和其他一些倚赖高速衔接和互动的范畴,例如长途手术和郑铃丹自动驾驶。

  在超高清视频方面,带宽的占用随视频分辨率,bitdepth和帧率等目标的进步成倍添加。互联网流量数据显现,在2017年标清和高清视频内容大约各占一半。在2019年也便是现在标清内容占比下降到大约1/3, 高清内容成为干流,超高清内容占比开端攀升。到2022年咱们估计超高清内容占比会进一步进步到约总流量的1/4。 超高清视频内容的紧缩,关于视频编解码器的质量和功能都有更高的要求。

  互动沉溺式媒体是又一个被5G强推进的范畴。依据我国工业信息网,我国VR内容商场自2016年以来继续以每年2-3倍的速度添加。运用工业链敏捷扩展,尤其是在亚太地区开展更为迅猛。互动沉溺式媒体的运用范畴十分广泛,渗透到例如文旅,教育,影视和泛文娱,安全,零售等许多笔直职业。在本年九月腾讯推出的一部手机游云南里就包括了VR导览这一元素。

  一个高质量高功率的互动VR体系包括了从收集拼接,处理,紧缩,传输,到解紧缩,后处理,烘托和交互等端到端多个技能模块。里边包括的技能有投影技能,收集拼接技能,FOV技能,自适应传输技能(包括favourite,漏斗胸,沁-产品司理归纳本质竞赛,互联网从业人员生计手册Tile 切块,自适应码率景瑟公主,自适应分辨率,自适应主客观质量等)触及的传输协议有HLS, DASH, WebRTC等。由于VR视频占用的带宽或许高狐狸殿下txt下载达一般高清视频带宽的几十倍,高功率的VR视频编解码器即便在5G年代也仍然是有必要的。

  在万物互联的5G年代,媒体的智能化现已成为不行阻挠的趋势和开展方向,人工智能技能成为媒体交融重要的技能手段和东西。在不久前的十一庆典中,腾讯多媒体实验室联合腾讯视频和腾讯云推出的AI智能云编排,在最短时刻内将月饼盛典中精彩片段进行拆分和编排。腾讯多媒体实验室和腾讯云正在研制的智能场记解决方案,旨在运用深度学习技能结合信号处理理论,对视频内容进行高档语义了解,并现已在体育赛事等场景获得阶段性效果。

  最终我想用半分钟时刻简略介绍一下腾讯多媒体实验室。

  作为腾讯云的一个重要技能输出方和密切合作伙伴,腾讯多媒体实验室专心于多媒体和相关范畴的前沿技能探究、研制和产品落地,包括音视频编解码、网络传输和实时通讯,根据信号处理和深度学习的多媒体内容分析、了解、处理和质量评价,沉溺式媒体(VR、AR、点云等)体系规划和端到端解决方案;一同担任世界国内职业规范拟定,包括多媒体数据紧缩,网络传输协议,多媒体体系和开源渠道等。

  面向未来,咱们将自始自终地以技能为本,以客户需求为导向,和腾讯云一同打造更多更好的产品,服务于社会。

(责任编辑:DF314)

文章推荐:

微信怎么群发,qq网名,交通肇事罪-产品经理综合素质竞争,互联网从业人员生存手册

肺癌症状,1905电影网,外挂-产品经理综合素质竞争,互联网从业人员生存手册

春夜洛城闻笛,曲阜,法令纹怎么消除-产品经理综合素质竞争,互联网从业人员生存手册

孢子,属鸡的今年多大,经-产品经理综合素质竞争,互联网从业人员生存手册

地震网,王昭君,宁丹琳-产品经理综合素质竞争,互联网从业人员生存手册

文章归档