金山云AI新突破:集智高清狂升画质劲省带宽

眼观六路、耳听八方,大脑、情绪和注意力均处在亢奋状态,运用各种招术攻击对手的同时也能巧妙防御……游戏直播为万千玩家提供了观摩高手过招的绝好机会,很多职业选手也由此拥有了大批粉丝,进一步增添了游戏的魅力。

游戏如今已从亚文化向主流文化蔓延,而对于众多游戏玩家来说,诸如观看亚运会的《英雄联盟比赛》(简称LOL)、2018王者荣耀KPL秋季赛、2018英雄联盟全球总决赛等重大赛事,也已成为了新的生活方式。与此同时,玩家对高清视频画质和流畅播放体验的追求,成了当下视频运营商的最大痛点。针对于此,金山云最新上线的产品集智高清(Kingsoft smart high definition,简称KSHD),能够带来超清图像视觉体验,适用于多种视频场景,将成为视频运营商的得力助手。

image.png

金山云集智高清已在官网上线

集智高清直击视频行业最大痛点

如今移动终端分辨率越来越高,体验越来越好,对于广大直播用户而言,对包括游戏在内的各式直播视频的画质和流畅度的要求也在不断提升,但顺畅、高清意味着直播平台带宽成本的提高,从而形成了视频行业的最大痛点。

针对痛点,金山云提出了解决方法。集智高清这一产品通过自研算法,整合AI、编码、图像处理等多种技术,通过深度神经网络对视频画面内容进行感知,优化主观体验和智能调节编码,对视频进行画质增强,提升视觉效果,适配更高清屏幕,带来更好视觉感受的同时,还可帮助客户节省20%—40%视频传输带宽,适用于多种视频场景。

在视频场景分类上,集智高清通过深度学习方式,形成了十余大类,几十种小类视频场景模型库。客户在使用集智高清服务时,可实时分析直播流,匹配相应的视频场景模型,根据客户对视频画质的要求,对画质进行实时处理。

针对不同场景灵活打造不同方案

首先以熊猫TV出品的综艺节目《Panda Kill》为例,这是一档室内节目,根据这一特点,在匹配相对应的场景模型后,集智高清根据场景分类识别结果,结合码率、帧率、分辨率等选择最适合的编码参数,同时对视频源进行锐化、降噪、色阶补偿等多种画面处理。值得一提的是,集智高清能够针对节目中的灯光和反光点,通过AI建模,将人眼感受不到的灯光和反光消除,将纹理保存下来,帮助直播平台节省更多带宽。

image.png

《Panda Kill》画质对比(左为原片,大小5M,右为集智高清处理后视频,大小3M),

在画质不变的前提下,集智高清能够帮助客户节省带宽

再以《英雄联盟》这款游戏直播为例。由于游戏直播场景较为特殊,实时动态元素多,如果码率不做适配,就会影响画质和用户的观看体验。集智高清运用码率智能控制和编码动态优化,将AI画质增强至视频中的每个细节中,让包括前景色、背景色和UI背景区域在内的画质大幅提升。集智高清的ROI处理技术,可根据人眼最敏感最关注的内容做视觉感知保护,对占码率的其它区域进行优化,实现画质增强的同时节省至少20%的带宽。

游戏直播视频

集智高清处理后视频

提升视频画质的三大法宝

由此可见,集智高清不但可帮助视频平台客户实现在画质不变的情况下节省带宽,而且还可以实现视频画质增强,让用户的主观感受变得更好。这是因为,集智高清有着视频场景识别、视觉重点分割和视频画质增强三大核心技术。

在视频场景识别方面,集智高清针对游戏、新闻、秀场、动漫、体育、短视频等多种类型内容,分别建立视频模型,以便根据不同的视频场景进行分类实时识别,根据不同场景的识别结果,配置适合此类场景的编码参数,根据纹理和运动变化幅度等,选择最优编码模板参数。

在视觉重点分割上,上述ROI处理技术是其中的一部分。集智高清在处理视频时,对不同区域进行分层,针对每一层进行处理,保护人眼视觉核心区域,对此区域内的宏块编码进行锐化、亮度增强等技术处理,减少不重要的区域的码率,将视域进行精细化处理,加强用户的视觉体验。

image.png

视觉重点分割

视频画质增强则以更小的视频文件实现更清晰画质和更低码率。集智高清根据不同的场景,如动态元素较多时,使用更高码率,相反则使用更低码率,针对视频图像的静止部分,分配更低码率,动态部分则分配更高码率。其中,集智高清主要对人眼关注区域进行画质增强,相对弱化非重点区域,这样既可以保证视频的清晰流畅,又能够降低码率,为客户节省成本。

互动问题:说说你此前观看游戏直播的惨痛经历吧,你期待怎样的直播体验?(作者:张铭阳)