产品动态 > 正文

挽救低分辨率! 网宿AI视频增强技术全新升级

2019-08-01

继视频数字化、高清化后,超高清技术正掀起新一轮的视频技术革新。当前从硬件层面看, 4K已经成为视频硬件标配,然而产业发展依然面临着超高清内容少、终端硬件标准不统一等瓶颈。

其中,超高清视频内容的匮乏,已经成为当下影响观看体验和产业发展的掣肘。视频内容的制作周期长、成本高,短时间内难以实现大量高清晰度视频的新供给;而现实生活中,又常常遇到UP主上传的视频画质太差;纪录片或老电影的清晰度低,色彩灰暗等存量视频的问题。

因此,只有超清设备还远远不够,视频清晰度与设备不匹配的矛盾如何解决呢?

网宿科技前三季度净利润4.26亿元,同比增长142.85%

网宿科技前三季度净利润4.26亿元,同比增长142.85%

网宿推出的基于AI算法的视频增强技术,突破了视频原有清晰度的限制,能够快速实现海量低清视频的高清化,极大扩宽了超高清视频的内容来源。

具体来说,AI视频增强可以针对那些由于采集设备较差、网络环境欠佳、拍摄时间久远、画面抖动等导致画质损伤的片源,通过超分辨率、增强、修复等人工智能技术,去除视频中的噪点、伪影、马赛克等,提高人眼视觉清晰度感知。

网宿自去年在业内率先实现AI视频增强技术落地应用以来,经过一年多的实践,该技术在处理效率、实施效果等方面已全面升级,主要体现在:

1、处理速度提升6倍,做到实时处理。

比如高清转4K,原本1秒只能处理5帧视频,现在1秒可以处理30帧视频。模型上面也进行了独立的架构设计,让神经网络更加适用于超分场景,同时增加了海量的特定行业视频数据进行训练,在两者的支持下增强效果得到提升。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

2、增设前置画质鉴别器,降低人工刷选的投入。

增设前置画质鉴别器,根据画质检测结果自适应合适的模型参数处理,降低人工刷选的投入。智能检测内容主体,根据不同内容主体自适应选择合适的模型处理,效果更优。

3、业内首创AI视频增强结合智控高清技术,输出码率涨幅可管可控。

网宿AI视频增强是一整套完整的视频增强方案,内部由多个模块组成,每个模块负责不同场景的画质增强,客户可以针对不同场景自由组合。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

通过深入了解行业需求,基于大量场景实践,针对互联网行业和传统广电这两个行业,网宿提出两套落地方案。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

场景1:短视频增强

先来看一下短视频行业的痛点及网宿短视频增强方案是怎么解决问题的;

1、视频画质不可控,影响用户视觉体验

用户上传的视频一般都通过一定编码压缩,易产生块状效应、振铃效应等伪影;受限于拍摄设备配置、光线不足等因素,上传的视频可能存在较多噪点,画面模糊等。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

以上问题普遍存在于短视频中,通过视频增强中的超分、去伪影、去噪三个工具箱可以得到很好的解决。

举个例子, AI视频增强技术可以去除左侧视频中的伪影、噪点,从而提升人脸边缘轮廓,使画面更清晰,视觉更细腻。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

另外,AI视频增强通过机器学习智能检测出目标主体,区分出人脸、文字、背景,并分别用人脸超分模块、文字超分模块、背景超分模块进行转换,针对不同内容选择不同处理方式会最大程度上保留画质细节,增强视频体验。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

2、视频画质鉴定难,传统人工刷选成本高

传统的视频画质鉴定需要先通过人工对大量的视频进行肉眼筛查,挑选出需要修复的视频,基于传统的修复手段也会导致很多局部细节的失真,其一是效率低,其二是效果不明显。

网宿AI视频增强的处理方式是这样的。

在处理之前,前置画质鉴别器对画质进行判断,没问题的视频不做处理,有问题的视频会自适应匹配增强模型进行修复,相比于人工处理最大的优势就是效率高、成本降低。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

3、要画质也要控成本

一些画质增强的技术,提升了画质,码率也直线上升,成本过高。网宿视频增强可结合网宿智控高清技术,实现不影响超分画质的前提下自定义输出码率,让码率增幅更可控。

场景2:传统广电超高清转制

传统广电行业的几大特点及网宿传统广电超高清转制方案是怎么解决问题的;

1、老旧影视胶片存放时间长,胶片受损

由于历史原因,各大电视台保存的老旧电影、电视剧、纪录片等存放时间长,胶片转换成数字化后容易出现噪点、划痕、色彩灰暗等现象。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

传统的修复手段,一部电影至少需要10人20个工作日,利用AI增强进行自动修复可以大幅减少这些成本。

我们可以看一下例子,经过AI视频增强后,视频画面中屋檐的纹理更加的清晰,左边的原图就会比较模糊。

网宿科技前三季度净利润4.26亿元,同比增长142.85%

2、广电内网传输,无法使用公网技术

广电很多都是采用内网传输,视频不能出内网,也无法使用公网上的视频修复技术,不能满足高清频道的播出标准。考虑到广电行业的特殊需求,网宿提供本地化私有服务,在内网就能实现老旧影片的修复和重制,充分保护广电传媒私密性。

3、广电视频4K制式特殊,需要特殊支持

广电的4K标准有别于互联网行业,比如4K就要同时满足BT.2020色域,50p高帧率,10bit位深,HDR高动态范围、4K高分辨率要求。网宿AI视频增强支持广电超高清4K标准,提供1080P转4K,SDR转HDR,BT.790转BT.2020, 8bit位深转10bit,50i帧率转50p的全套转制方案。

4K转制效果如下:

网宿科技前三季度净利润4.26亿元,同比增长142.85%

目前,网宿AI视频增强已经成功应用于美拍短视频,

网宿科技前三季度净利润4.26亿元,同比增长142.85%

通过AI技术与视频算法深度结合,打开超高清视频时代的大门,以更低的成本提升视频质量,持续为视频产业赋能!

本文内容的版权持有者为网宿科技股份有限公司(“网宿科技”),未经许可,不得转载。