随着 HTML5 标准在主流浏览器内核的实现,Web 平台拥有了空前强大的多媒体处理能力。以 WebRTC 为代表的音视频实时通讯技术获得广泛应用,随着各种新的应用场景的出现,Web 平台实时视频处理的需求也越来越迫切。
本次分享将基于 W3C 和 Khronos 的现有 Web 标准,介绍 Web 平台实时视频美颜的实现方法,以及基于深度学习的视频超分实现方法。介绍通过对 Tensorflow.js 输入输出接口的定制实现超分处理流程的 GPU 加速,将基于 Tensorflow.js 的视频超分性能提升 3 倍左右。最后对 Web 平台深度学习的发展进行探索和展望。
高纯,声网 Agora 高级架构师。2010 年至 2018 年任职于英特尔亚太研发中心开源技术中心,曾参与 MeeGo Browser、Chromium/Blink 内核、Crosswalk Web Runtime、Chrome OS、Android N 等多个开源 Web Engine 以及 OS 项目的研发。2019 年加入声网,从事 Web Runtime 及 Web 平台音视频处理技术的研究工作。