用 AI 打破编解码器内卷，高通最新顶会论文脑洞大开

图片地址：https://img.ithome.com/newsuploadfiles/2021/10/d7a028ef-de86-4cad-a325-c8c2ed69cc3d.png

用 AI 搞视频编解码器，现在路子有点“野”。插帧、过拟合、语义感知、GAN…… 你想过这些“脑洞”或 AI 算法，也能被用到编解码器上面吗？例如，原本的算法每帧压缩到 16.4KB 后，树林开始变得无比模糊：但在用上 GAN 后，不仅画面更清晰，每帧图像还更小了，只需要 14.5KB 就能搞定！又例如，用插帧的思路结合神经编解码器，能让最新压缩算法效果更好……这一系列算法的思路，背后究竟是什么原理，用 AI 搞编解码器，潜力究竟有多大？我们采访了高通工程技术副总裁、高通 AI 研究方向负责人侯纪磊博士，了解了高通一些 AI 编解码器中的算法细节和原理。编解码器标准逐渐“内卷”当然，在了解 AI 算法的原理之前，需要先了解视频到底是怎么压缩的。如果不压缩，1 秒 30 帧、8bit 单通道色深的 480p 视频，每秒就要传输 80+Mbps 数据，想在网上实时看高清视频的话，几乎是不可能的事情。目前，主要有色度子采样、帧内预测（