互联网资讯 / 人工智能 · 2023年12月1日

PULSE:让渣画质马赛克瞬间变高清

马赛克是什么意思?传统的马赛克在影视媒体中多用于遮挡重要的部位,进行模糊化处理。例如视频中,如果不方便将某人的脸或者其他部位露出,便使用马赛克这一艺术处理手法将其遮掩起来。

20世纪50年代后,随着全球电影行业的发展,经常能在电影中出现血腥和色情画面,人们就开始要求将18岁以下不宜观看的画面进行处理,也就是在图像上覆盖马赛克。从此,马赛克有了新功能,在那些原本高清图像的某些区域被盖上厚厚的小方格,形成无法打破的禁区,这也让无数热血少年抓耳挠腮,疯狂的寻找破解之法,只为能看到马赛克掩盖下的奇迹。

不管怎么努力,人们怎么样也找不到破解马赛克的方法,然而随着技术的发展,破解马赛克已经变成了现实。美国杜克大学的几位研究人员,利用一种PULSE的AI算法,就能够完全去除马赛克,并且可以达到打马赛克前的像素效果。

那么将渣到马赛克级别的画面秒变高清是如何做到的呢?PULSE算法可以在几秒钟内,就可以把 16×16 像素的低分辨率(Low Resolution)小图,放大 64 倍,变成 1024 x 1024 像素的高分辨率(High Resolution)图像,并且会“想象&Rdquo;出一些原本不存在的特征,即使是原本 LR 照片中无法看到的细节,比如毛孔、细纹、睫毛和胡茬等,经过其算法处理后,都能看得一清二楚。但是在拿到一张低分辨率的图像后,PULSE系统不会慢慢的添加新的细节,而是遍历AI生成的高分辨率图像,将这些高分辨率图像对应的低分辨率图像与原图进行对比,找到最接近的那张。例如,将一张打有马赛克的面部图片,使用PULSE算法,该算法首先补充面部细节,比如鼻子、嘴巴、眼睛的样子,然后再打上马赛克,打过马赛克的这张图片与原始图片进行对比调整,就这样不断的迭代,直到与原马赛克图一致就算解码了这张“神秘&Rdquo;的图片。

原始 LR 图片和 PULSE 修复后再 donwscale 的 LR 图片对,使两者最接近的 HR 图片,就是修复得到的 HR 图片。

但是这个技术还有一个缺点,那就是我们得到的图片去码部位是由软件想象出来的,并不一定是原来真正的模样,有可能存在差异。因此从这张图被打马赛克开始,它就变成了另一张图,再也无法回到最初的美好了。

其实,这项技术的出现有利也有弊,比如说,在图像清晰化上,让考古资料变得更有据可依,或像侦探片里那样,刑警在马赛克录像中看不清嫌疑人时,可以生成最接近嫌疑人的样貌,为茫茫人海抓捕嫌犯提供了强有力的支持;比如在法制节目中遮盖犯罪嫌疑人的脸,或在影视作品中看到品牌 Logo 被涂抹上模糊的雾面,识别度日益精细的 Google 地图上,也有许多地方都进行了模糊化和特殊化的马赛克处理,隐藏了一些军事秘密。总之如果我们拥有了“去码&Rdquo;的技术和能力,也要珍惜“有码&Rdquo;的安稳和权利。

毋庸置疑,现在或未来,我们都需要马赛克。它会以各种形式出现,但必然不会消失。而 AI 等技术的进步,或许能让打码内容越来越逼近真实,但我们可以决定,它是否有必要达到真实。或者,看看它是否能在真正有利的地方进行爱与奉献。

OpenMagic API

Need more than content? Move into the product flow.

If you are here for model access, pricing, developer docs, or the future API console, the dedicated product path now lives on api.openmagic.ai.

登录免费注册