中国指股网 > 利率 > 内容页

如何完美去除马赛克 终于能一键去除了

2023-09-09 08:35:56

hello大家好,我是城乡经济网小晟来为大家解答以上问题,如何完美去除马赛克,终于能一键去除了很多人还不知道,现在让我们一起来看看吧!


(资料图)

时至今日,机哥还经常听到这样的话:

“AI 就是个噱头,吹得多么多么牛逼,实际上只能拿来给拍照切换模式,或者下个围棋,并没有什么卵用。”

呃……能说出这话的人,一定是没有好好了解过 AI。

噱头很多是真的,但你要说没卵用就不对了。。

人工智能的能力远比你想象中强大。

机哥随便举几个例子。

AI 插帧

自摄像机被发明以来,人们对更高画质视频的追求就没有停止过。

分辨率不断提高,480p,720p,再到 1080p,现在有了 2K、4K。

而帧率也在逐年提升,从 25FPS 到 60FPS,再到 240FPS,甚至更高。

今年好几款手机不是宣传 960FPS 高速摄像嘛。

拍出来的东西一慢放,效果特别惊艳。

想拍这种视频,得要你的手机摄像头一秒钟能捕捉 960 帧画面才行。

不过有了 AI,也许就不需要了。

英伟达,就是卖显卡的那个核弹厂,最近展示了一个很神奇的 AI。

这个 AI 可以把低帧率的视频凭空变成高帧率的。

不废话,直接看疗效。

一段普通相机拍摄的 30FPS 开车视频,慢放八倍后,是这样的:

卡成幻灯片。。

这很正常,30FPS 慢放八倍,相当于每秒只有 3.75 帧了,自然像幻灯片。

可经过英伟达的 AI 一处理:

有点神奇啊!

再来一段 60FPS 的视频,慢放八倍。

稍微有点不流畅。

处理后:

注意 18 号球员的右脚,划出的弧线连贯很多。

第三个 Demo 是一位舞蹈演员在做复杂的旋转动作。

原片60FPS,八倍慢放:

头发和裙摆迟滞感很明显。

但只要一处理:

德芙,纵享丝滑。。

机哥跟你们分析一下它厉害在哪儿哈。

一段原本 30FPS 的视频,分解开来,相当于每秒只有 30 帧图像。

慢放八倍还想流畅的话,就得变成每秒 240 帧图像。

这相当于说,原视频每两帧之间要插入七帧本不存在的图像。

请问这七帧要怎么变出来?

如果放在以前,可以通过分析前后帧的像素位置变化,算出中间值来插帧。

但那样插的帧一定会很生硬,不自然。

肿么办?

AI 能解决。

英伟达的 AI 深度学习了超过 11000 个日常生活和体育活动的视频。

学成后,它便会根据“经验”插帧。

做个不恰当的比喻:AI 就相当于一个画师,学习过各种各样的作品后,就能“画”出两帧间缺少的帧。

而且,学得越多,画得越真实。

30FPS 变 240FPS 能做到,那 1080p 变 4K 能不能行呢?

当然 OK,现在有——

AI 超分辨率

超分辨率(Super-Resolution),意思是指把低分辨率的图像转成高分辨率的。

这个概念其实不稀奇。

比如我们用 PS 调大图片分辨率。

从参数上看分辨率数值的确提高了,但你应该也能发现,放大的图片非常模糊。

因为,PS 提升分辨率的原理是把像素拉开,然后填上空缺的像素。

而 PS 填充像素的算法很机械很原始,拉大后的图片当然不清晰。

想要更清晰,还得靠 AI。有很多团队都在用海量图片训练 AI,让它拥有更智能的插像素技能。

比如德国的 EnhanceNET-PAT。

看他们的 Demo:

效果还是挺明显的。

而 AI 界的大佬谷歌更可怕。

他们有一个算法叫“像素递归超分辨率”(Pixel Recursive Super Resolution)。

放大分辨率的能力只能用可怕来形容。

下面这张图片,你觉得有救吗?

救个毛啊!这不就是马赛克吗。。。

结果……

……

……

……

谷歌硬是把它恢复成了这个样子。

简直不敢相信自己的眼睛。

换一张马赛克试试。

依然不在话下:

服了……

所以说啊,别再以为 AI 全是噱头了,它们真的很有用。

等有一天,上面提到的插帧和超分辨率算法足够完善了,哪里还需要强大的相机?

AI 算法全都能搞定!

本文就为大家讲解到这里,希望对大家有所帮助。

关键词: