晓查 发自 凹非寺 量子位 报告 | 公众号 QbitAI
输入一张女性的照片,就能得到果体照,一件脱衣的DeepNude火了。但亦由于面临巨大的道德争议,这款软件的研发者选取了将它下架。
况且DeepNude本身亦不开源,咱们只能从研发者零星的介绍中晓得,它用到了pix2pix。
在巨大的求知欲驱动下,来自四川大学计算机学院在读硕士袁宵在自己的GitHub探究了DeepNude暗地里原理,科研图像生成和图像修复关联的技术和论文。
据他的分析,其实DeepNude只是“站在巨人的肩上”,里面用到的技术都是近两年CV行业的重大科研成果,况且都已然开源。
当然,作者本身对这项技术是持批判态度的。
原理
DeepNude重点运用了2018年发布的文案《Image Inpainting for Irregular Holes Using Partial Convolutions》中提出的图像到图像技术。
它能够把简笔画变成色彩丰富的图像,感兴趣的朋友能够去Demo网站在浏览器中试玩。
详细来讲,DeepNude重点使用了计算机视觉行业的3项技术。
1、图像修复
即上面说到的文案,这是来自英伟达Guilin Liu等人的团队在2018年发布的科研。
当画面被严重涂抹后,模型仍然能够恢复出“原来”的图像,能够说是“毫没PS痕迹”。
Image Inpainting除了能修复受损的图像,还能去掉图像中的某些物品,例如把草地中的石头涂抹一下,恢复的后照片中再也不有石头。
|