0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一种基于GAN的图到图转换方法,可以检测出图片中的敏感区域

zhKF_jqr_AI 来源:未知 作者:李倩 2018-07-25 09:20 次阅读

编者按:如今,社交网络将全球各地的人们紧密联系在了一起,虽然这确实带来了极大的便利,但它也成了不良信息的发育土壤,比如散布黄图。月前,Facebook曾向用户征集裸照,用于训练模型以屏蔽和用户相关的不雅照片,此举引发巨大社会反响。而近期,巴西名校里约热内卢天主教大学的几位研究人员开发了一个自动给裸露人体穿上比基尼的模型:把别人脱下的衣服,一件件穿了回去。

现在,借助互联网的可访问性和信息的广泛传播性,人们获取各种内容的简易程度堪称前所未有。虽然这带来了不少好处,但也暴露了一个事实——部分用户的隐私信息正在被大肆传播,比如个人不雅照。

当然,我们不排除社交网络上存在愿意暴露自己身体的网友,但在缺乏管制和约束的环境下,一些未经本人同意,甚至本人都不知道的图像也会出现在网络中,给当事人造成恶劣影响。虽然各国成人信息监管由来已久,但这些审查工作至今都还是简单的二元分类:“忽略”,还是“不忽略”?在这种情况下,受害者的权益没法得到保障。

更有甚者,据澳大利亚伯内特的一项统计显示,92.2%的受访男孩和62.1%的受访女孩在18岁以前就已经在网上接触过色情内容,首次接触的中位年龄只有14岁。这些流传于社交网络的不良信息正在荼毒我们的下一代,而审查机制不合理(全年龄环境下)是一个主因。

在这篇论文中,研究人员介绍了一种新的成人信息审查方法:用自动过滤敏感内容取代检测、排除已识别内容。他们开发了一种基于GAN的图到图转换方法,可以检测出图片中的敏感区域,在覆盖它们的同时保留其语义。

简单来讲,就是用穿衣服取代打马赛克,模型不用学会识别什么是胸部,什么是臀部,它只需要学会判断哪里是敏感部位,只要这些部位是裸的,它就可以生成符合形状的布料。

具体方法

因为目标是把裸女转成穿着比基尼女郎,首先,研究人员从网上抓取了两类图像:***女性(X)和穿着比基尼的女性(Y)。他们对图像进行了过滤,一张脸只保留一张图,这是训练模型所使用的数据集(数据集会公开,但由于双盲评审,链接被隐去)。

在摘要中,他们称即便数据集很小,模型的效果也很理想。所以把数据集进一步分为训练集(90%)和测试集(10%)后,对于图像X,他们有1044张训练图像和117张测试图像;对于图像Y,他们有921张训练图像和103张测试图像。

图像到图像转换是一类经典计算机视觉问题,按照一般方法,研究人员需要对齐训练集图像,让模型学习输入图像和输出图像之间的映射。但在这个问题下找到成对图像基本是不可能的,他们没有那个条件去找一千多个模特专门拍摄。如上图所示,最终他们受Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks这篇论文启发,用对抗训练学习域之间的真实映射。

具体而言,这个框架由两个映射生成器(G:X→Y、F:Y→X)和两个判别器(DX、DY)组成:

生成器G:把真实裸女图像{x}转成比基尼女郎伪图{yˆ};

生成器F:把真实比基尼女郎图像{y}转成裸女伪图{xˆ};

判别器DX:区分裸女真图{x}和裸女伪图{F (y)} = {xˆ};

判别器DY:区分比基尼女郎真图{y}和比基尼女郎伪图{yˆ}。

训练完成后,生成器就能生成能骗过判别器的图像,也就是为裸女“穿”上衣服。模型使用的是LSGANs的损失函数,因为它比原始GAN的函数更稳健,具体细节论文中有明确写明,此处不再介绍。

实验结果

研究人员在实验中测试了不同架构生成器的效果,用的模型分别是ResNet和U-Net,他们也测试了不同深度对判别器的影响。下图是模型在原数据集上的效果:第一行是裸女原图,第二行是ResNet生成器的结果,第三行是U-Net生成器结果。

可以发现,虽然使用U-Net生成器的模型(第三行)为敏感部位打上了“马赛克”,但它们整体上失真严重,不能被视为“比基尼”。而使用ResNet生成器的模型效果更好,比基尼更美观,覆盖范围也更准确,图像质量更高。

在训练过程中,研究人员发现模型有时会试图在图像主体(人)和图像背景间建立联系,这显然是误入歧途。因此他们用Mask R-CNN截取任务轮廓,制作了一个空白背景数据集重新训练模型。从理论上来讲,通过使用“无背景”图像,神经网络可以更专注于当前任务,而不受嘈杂的背景影响。

如上图所示,无背景下,两个模型的结果比之前好了一点,但相比U-Net生成器,ResNet生成器还是显示出了明显的优势。此外,他们还对模型的稳健性进行了测试:输入一张比基尼女郎图后,生成器F输出了和原图非常相近的图像,并没有做太多更改——这意味着模型在没有胸部、臀部语义认知的情况下,真正学会了识别敏感区域。

小结

看罢全文,相信有读者会提出质疑:近几年学界发表了不少去马赛克的成果,这种技术和打马赛克又有多大区别?

总的来说,区别还是很明显的,至少比基尼女郎比马赛克更美观,从某种程度上来说也更少儿皆宜。再者说,不用考虑超分辨率去马赛克,整个模型是一体的,既然生成器G可以生成逼真比基尼女郎图像,同理,生成器F也能把比基尼给“脱”了,这在论文中有图文介绍,所以想还原不是没有办法。

但需要注意的是,这种技术的本意是改进现有成人信息审查机制,让更多不该看到这类信息的人没有机会接触不良信息,尤其是青少年和儿童。这也保护了不雅照泄露者的权益,避免网络传播给他们造成二次伤害。从根本上说,它无法真正制止犯罪和侵权,但它能反映一种进步。

如果要说缺点,除了图像质量不高,论文作者给的图像测试也不具典型性,因为侵权图像涉及大量偷拍内容,而论文中的裸女照片都像模特摆拍,因此数据集还有待扩充。此外,数据集中也应该增加男性内容。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像
    +关注

    关注

    2

    文章

    1083

    浏览量

    40417
  • GaN
    GaN
    +关注

    关注

    19

    文章

    1918

    浏览量

    72986
  • 数据集
    +关注

    关注

    4

    文章

    1205

    浏览量

    24641

原文标题:用GAN过滤图像敏感区域:为裸女“穿”上比基尼

文章出处:【微信号:jqr_AI,微信公众号:论智】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    GaN可靠性的测试

    客户将把GaN用于电源转换,因此,硬开关转换个与应用相关的基本事件。较之预烧板合格标准,这产生了迥然不同的应力,如白皮书中3、
    发表于 09-10 14:48

    基于Qualcomm FastCv的边缘检测算法详解

    目标、背景和区域之间,所以,它是图像分割所依赖的最重要的依据。由于边缘是位置的标志,对灰度的变化不敏感,,因此,边缘也是图像匹配的重要的特征。边缘检测区域划分是图像分割的两
    发表于 09-21 11:45

    请问LABVIEW是否可以绘制如附件图片中所示的矢量强度

    请问LABVIEW是否可以绘制如附件图片中所示的矢量强度,用颜色代表不同像素点矢量的大小,图上的箭头显示像素点上矢量的方向?
    发表于 12-16 00:19

    一种先分割后分类的两阶段同步端端缺陷检测方法

    作者:SFXiang首发:AI算法修炼营本文是一种端的先分割后分类的表面缺陷检测方法。主要的创新点在于如何将两类任务更好地进行同步学习,本文首先平衡分割损失和分类损失,然后对负样本
    发表于 07-24 11:01

    GaN HEMT可靠性测试:为什么业界无法就一种测试标准达成共识

    GaN功率转换器件的文件,但它仅建立了测试这些器件的开关可靠性的方法。 硅MOSFET与氮化镓HEMT的开关特性。图片由富士通提供克莱斯勒,福特和通用汽车在1990年代成立了汽车电子协
    发表于 09-23 10:46

    一种基于Haar小波变换的彩色图像人脸检测方法

    本文提出了一种基于 Haar 小波变换的彩色图像人脸检测方法。首先进行彩色空间的变换,检测出图像中的肤色区域;利用Adaboost 算法训练
    发表于 08-29 09:37 16次下载

    bmp图片转换为PCB的软件

    bmp图片转换为PCB的软件 BMP是一种与硬件设备无关的图像文件格式,使用非常广。它采用位映射存储格式,除了图像深度可选以外,不采用其他任何压缩,因此
    发表于 03-29 13:51 146次下载

    敏感检测电路

    敏感检测电路
    发表于 07-09 11:54 690次阅读
    <b class='flag-5'>敏感</b>头<b class='flag-5'>检测</b>电路<b class='flag-5'>图</b>

    一种基于图像处理的双目视觉校准方法

    双目视觉是利用机器视觉进行障碍物检测的研究热点。针对双目视频不同步,导致立体匹配不精准的问题,提出了一种基于图像处理的双目校准算法。算法首先根据道路的先验特征模型,建立视觉校准的敏感区域,以减小
    发表于 12-18 16:26 34次下载

    一种改进的线段分割检测算法

    针对监控视频中的电线杆遮挡问题,提出一种改进的线段分割检测(LSD)算法。将RGB图像进行双边滤波,并将滤波后的图像转换到HSV空间,在HSV彩色空间内利用矢量求导方法计算彩色图像的梯
    发表于 01-25 15:11 1次下载
    <b class='flag-5'>一种</b>改进的线段分割<b class='flag-5'>检测</b>算法

    一种新的图像局部模糊区域检测方法

    针对当前相关图像模糊测量方法不能有效检测纹理平坦清晰区域的问题,提出一种新的图像局部模糊区域检测
    发表于 02-05 14:00 2次下载

    未来苹果AirPods或实现检测手势

    苹果正在研究如何让AirPods对手势做出反应,拥有更多的触摸敏感区域,甚至配备物理按键或滚轮。
    发表于 11-03 10:12 421次阅读

    基于特征融合的小尺寸人脸检测方法

    人脸检测是指从输入图片或视频中找到人脸的精确位置并确定其大小。为了应对尺度多样性特别是小尺寸人脸给人脸检测任务带来的困难,文中提岀一种新的基于特征
    发表于 05-29 14:17 10次下载

    航空电子设计之“单粒子翻转”问题

    单粒子效应是一种瞬态效应,指某个特定的高能粒子穿过电路敏感区域所引起的电路故障,这个故障可能是可恢复的或是永久性的。
    发表于 07-13 11:23 4428次阅读

    视觉检测可以食品中检测出毛发吗

    。那么,视觉检测可以在食品中检测出毛发吗? 先说结论,视觉检测可以在食品中检测出毛发的。 视觉
    的头像 发表于 09-02 13:54 167次阅读