20189221 2018-2019-2 《密码与安全新技术专题》第三周作业

课程&＃xff1a;《密码与安全新技术专题》

班级&＃xff1a; 201892
姓名&＃xff1a; 郭开世
学号&＃xff1a;20189221
上课教师&＃xff1a;谢四江
上课日期&＃xff1a;2019年3月26日
必修/选修&＃xff1a; 选修

1.本次讲座的学习总结

讲座主题&＃xff1a;基于深度学习的密码分析与设计

人工智能分类&＃xff1a;

机器学习分类&＃xff1a;

机器学习和网络安全资源

密码分析与机器学习

深度学习简介与现状

深度学习“四大天王”

Geoffrey Hinton&＃xff1a;多伦多大学的特聘教授&＃xff0c;Google AI团队领军人

Hinton便是将BP算法应用到神经网络与深度学习中人员之一&＃xff0c;并且是主导者(co-inventor). Hinton 提出了“Dark Knowledge”黑暗知识概念&＃xff0c;该概念是受小概率比率事件中的“大部分知识”对于训练与测试中的代价函数是没有影响的。

Hinton在人工智能领域中无人不知无人不晓是因为其在人工神经网络(Artificial Neural Networks)中所作出的贡献。

但事实是&＃xff0c;直到2004年&＃xff0c;学术界对Hinton的研究仍然提不起兴趣。而这时距离他们首次提出“反向传播”算法已经过了20年&＃xff0c;学术界AI普遍的研究方向也与他们相反&＃xff0c;都在试图寻找捷径&＃xff0c;直接模拟出行为&＃xff0c;而不是试图通过模仿大脑的运作来实现。Hinton牛逼的地方在于&＃xff0c;在那个充满怀疑的时期&＃xff0c;承受着世界的质疑和嘲讽&＃xff0c;他仍然潜心于他所相信的科学。

Hinton和他的团队强力将“神经网络”从垂死边缘一步步带入到当今的研究与应用的热潮&＃xff0c;变成了炙手可热的的学术界课题&＃xff0c;将“深度学习”从边缘课题变成了Google等互联网巨头仰赖的核心技术。目前神经网络与深度学习已在自然语言处理、语音处理以及计算机视觉等领域中得到了空前广泛与成功地应用。

Yann Lecun&＃xff1a;纽约大学终身教授&＃xff0c;Facebook AI实验室负责人

Lecun在多伦多大学随Hinton读博士后&＃xff0c;没错&＃xff0c;他是Hinton的学生&＃xff0c;另一个神经网络与深度学习大拿。他在皮埃尔玛丽居里大学攻读计算机科学博士学位期间提出后向传播算法。

他如今在Facebook带领团队进行人工智能工作&＃xff0c;即他是Facebook人工智能实验室的负责人。他在纽约大学任职了12年&＃xff0c;是纽约大学的终身教授&＃xff0c;是纽约大学数据科学中心的负责人。为了表彰他在深度学习领域里

Yoshua Bengio&＃xff1a;蒙特利尔大学终身教授&＃xff0c;CIFAR项目负责人

他是ApSTAT技术的发起人与研发大牛。他也是蒙特利尔大学(Université de Montréal)的终身教授&＃xff0c;任教超过22年&＃xff0c;是机器学习实验室(MILA)的负责人&＃xff0c;是CIFAR项目的负责人之一&＃xff0c;负责神经计算和自适应感知器等方面。又是加拿大统计学习算法学会的主席&＃xff0c;并且是NSERC-Ubisoft主席以及其它。在蒙特利尔大学任教之前&＃xff0c;他是ATT MIT的一名机器学习研究员。他的主要贡献在于深度学习与人工智能等领域。

他的研究工作主要聚焦在高级机器学习方面&＃xff0c;致力于用其解决人工智能问题&＃xff0c;他是仅存的几个仍然全身心投入在学术界的深度学习教授之一。

Andrew Ng&＃xff1a;斯坦福大学副教授&＃xff0c;曾就职于谷歌&＃xff0c;百度首席科学家

是否能跟前三位大牛并列似乎是一件富有争议的事情。的确&＃xff0c;在纯理论研究上面NG的光芒不如三大牛&＃xff0c;甚至可以说有不小的差距&＃xff0c;但是在工程方面的应用他仍然是人工智能领域的权威。NG让人熟知并不是学术上的研究&＃xff0c;而是他和Daphne
Koller共同创建Coursera&＃xff08;在线教育平台&＃xff09;这一流大学在线课程平台&＃xff0c;相信很多受益于Coursera的朋友要跪拜了。

最新消息&＃xff1a;Yann LeCun、Geoff Hinton 和 Yoshua Bengio三位教父获得“图灵奖

深度学习与密码分析

• 基于卷积神经网络的测信道攻击
• 基于循环神经网络的明文破译
• 基于生成对抗网络的口令破译
• 基于深度学习的密码基元识别

深度学习与密码设计

生成对抗网络设计密码

谷歌深度学习项目Google Brain的一个团队已经证明&＃xff0c;机器可以学习如何保护他们的信息免受窥探。

研究人员MartínAbadi和David Andersen证明神经网络或“神经网络” - 松散地基于人工神经元的计算系统 - 可以解决如何使用简单的加密技术。

在他们的实验中&＃xff0c;计算机能够使用机器学习进行自己的加密形式&＃xff0c;而不需要教授特定的加密算法。加密是非常基础的&＃xff0c;特别是与我们当前的人工设计系统相比。即便如此&＃xff0c;它仍然是神经网络的一个有趣的步骤&＃xff0c;作者声称“通常并不意味着在密码学方面很出色”。

最初&＃xff0c;神经网络在发送秘密消息方面相当差。但随着他们更多的练习&＃xff0c;爱丽丝慢慢开发了自己的加密策略&＃xff0c;鲍勃研究出如何解密它。

在场景播放15,000次之后&＃xff0c;Bob能够将Alice的密文短信转换回纯文本&＃xff0c;而Eve可以猜测形成该消息的16位中的8位。由于每个位只有1或0&＃xff0c;这与纯粹机会所期望的成功率相同。该研究发表在arXiv上。

我们并不确切知道加密方法是如何工作的&＃xff0c;因为机器学习提供了一种解决方案&＃xff0c;但并不是一种简单的方法来理解它是如何实现的。在实践中&＃xff0c;这也意味着很难为以这种方式创建的加密方法提供任何安全保证&＃xff0c;因此对该技术的实际影响可能是有限的。

2.学习中遇到的问题及解决

问题1&＃xff1a;最近热度很高的AI发展到底怎么样&＃xff1f;

问题1解决&＃xff1a;

人工智能&＃xff08;英语&＃xff1a;Artificial Intelligence&＃xff0c;缩写为 AI&＃xff09;亦称机器智能&＃xff0c;指由人制造出来的机器所表现出来的智能。通常人工智能是指通过普通计算机程序来呈现人类智能的技术。该词也指出研究这样的智能系统是否能够实现&＃xff0c;以及如何实现。同时&＃xff0c;有些预测则认为人类的无数职业也逐渐被其取代。

人工智能在一般教材中的定义领域是“智能主体&＃xff08;intelligent agent&＃xff09;的研究与设计”&＃xff0c;智能主体指一个可以观察周遭环境并作出行动以达致目标的系统。约翰·麦卡锡于1955年的定义是“制造智能机器的科学与工程”。安德里亚斯•卡普兰&＃xff08;Andreas Kaplan&＃xff09;和迈克尔•海恩莱因&＃xff08;Michael Haenlein&＃xff09;将人工智能定义为“系统正确解释外部数据&＃xff0c;从这些数据中学习&＃xff0c;并利用这些知识通过灵活适应实现特定目标和任务的能力”。

人工智能的研究是高度技术性和专业的&＃xff0c;各分支领域都是深入且各不相通的&＃xff0c;因而涉及范围极广。人工智能的研究可以分为几个技术问题。其分支领域主要集中在解决具体问题&＃xff0c;其中之一是&＃xff0c;如何使用各种不同的工具完成特定的应用程序。

AI的核心问题包括建构能够跟人类似甚至超越的推理、知识、规划、学习、交流、感知、移动和操作物体的能力等。人工智能当前仍然是该领域的长远目标。当前强人工智能已经有初步成果&＃xff0c;甚至在一些影像识别、语言分析、棋类游戏等等单方面的能力达到了超越人类的水平&＃xff0c;而且人工智能的通用性代表着&＃xff0c;能解决上述的问题的是一样的AI程序&＃xff0c;无须重新开发算法就可以直接使用现有的AI完成任务&＃xff0c;与人类的处理能力相同&＃xff0c;但达到具备思考能力的统合强人工智能还需要时间研究&＃xff0c;比较流行的方法包括统计方法&＃xff0c;计算智能和传统意义的AI。当前有大量的工具应用了人工智能&＃xff0c;其中包括搜索和数学优化、逻辑推演。而基于仿生学、认知心理学&＃xff0c;以及基于概率论和经济学的算法等等也在逐步探索当中。 思维来源于大脑&＃xff0c;而思维控制行为&＃xff0c;行为需要意志去实现&＃xff0c;而思维又是对所有数据采集的整理&＃xff0c;相当于数据库&＃xff0c;所以人工智能最后会演变为机器替换人类。

AI四小龙

如果说过去五年是中国人工智能的上半场&＃xff0c;那么从2019年开始&＃xff0c;这个行业正式进入了下半场。

这一年&＃xff0c;以计算机视觉起家的AI四小龙&＃xff0c;差异化战略正在变得愈发清晰。

商汤向后&＃xff1a;全面聚焦云端的独角兽——聚焦云端&＃xff0c;做城市级视觉中枢平台。
旷视向前&＃xff1a;终端最“重”的独角兽——从后端到前端全面覆盖&＃xff0c;走软硬一体化之路。
依图向上&＃xff1a;首个跳出人脸识别的独角兽——跳出人脸识别&＃xff0c;把医学影像分析作为等同于人脸识别战略地位
云从向下&＃xff1a;唯一切入金融核心业务流程的CV公司——金融产品线增加了以风控系统为代表的金融决策方案

「2019 中国人工智能安防峰会」在杭州正式开幕&＃xff08;3.23&＃xff09;

主题一&＃xff1a;城市大脑与边缘计算
《城市视觉智能计算平台》&＃xff1a;阿里巴巴集团副总裁、达摩院AI中心负责人 华先胜
《AI赋能&＃xff0c;共筑未来》&＃xff1a;海康威视高级副总裁、研究院院长 浦世亮
《人工智能提升场景化应用体验》&＃xff1a;大华股份研发中心副总裁、先进技术研究院院长 殷俊
《地平线AIoT边缘计算芯片&＃xff0c;赋能万千行业》&＃xff1a;地平线芯片解决方案事业部总经理 张永谦
《安防行业的AI革命》&＃xff1a;深瞐科技董事长 陈瑞军
《智能城市的视觉中枢》&＃xff1a;商汤科技智慧城市综合业务事业群副总裁 张果琲
《AI安防&＃xff1a;浪潮商用机器为AI安防提供强大的计算引擎》&＃xff1a;浪潮商用机器有限公司产品部 张琪

主题二&＃xff1a;世界顶尖算法应用
《三维视觉重新定义人工智能安防》&＃xff1a;港科大教授&＃xff0c;CVPR、ICCV大会主席 权龙
《视频监控场景下无约束人脸识别与图像增强》&＃xff1a;松下&＃xff08;新加坡&＃xff09;研究院原副院长&＃xff0c;澎思科技首席科学家 申省梅

主题三&＃xff1a;前端动态识别与智能视频云
《智能进化&＃xff0c;安防进入新时代》&＃xff1a;华为智能安防产品线副总裁 余虎
《智能安防的精益之道》&＃xff1a;触景无限联合创始人 & CEO 肖洪波

主题四&＃xff1a;城市AIoT与边缘智能引擎
《人工智能擦亮“城市之眼”》&＃xff1a;旷视科技安防事业部总经理 安洋
《智慧园区&＃xff0c;无感通行》&＃xff1a;千视通CTO 胡大鹏
《助力产业升级&＃xff0c;打造方案定义式算法》&＃xff1a;腾讯优图首席方案架构师、安防业务线负责人 李牧青
《AI中台引擎&＃xff1a;连接、计算与赋能》&＃xff1a;中科院自动化所研究员&＃xff0c;中科视语创始人 王金桥

问题2&＃xff1a;生成对抗网络

问题2解决&＃xff1a;

生成对抗网络&＃xff08;Generative Adversarial Network&＃xff0c;简称GAN&＃xff09;是非监督式学习的一种方法&＃xff0c;通过让两个神经网络相互博弈的方式进行学习。该方法由伊恩·古德费洛等人于2014年提出。

生成对抗网络由一个生成网络与一个判别网络组成。生成网络从潜在空间&＃xff08;latent space&＃xff09;中随机采样作为输入&＃xff0c;其输出结果需要尽量模仿训练集中的真实样本。判别网络的输入则为真实样本或生成网络的输出&＃xff0c;其目的是将生成网络的输出从真实样本中尽可能分辨出来。而生成网络则要尽可能地欺骗判别网络。两个网络相互对抗、不断调整参数&＃xff0c;最终目的是使判别网络无法判断生成网络的输出结果是否真实。

生成对抗网络常用于生成以假乱真的图片。此外&＃xff0c;该方法还被用于生成视频、三维物体模型等。

GAN的原理&＃xff1a;

GAN的主要灵感来源于博弈论中零和博弈的思想&＃xff0c;应用到深度学习神经网络上来说&＃xff0c;就是通过生成网络G&＃xff08;Generator&＃xff09;和判别网络D&＃xff08;Discriminator&＃xff09;不断博弈&＃xff0c;进而使G学习到数据的分布&＃xff0c;如果用到图片生成上&＃xff0c;则训练完成后&＃xff0c;G可以从一段随机数中生成逼真的图像。G&＃xff0c; D的主要功能是&＃xff1a;

● G是一个生成式的网络&＃xff0c;它接收一个随机的噪声z&＃xff08;随机数&＃xff09;&＃xff0c;通过这个噪声生成图像

● D是一个判别网络&＃xff0c;判别一张图片是不是“真实的”。它的输入参数是x&＃xff0c;x代表一张图片&＃xff0c;输出D&＃xff08;x&＃xff09;代表x为真实图片的概率&＃xff0c;如果为1&＃xff0c;就代表100%是真实的图片&＃xff0c;而输出为0&＃xff0c;就代表不可能是真实的图片

训练过程中&＃xff0c;生成网络G的目标就是尽量生成真实的图片去欺骗判别网络D。而D的目标就是尽量辨别出G生成的假图像和真实的图像。这样&＃xff0c;G和D构成了一个动态的“博弈过程”&＃xff0c;最终的平衡点即纳什均衡点.

GAN的特点&＃xff1a;

● 相比较传统的模型&＃xff0c;他存在两个不同的网络&＃xff0c;而不是单一的网络&＃xff0c;并且训练方式采用的是对抗训练方式

● GAN中G的梯度更新信息来自判别器D&＃xff0c;而不是来自数据样本

GAN 的优点&＃xff1a;

&＃xff08;以下部分摘自ian goodfellow 在Quora的问答&＃xff09;

● GAN是一种生成式模型&＃xff0c;相比较其他生成模型&＃xff08;玻尔兹曼机和GSNs&＃xff09;只用到了反向传播,而不需要复杂的马尔科夫链

● 相比其他所有模型, GAN可以产生更加清晰&＃xff0c;真实的样本

● GAN采用的是一种无监督的学习方式训练&＃xff0c;可以被广泛用在无监督学习和半监督学习领域

● 相比于变分自编码器, GANs没有引入任何决定性偏置( deterministic bias),变分方法引入决定性偏置,因为他们优化对数似然的下界,而不是似然度本身,这看起来导致了VAEs生成的实例比GANs更模糊

● 相比VAE, GANs没有变分下界,如果鉴别器训练良好,那么生成器可以完美的学习到训练样本的分布.换句话说,GANs是渐进一致的,但是VAE是有偏差的

● GAN应用到一些场景上&＃xff0c;比如图片风格迁移&＃xff0c;超分辨率&＃xff0c;图像补全&＃xff0c;去噪&＃xff0c;避免了损失函数设计的困难&＃xff0c;不管三七二十一&＃xff0c;只要有一个的基准&＃xff0c;直接上判别器&＃xff0c;剩下的就交给对抗训练了。

GAN的缺点&＃xff1a;

● 训练GAN需要达到纳什均衡,有时候可以用梯度下降法做到,有时候做不到.我们还没有找到很好的达到纳什均衡的方法,所以训练GAN相比VAE或者PixelRNN是不稳定的,但我认为在实践中它还是比训练玻尔兹曼机稳定的多

● GAN不适合处理离散形式的数据&＃xff0c;比如文本

● GAN存在训练不稳定、梯度消失、模式崩溃的问题&＃xff08;目前已解决&＃xff09;

最新消息——GAN之父lan Goodfellow离开谷歌加盟苹果

新浪科技讯 北京时间4月5日凌晨消息&＃xff0c;据美国媒体CNBC报道&＃xff0c;作为曾经谷歌人工智能领域的顶尖人物之一&＃xff0c;Ian Goodfellow已加入苹果公司担任总监级别职务。

这段雇佣关系得益于苹果公司越来越努力利用人工智能来推动其软件和硬件的发展。去年&＃xff0c;苹果公司聘请谷歌人工智能负责人John Giannandrea负责监督人工智能战略。

Goodfellow周四更新了他的LinkedIn个人资料&＃xff0c;确认他在3月份从谷歌跳槽到苹果公司。他说他是特殊项目团队的机器学习负责人。除了为FaceID和Siri等功能开发AI之外&＃xff0c;苹果公司还一直致力于自动驾驶技术。最近&＃xff0c;自动驾驶团队进行了一轮裁员。

一位谷歌发言人证实了他的离职。苹果拒绝发表评论。Goodfellow没有回复评论请求。

Goodfellow是人工智能方法之父&＃xff0c;其方法称为生成对抗网络&＃xff0c;或GAN。该方法利用两个网络&＃xff0c;一个称为生成网络&＃xff0c;另一个称为识别网络&＃xff0c;可用于以音频&＃xff0c;视频和文本的形式呈现出不寻常的创造性输出结果。

GAN系统已被用于生成“Deepfake”技术进而产生虚假的媒体内容。

Goodfellow于2014年在蒙特利尔大学获得博士学位。从那时起他先后就职于OpenAI和谷歌。根据税务申报资料显示&＃xff0c;在OpenAI工作期间&＃xff0c;他的工资超过80万美元。他的研究在学术文献中被广泛引用。

在谷歌工作期间&＃xff0c;Goodfellow围绕GAN和网络安全工作&＃xff0c;包括一个称为对抗性攻击的领域。之前在苹果公司从事人工智能AI的雇员做过的研究&＃xff0c;都是基于GAN技术。

3.本次讲座的学习感悟、思考等

金鑫老师讲课节奏很快。相应的&＃xff0c;此次新技术专题课也是我近期收获最大的一堂课。

金鑫老师不仅带我了解了很多深度学习、信息安全方面的东西&＃xff0c;而且主要带给我的启发是研究方法及研究模式。

在研究生阶段&＃xff0c;我还是想要做些事情的&＃xff0c;要抓紧了。

4.GAN研究现状

Unsupervised cipher cracking using discrete GANs

作者&＃xff1a;Aidan N. Gomez

投稿&＃xff1a;ICLR会议,目前已经作为POSTER接收

年份&＃xff1a;2018年

主题&＃xff1a;利用GAN破译移位密码和维吉尼亚密码&＃xff0c;将GAN应用于离散数据。

移位密码的数学定义&＃xff0c;其中p表示明文,c表示密文,k表示密钥&＃xff0c;也就是明文要移的位数&＃xff1a;

维吉尼亚密码的数学定义,P表示明文&＃xff0c;C表示密文&＃xff0c;&＃xff2b;为密钥&＃xff0c;运算在

GAN&＃xff1a;

2014年&＃xff0c;Goodfellow等人首次提出生成对抗网络GAN&＃xff0c;GAN是一种通过对抗过程估计生成模型的深度学习模型&＃xff0c;GAN框架中同时训练两个模型&＃xff0c;生成模型G和判别模型D&＃xff0c;生成模型G以噪声为输入生成数据&＃xff0c;判别器&＃xff24;判别生成模型生成的输出数据和真实数据&＃xff0c;生成模型想要生成能够与真实数据一样的数据来迷惑判别器&＃xff24;&＃xff0c;判别器想要最大概率地判断出伪造的数据和真实数据&＃xff0c;&＃xff27;和&＃xff24;构成了一个动态的‘博弈’&＃xff0c;通过两个模型互相对抗达到最好的生成效果。原始GAN的目标方程当判别器最优时&＃xff0c;最小化真实数据分布

结论&＃xff1a;
CipherGAN显示了生成对抗网络应用于离散数据解决一些对细微差别极其敏感的困难任务。我们的工作有助于促进CycleGAN架构对于多类数据的无监督对齐任务的承诺。CipherGAN提出了一种训练中较为稳定的算法&＃xff0c;改进了CycleGAN架构。实验证实&＃xff0c;使用离散变量的continuous relaxation&＃xff0c;不仅促进通过离散节点的梯度流动&＃xff0c;而且防止经常出现到的误判问题。CipherGAN在结构上是非常通用的&＃xff0c;可以直接应用于各种无监督的文本对齐。

Identity-preserving Conditional Generative Adversarial Network

作者&＃xff1a;Zhonghua Zhai; Jian Zhai

投稿&＃xff1a;2018 International Joint Conference on Neural Networks (IJCNN)

年份&＃xff1a;2018

主题&＃xff1a;提出了一种用于图像到图像转换的身份保持条件生成对抗网络&＃xff08;IPcGAN&＃xff09;

提出的框架可以在两个域中没有任何对应图像的情况下学习翻译功能&＃xff0c;并将真实图像映射到潜在空间和条件表示。与其他作品相反&＃xff0c;本论文引入了一个微调过程和一个新颖的联合损失&＃xff0c;以保持人的原始身份&＃xff0c;同时保持合成面孔的真实性。本论文使用特征错误评估新模型&＃xff0c;并证明它比现有模型产生更好的结果。

Modeling Urbanization Patterns with Generative Adversarial Networks

作者&＃xff1a;Adrian Albert; Emanuele Strano; Jasleen Kaur; Marta González

投稿&＃xff1a;IGARSS 2018 - 2018 IEEE International Geoscience and Remote Sensing Symposium

年份&＃xff1a;2018

主题&＃xff1a;提出了一种使用全球城市土地利用库存培训的生成对抗网络来模拟超现实城市模式的新方法

现代生成机器学习模型&＃xff08;如GAN&＃xff09;可以成功地用于模拟真实的城市模式。

比较真实的城市建成用地地图&＃xff08;左&＃xff09;和用生成对抗网络&＃xff08;gan&＃xff09;模拟的合成地图&＃xff08;右&＃xff09;。在每种情况下&＃xff0c;像素值在[0,1]中并且表示建筑物占据的土地的分数:

Automatic Generation of Facial Expression Using Generative Adversarial Nets

作者&＃xff1a;Yoshiharu Kawai; Masataka Seo; Yen-Wei Chen

投稿&＃xff1a;2018 IEEE 7th Global Conference on Consumer Electronics (GCCE)

年份&＃xff1a;2018

主题&＃xff1a;过使用生成对抗网络从自然&＃xff08;无表情&＃xff09;图像生成静态面部表情图像

本论文提出使用条件对抗网络&＃xff08;简称pix2pix&＃xff09;进行图像到图像的翻译。Pix2pix学习从输入图像到输出图像的映射&＃xff0c;以及用于训练该映射的损失函数。此方法对于从标签贴图合成照片&＃xff0c;从边缘贴图重建对象&＃xff0c;着色图像以及其他任务非常有效。作者们使用该网络通过使用图像转换任务生成面部表情变化的图像。

网络结构&＃xff1a;

实验结果&＃xff1a;

Generating Adversarial Examples With Conditional Generative Adversarial Net

作者&＃xff1a;Ping Yu; Kaitao Song; Jianfeng Lu

投稿&＃xff1a;2018 24th International Conference on Pattern Recognition (ICPR)

年份&＃xff1a;2018

主题&＃xff1a;提出了两种新的生成模型来直接生成自适应攻击实例&＃xff0c;其中采用条件生成对抗网络&＃xff0c;并为训练设计了独特的策略

论文贡献&＃xff1a;

• 与以前的工作不同&＃xff0c;我们的方法从噪声中生成攻击图像。这样&＃xff0c;可以在DNN攻击中节省大量存储成本。
• 大多数现有方法需要大量计算来产生攻击示例&＃xff0c;但我们的方法只需要一轮前向传播&＃xff0c;这非常有效。
• 我们在元素和之后应用归一化来解决像素值溢出的问题。

CGAN-F&＃xff1a;

CGAN通过注册额外信息来控制网络输出 ÿ在鉴别器和发电机的训练计划中。额外的信息ÿ 可以是任何类型的预期信息&＃xff0c;例如&＃xff0c;类标签或数据分布&＃xff0c;并且通常将其作为附加输入层提供给生成模型和判别模型。

假图像条件生成对抗网的整体架构图&＃xff1a;

训练算法&＃xff1a;

CGAN-Adv&＃xff1a;

目标分类器的体系结构在&＃xff08;a&＃xff09;中描述。CGAN-f的鉴别器和发生器分别如&＃xff08;b&＃xff09;和&＃xff08;c&＃xff09;所示。CGAN-adv的鉴别器和发生器分别显示在&＃xff08;b&＃xff09;和&＃xff08;c&＃xff09;中。

Avearge生成实例的时间对比&＃xff1a;

Cloud-Gan: Cloud Removal for Sentinel-2 Imagery Using a Cyclic Consistent Generative Adversarial Networks

作者&＃xff1a;Praveer Singh; Nikos Komodakis

投稿&＃xff1a; IGARSS 2018 - 2018 IEEE International Geoscience and Remote Sensing Symposium

年份&＃xff1a;2018

主题&＃xff1a;使用Cloud-GAN解决云覆盖遥感图像在地表分析中产生的问题

本论文解决了这个问题并提出了一个Cloud-GAN来学习阴天图像和无云图像之间的映射。所提出的方法中的adver-sarialloss将生成的图像的分布限制为足够接近非混浊图像的基础分布。使用额外的循环一致性损失来进一步抑制发生器以仅预测与阴天图像中反映的相同场景的无云图像。本论文的方法不仅拒绝任何配对&＃xff08;云/无云&＃xff09;训练数据集的必要性&＃xff0c;而且还避免需要任何额外的&＃xff08;昂贵的&＃xff09;光谱信息源&＃xff0c;例如云可穿透的合成孔径雷达图像。不仅拒绝任何配对&＃xff08;云/无云&＃xff09;训练数据集的必要性&＃xff0c;而且还避免需要任何额外的&＃xff08;昂贵的&＃xff09;光谱信息源

网络架构&＃xff1a;

结果&＃xff1a;

Building Footprint Generation Using Improved Generative Adversarial Networks

作者&＃xff1a;Yilei Shi ; Qingyu Li]() ; Xiao Xiang Zhu

投稿&＃xff1a;IEEE Geoscience and Remote Sensing Letters ( Volume: 16 , Issue: 4 , April 2019 )

年份&＃xff1a;2018

主题&＃xff1a;提出了改进的生成对抗网络&＃xff08;GAN&＃xff09;&＃xff0c;用于从卫星图像自动生成建筑物足迹。

本论文利用CGAN和WGAN的优势&＃xff0c;提出了条件性Wasserstein生成对抗网络&＃xff08;CWGAN&＃xff09;&＃xff0c;它可以对生成的数据模式进行控制&＃xff0c;也可以实现更稳定的训练。

网络架构&＃xff1a;

结果比较&＃xff1a;

最近提出的GAN提供了一种学习深度表示的方法&＃xff0c;而没有广泛注释的训练数据。该研究旨在探索GAN在建筑物足迹生成性能方面的潜力&＃xff0c;并通过修改目标函数来提高其准确性。本论文提出了两种集成了CGAN和WGAN的新型网络架构&＃xff08;CWGAN和CWGAN-GP&＃xff09;&＃xff0c;以及一个梯度惩罚项&＃xff0c;可以指导数据生成过程&＃xff0c;提高训练的稳定性。
本论文所提出的方法包括两个网络&＃xff1a;发生器中的U-Net架构和鉴别器中的PatchGAN。
作者调查了慕尼黑和柏林的PlanetScope卫星图像&＃xff0c;以评估拟议方法的能力。实验结果证实&＃xff0c;与现有网络&＃xff08;例如&＃xff0c;CGAN&＃xff0c;U-Net和ResNet-DUC&＃xff09;相比&＃xff0c;所提出的方法可以显着提高建筑物足迹生成的质量。
应该注意的是&＃xff0c;本论文提出的方法CWGAN-GP的稳定性几乎消除了所有超参数调整。

参考资料

• 「EEG-GAN」&＃xff1a;如何用生成式对抗网络生成「脑电图」脑信号
• Learning to Protect Communications with Adversarial Neural Cryptography
• Unsupervised cipher cracking using discrete GANs
• 利用无监督对抗生成网络&＃xff08;GANs&＃xff09;的破译密码算法(翻译版)
• Google GAN之父Ian Goodfellow ICCV2017演讲&＃xff1a;解读生成对抗网络的原理与应用
• 生成式对抗网络 GAN 的研究进展与展望
• Identity-preserving Conditional Generative Adversarial Network
• Modeling Urbanization Patterns with Generative Adversarial Networks
• Automatic Generation of Facial Expression Using Generative Adversarial Nets
• Generating Adversarial Examples With Conditional Generative Adversarial Net
• Cloud-Gan: Cloud Removal for Sentinel-2 Imagery Using a Cyclic Consistent Generative Adversarial Networks
• Building Footprint Generation Using Improved Generative Adversarial Networks
• Google&＃39;s neural networks invent their own encryption
• 重磅&＃xff01;AI 界的三位教父获得“图灵奖”&＃xff1a;Yann LeCun、Geoff Hinton 和 Yoshua Bengio