当艺术遇上人工智能，理性的代码也变得浪漫『飞桨开发者图鉴』

在大多数人的固有印象中&＃xff0c;开发者和艺术家是截然相反的两类人&＃xff0c;一个极度理性&＃xff0c;一个极度感性。

而今天我们要介绍的两位飞桨开发者技术专家&＃xff08;PPDE&＃xff09;带着他们的作品告诉我们&＃xff0c;代码也能化身画笔和乐器&＃xff0c;创造出前所未有的浪漫视听体验。他们一位带我们回到过去&＃xff0c;另一位则带我们去往未来&＃xff0c;感受艺术与技术融合的浪漫&＃xff0c;一起听听他们的故事吧。

&＃xff08;大谷作品&＃xff1a;AI 修复老视频系列)

开发者or艺术家&＃xff1f;

斜杠青年欢乐多 

AI修复老北京视频的作者、百度飞桨高级技术专家大谷Spitzer是一位典型的“斜杠青年”&＃xff0c;作为一名独立艺术家&＃xff0c;音乐家&＃xff0c;程序员和游戏设计师&＃xff0c;很难以一个身份去定义他。

大谷对技术的认知始于儿时&＃xff0c;喜爱玩游戏的他发现&＃xff0c;做游戏比玩游戏更有意思&＃xff0c;因为“过去玩的游戏当中&＃xff0c;你觉得他们可以做得更好玩的地方&＃xff0c;我都可以通过写代码来实现”。

这一爱好也延续下来&＃xff0c;成为他的职业选择。“我后来做的一些游戏&＃xff0c;其实都是从我初中开始做的这一系列游戏的脉络延伸过来的&＃xff0c;甚至里面一些世界观、游戏角色都是当时设定的。”

2019年开始&＃xff0c;大谷开始尝试学习人工智能技术&＃xff0c;想试试能不能提升游戏开发的效率。经过了解&＃xff0c;他发现人工智能不仅可以做游戏开发&＃xff0c;还可以做艺术创作&＃xff0c;甚至是做一些社会公益项目&＃xff0c;所以他就想在自己的微博、B站账号上做一些分享&＃xff0c;“人工智能修复系列”就这样诞生了。

大谷通过AI技术&＃xff0c;创作了一系列“人工智能修复”作品。其中“AI修复百年前老北京影像”“AI还原宋朝皇帝”等作品在网络上获得广泛关注&＃xff0c;还得到了央视等权威媒体的报道。

而作为大谷Spitzer的“粉丝”&＃xff0c;另一位PPDE起司&＃xff0c;某种程度上也是因为偶然看到大谷的作品&＃xff0c;从而受到启发&＃xff0c;将AI技术与艺术创作融合&＃xff0c;打造了科幻聊天机器人Wander [001]。

Wander的灵感来源可以追溯到起司的童年。她很喜欢养成类游戏&＃xff0c;游戏中可以跟其他角色选择不同的对话分支&＃xff0c;就会有不同的故事&＃xff0c;她觉得有趣极了。唯一遗憾的是&＃xff0c;这些都是设计好的。“要是可以让他们自由对话就好了。”她想。但那时她并未觉得这事会和自己有什么关系。

高考之后&＃xff0c;起司考入了清华大学美术学院信息艺术设计系&＃xff0c;并选了一个辅修专业——智能硬件。准备做智能硬件专业毕业设计的时候&＃xff0c;她想&＃xff1a;“这几年在学校接触了各种科技相关的知识&＃xff0c;AI好像可以跟我有点关系了。”正好当时一个同学也有相似的想法&＃xff0c;两人一拍即合&＃xff0c;就商量着做了个聊天机器人。

今年&＃xff0c;借着“百度AI创造营 · 第一期”的机会&＃xff0c;起司组建起“速冻草莓乱码搅拌机”团队&＃xff0c;开发了Wander[001]。这是一个以AI为主体的跨媒体互联网艺术项目&＃xff0c;融合了彩云小梦api&＃xff0c;Wechaty api&＃xff0c;百度地图api和基于百度飞桨的开源项目。参与者可以通过微信向Wander发送现实中的地点&＃xff0c;Wander会从随机的“未来时间点”返回科幻游记与街景图。后续还可以根据指令&＃xff0c;在当地自由探索。

虽然已经无数次收到Wander[001]发来的游记和照片&＃xff0c;但起司依然喜欢与Wander互动。“它每一次写的东西都不一样&＃xff0c;每次都是我完全不能预料的样子&＃xff0c;我到现在也很享受&＃xff0c;时不时地去跟它说两句玩一下&＃xff0c;看看又有什么惊喜。

技术会成为画笔般的存在

对于传统的开发者来说&＃xff0c;“硬实力”非常重要&＃xff0c;他们致力于不断提升技术实力&＃xff0c;再将其运用于合适的领域。艺术家则不太一样&＃xff0c;他们往往是先有了创作灵感&＃xff0c;再去思考怎样实现它。对于他们来说&＃xff0c;技术是不是够炫酷并不重要&＃xff0c;能不能实现自己想要的效果才是第一位的。

对于早期的游戏开发者来说&＃xff0c;游戏引擎即最核心的代码都需要自己一行一行地写&＃xff0c;非常费时间&＃xff0c;而且需要复杂的数学知识。尤其是想做一个3D游戏&＃xff0c;如果要从头写引擎&＃xff0c;需要用到各种高数知识&＃xff0c;把3D画面构建起来。但是现在有了比较方便的工具&＃xff0c;甚至可以让没有编程基础的开发者&＃xff0c;在短时间内做出一些比较常见的游戏类型。

大谷认为&＃xff0c;人机合作会是未来一个比较主要的方向。人工智能不会完全替代人类&＃xff0c;但是会给人类省去很多比较枯燥的重复性强的工作。“像我们做游戏原画的时候会画那种人物草图&＃xff0c;很费时间。现在人工智能可以根据需求直接调数值&＃xff0c;生成人物的图像。这样你就可以在初期找一找感觉&＃xff0c;之后再找真正的艺术家去细化完成这些角色。

做“AI还原宋朝皇帝”等项目时&＃xff0c;大谷还用到了基于飞桨的开源项目。比如皇帝的脸部可以左右晃动&＃xff0c;就是通过PaddleGAN实现的。大谷觉得&＃xff0c;开源社区“蛮有意思&＃xff0c;也蛮有意义的&＃xff0c;未来会继续去用飞桨做一些作品。”

对于技术门槛的降低&＃xff0c;起司也有相似的感受。刚接触AI时&＃xff0c;起司觉得门槛还是比较高的&＃xff0c;她只能在网上找教程&＃xff0c;零零散散地学&＃xff0c;需要什么学什么。但近几年技术普及很快&＃xff0c;她告诉我们“现在基本上去任意一个艺术院校的毕业设计展&＃xff0c;都一定会看到若干个用到机器学习的项目。”

起司是通过“百度AI创意赛”接触到飞桨平台&＃xff0c;飞桨的案例库给她带来很大的帮助&＃xff0c;“因为都讲得很清楚&＃xff0c;一步一步非常傻瓜式的&＃xff0c;照着跑一遍就能用&＃xff0c;对于我这种初级开发者来说的非常友好。”

起司觉得&＃xff0c;开源社区的存在&＃xff0c;让她做到了自己以为做不到的事情。一旦有一个人做了一个创造性的事情&＃xff0c;然后他把这个成果开源了&＃xff0c;那么后面的人就会更快地解决遇到的困难&＃xff0c;所有的开发和创造都能够不断的往前发展。

说到技术和艺术的融合&＃xff0c;起司表示&＃xff1a;“曾经技术这个词一般指的是一般艺术家或者艺术创作里不一定要用到的东西&＃xff0c;但是随着工具的迭代和发展&＃xff0c;技术这个词所包含的门槛或者说是困难程度会逐渐降低&＃xff0c;最终就会变成一个和画笔一样平常的工具。”

大谷则认为&＃xff0c;技术和艺术是相辅相成的&＃xff0c;技术可以让艺术家做出更多他们想表达的内容。“我有一个朋友叫曹雨西&＃xff0c;他做了一个作品叫人工智能山水图&＃xff0c;通过深度学习网络&＃xff08;SytleGAN&＃xff09;学习收集大量水墨图的像素数据后&＃xff0c;进行自动模仿山水图样的创作。然后就可以生成各种各样的山水画&＃xff0c;每一张都独一无二&＃xff0c;然后可以做成一个视频&＃xff0c;或者是在展览现场能看到国画风格的树和山冒出来又消失&＃xff0c;不断的在变化&＃xff0c;非常的梦幻。”

为艺术插上技术的翅膀

探索“无人之境”

艺术作为人类的精神产物&＃xff0c;关于其价值的探讨从古至今从未停止&＃xff0c;甚至成为一个哲学问题。随着艺术的媒介越来越丰富&＃xff0c;特别是技术与艺术的融合&＃xff0c;艺术的价值问题也有了新的外延。

从纽约视觉艺术学院毕业后&＃xff0c;大谷在纽约开设了自己的工作室&＃xff0c;主要做游戏开发。在他看来&＃xff0c;程序是游戏的骨架&＃xff0c;美术是游戏的皮肉&＃xff0c;音乐决定了游戏的氛围&＃xff0c;所以策划一款游戏就像做一件艺术品一样。之所以成为一个“斜杠青年”&＃xff0c;是因为“我想把游戏的各个环节有机地整合到一起&＃xff0c;创造出一个不同的艺术作品。”

通过“人工智能修复”系列创作&＃xff0c;大谷不断尝试着各种技术、功能&＃xff0c;及不同项目的组合&＃xff0c;看能不能实现一些自己想要的效果。比如创作“AI修复90年前梅兰芳”时&＃xff0c;影片本身的噪音比较严重。大谷用了一个去背景音乐的应用&＃xff0c;它原本的功能是把曲子的伴奏和主唱分开&＃xff0c;但是最后发现它把噪音的轨和演唱的轨分开了&＃xff0c;这样我们就可以听到一段清晰的梅兰芳唱段了。

最近&＃xff0c;大谷又在琢磨&＃xff0c;对于没有声音的老影像&＃xff0c;有没有可能通过一个人工智能项目&＃xff0c;根据画面把生成音效。“之前我看到类似的&＃xff0c;比如说发一段烟花的视频&＃xff0c;它能帮你生成烟花的声音。但是我了解之后发现&＃xff0c;那个项目是限定只能做几种声音。所以我的想法暂时技术上还实现不了&＃xff0c;但我很期待&＃xff0c;相信给默片带来新的活力。”

“我在不断尝试&＃xff0c;看能不能做出一些好玩的东西&＃xff0c;比如让修复完的皇帝画像动起来&＃xff0c;就是一个比较趣味的尝试&＃xff0c;是这个开源项目原本没有想到的功能。这样我们就可以创造出各种各样的东西。”

起司也认为有趣的尝试非常重要&＃xff0c;“速冻草莓乱码搅拌机”团队开发的两款聊天机器人并没有什么实用价值&＃xff0c;但如果从艺术的角度去思考&＃xff0c;它有很多拓展性。比如他们用到的续写 API彩云小梦&＃xff0c;可能从来没有人想过说这个东西接到微信里是什么效果。

“曾经我经常幻想&＃xff0c;我想要玩的游戏会是什么样。同时也在等&＃xff0c;等有一天有人做出来了我再玩。后来我发现&＃xff0c;我不一定能等到别人去做。比如说我现在做的聊天机器人&＃xff0c;我不去做它就不存在了&＃xff0c;只能我去实现自己的想法&＃xff0c;因此创作就变成了一个自然而然的事情。”

“艺术家的价值是什么&＃xff1f;就在于他能通过一些超乎常理的&＃xff0c;超乎实用价值的&＃xff0c;超乎现在的一些大众观念的形式&＃xff0c;让人意识到世界上还有这种可能性&＃xff0c;技术还有这样的存在方式。他可以提醒大家&＃xff0c;让大家看到之前看不到的东西&＃xff0c;可能也会进一步推动技术的发展。”

在Wander[001]项目中&＃xff0c;艺术家基于Wander传送的游记和影像进行进一步创作&＃xff0c;通过人机配合延展未来的构想。参与者的游记会被记录在地图网站上。在人类的参与下&＃xff0c;未来的地图会被不断完善&＃xff0c;形成一个公众与AI共同构建的科幻世界。起司觉得&＃xff0c;Wander[001]比她一开始想的更有潜力&＃xff0c;她打算把这个项目持续做下去。希望未来它能成为一个公共艺术项目&＃xff0c;需要大家协作&＃xff0c;每一个人的参与都能在其中有所体现。

写在最后

想象力或许是人类拥有的最重要的能力之一&＃xff0c;引领着人类文明不断前行。伴随技术与艺术的加速融合&＃xff0c;必然有越来越多的艺术家借助AI技术释放想象力。而飞桨作为一个功能完备的开源深度学习平台&＃xff0c;也将助力充满想象力的你&＃xff0c;一起探索更多可能性&＃xff01;

飞桨开发者技术专家PPDE

本文的两位项目作者大谷和起司都有一个共同的身份&＃xff1a;飞桨开发者技术专家&＃xff08;PPDE&＃xff09;&＃xff0c;PPDE是百度飞桨对开发者的荣誉认证体系&＃xff0c;加入以后&＃xff0c;除了有专属的 PPDE 系列活动外&＃xff0c;还将享有从技术专家认证、顶级峰会交流与演讲邀约&＃xff0c;到全球技术游学、PPDE 专项赞助等丰富权益。想了解如何成为 PPDE&＃xff1f;

点击“阅读原文”&＃xff0c;即可了解详情、进行申请&＃xff01;

长按下方二维码立即

Star

更多信息&＃xff1a;

1. 飞桨官方QQ群&＃xff1a;793866180

2. 飞桨官网网址&＃xff1a;

   www.paddlepaddle.org.cn/

3. 飞桨开源框架项目地址&＃xff1a;

   GitHub:

   github.com/PaddlePaddle/Paddle 
   Gitee:

   gitee.com/paddlepaddle/Paddle

4. 欢迎在飞桨论坛讨论交流~~

   http://discuss.paddlepaddle.org.cn