飞桨创意赛火热进行中，总有一款AI时代Chatbot适合你

点击左上方蓝字关注我们

PaddlePaddle × Wechaty × Mixlab 创意赛再升级&＃xff01;人工智能时代的ChatBot需要具备哪些能力&＃xff1f;由你来定义&＃xff01;参赛的小伙伴们果然各显神通&＃xff0c;快来pick你心中最中意的聊天机器人吧&＃xff0c;并献上你珍贵的star&＃xff01;

对话故事生成&＃xff0c;创造个人无限世界

穿越了穿越了&＃xff0c;GPT 2 &＃43; wechaty让主神阿巴带你冒险&＃xff01;

实现过程&＃xff1a;

本项目借助百度基于知识增强的持续学习语义理解框架ERNIE&＃xff0c;使用PaddleNLP内置的GPT-2模型将用户输入和对话历史作为模型输入&＃xff0c;实现对话故事生成功能。为了保证剧情顺畅可延续&＃xff0c;需要预先定义部分关键剧情&＃xff0c;比如“一管病毒试剂摆在你面前你要怎么做”等等。

飞桨体验&＃xff1a;

总的来说飞桨使用体验很好&＃xff0c;各种源码实践很值得学习。对于版本更新导致API变化等问题&＃xff0c;建议新手完成入门课程后&＃xff0c;多fork简单有趣的项目熟悉飞桨&＃xff0c;遇到问题建议多查看源码学习。

https://github.com/Tju-LMc/Paddle_Story_Generation

一个能看懂表格图片的数据助手

一键上传星球数据表格图片&＃xff0c;即可获取你想要的SQL答案。

实现过程&＃xff1a;

用户上传一张表格数据图片(目前暂只支持单表),  通过PP-Structure解析表格模板并提取表格要素信息。然后基于Pandas数据分析工具以及Matplotlib可视化工具对数据进行深入解读&＃xff0c;同时支持送入Text2SQL进行训练&＃xff0c;最后就可以基于数据库用文本语言的方式查询到所需信息。

飞桨体验&＃xff1a;

飞桨的工具组件和开发套件丰富易用&＃xff0c;涉及到的业务领域广&＃xff0c;模型种类多&＃xff0c;可以像搭积木一样在很短时间内搭建一套应用。想快速上手的朋友可以先在GitHub上浏览飞桨的各种模型&＃xff0c;也可在AI Studio上搜索其他大佬的类似实现&＃xff0c;里面有大量保姆级教程可供学习。

https://github.com/thunder95/Paddle_Table_Image_Reader

移动小屋——智能车内互动玩伴

在智能车内实现城市间&＃xff0c;长途上和黑夜里多场景的有趣互动。

实现过程&＃xff1a;

移动小屋为年轻父母设计智能出行时的新育儿体验&＃xff0c;在陌生与新奇的移动空间内&＃xff0c;通过车窗交互连结前后排的隔绝空间&＃xff0c;实现城市间&＃xff0c;长途上和黑夜里多场景下的有趣互动。模型方面&＃xff0c;目标检测模块主要使用yolov5模型&＃xff0c;利用flask框架搭建图片检测的API。bot通过http请求调用API接口&＃xff0c;并存储记录为后续的提问环节做数据支撑。

飞桨体验&＃xff1a;

飞桨的框架使用简便&＃xff0c;可以快速验证产品想法。从构思到产品上线&＃xff0c;只需两周时间就可以把想法快速落地。

https://github.com/livingbody/joy_rides

星星的孩子

机器人多人互动游戏&＃xff0c;提高孤独症儿童认知。

实现过程&＃xff1a;

通过图像识别提高儿童认知&＃xff0c;游戏方法如下&＃xff1a;

• 添加机器人&＃xff0c;老师引导儿童进行互动游戏&＃xff1b;

• 开始游戏&＃xff0c;机器人随机抽取基础图形&＃xff0c;提示孩子们寻找匹配的物品&＃xff1b;

• 发送图片&＃xff0c;机器人进行识别&＃xff0c;满足匹配度时回复“恭喜x同学&＃xff01;”&＃xff0c;不满足则鼓励说“x同学还差一点点&＃xff0c;继续加油呀&＃xff01;”&＃xff1b;

• 限制时长&＃xff0c;即将到时前机器人会进行提醒&＃xff0c;到时后游戏自动结束。

飞桨体验&＃xff1a;

感谢百度飞桨提供的Notebook环境和算力资源&＃xff0c;很好的实现了这个公益性项目。

https://github.com/tipani86/StarChild

宇宙分歧终端机

宇宙分歧终端机&＃xff0c;为宇宙和谐助力&＃xff01;

实现过程&＃xff1a;

第一步&＃xff1a;测试基本功能模块&＃xff0c;如EasyDL手势识别、lac词法分析、PaddleGAN唇型合成&＃xff1b;

第二步&＃xff1a;将三个基本功能进行组合&＃xff0c;通过脚本项目实现“宇宙分歧终端机”的效果。

飞桨体验&＃xff1a;

去年末借着参加培训班和直播课的机会&＃xff0c;深刻体会到了飞桨的魅力。作为中国首个自主研发、功能丰富、开源开放的产业级深度学习平台&＃xff0c;百度飞桨提供了丰富的在线课程、公开项目、AI竞赛、免费GPU算力等&＃xff0c;为对深度学习感兴趣的老师和同学给予了极大帮助。

https://github.com/yongxinliao-hqu/SpaceDisagreementResolver

礼仪机器人C-3PO

星际旅行&＃xff0c;你准备好了吗&＃xff1f;礼仪机器人C-3PO助力您的星际旅行&＃xff01;

实现过程&＃xff1a;

第一步&＃xff1a;测试基本功能模块&＃xff0c;如Aurebesh语言转换器、百度翻译API、微信对话机器人&＃xff1b;

第二步&＃xff1a;将三个基本功能进行组合&＃xff0c;通过脚本项目实现“礼仪机器人C-3PO”的效果。

飞桨体验&＃xff1a;

刚入门深度学习和飞桨的同学&＃xff0c;可以从AI Studio的课程开始&＃xff0c;按照AI学习地图里的预备知识、基础入门、实战进阶逐步深入&＃xff0c;还可以参加直播课程动手实践。有了一定的基础后可以参加比赛&＃xff0c;体验登榜的乐趣。最后&＃xff0c;希望大家积极开源有趣的项目&＃xff0c;我为人人&＃xff0c;人人为我。

https://github.com/yongxinliao-hqu/C-3PO_Wechaty_PaddleHub

星际终端— AR&＃43;LBS轻社交星际漂流瓶游戏

向外太空发信息&＃xff0c;查看AI预测的外星人&＃xff0c;寻找外星生物、外星建筑。

实现过程&＃xff1a;

利用LSGAN生成外星生物——使用seamlessClone&＃43;人脸特征点进行外星人换脸——使用cityscapes模型进行场景中物体的识别及定位——使用msgnet风格迁移转换成外星建筑——利用EXIF信息及地图api实现地址定位——利用Wechaty发送/接收漂流瓶&＃xff0c;发布任务。

飞桨体验&＃xff1a;

PaddleSeg的GitHub页面有很多的SOTA模型&＃xff0c;本项目的AR识别环境就直接调用了cityscapes模型。此外&＃xff0c;使用PaddleHub的模型进行迁移学习可快速定制模型&＃xff0c;本项目的流沙建筑就使用了其中的msgnet迁移。

https://github.com/kevinfu1717/SuperInterstellarTerminal

七夕孤寡小助手

钢铁直男看过来&＃xff0c;七夕小助手教你说情话、写藏头诗、认识口红&＃xff01;

实现过程&＃xff1a;

使用PaddleHub生成藏头诗和专属情话&＃xff0c;借用PaddlePaddle实现口红识别的图片处理和内容预测&＃xff0c;再基于wechaty实现微信自动对话。简单的代码即可实现强大的功能&＃xff01;

飞桨体验&＃xff1a;

使用飞桨1年多了&＃xff0c;PaddleHub体验非常舒适&＃xff0c;几行代码就可以完成非常强大的功能&＃xff0c;是小白前行路上的主推剂。飞桨yyds&＃xff01;

https://github.com/jhcgt4869/gugua_helps

铅笔画下的虚拟形象

通过调用人脸关键点检测模型&＃xff0c;实现虚拟形象的合成。

实现过程&＃xff1a;

本项目调用PaddleHub的人脸关键点检测模型&＃xff0c;获取脸部信息。在实现头部摆动的功能时&＃xff0c;采用求两向量顺时针夹角方式实现。进一步的&＃xff0c;还对夹角参数进行了防抖处理&＃xff0c;减少震频&＃xff0c;提高视频观感&＃xff0c;再通过纵横比公式实现嘴巴大小的改变。

飞桨体验&＃xff1a;

在实现项目功能的时候&＃xff0c;PaddleHub提供了很多预训练模型&＃xff0c;大大降低了AI学习的门槛&＃xff0c;为像我一样的小白降低了开发成本&＃xff0c;每个人都可以来感受AI的魅力。

https://github.com/zengzhuoqi/paddle-virtual-figures-in-penclings

Wander[001] - 未来流浪者 V2.1

以AI chatbot为主体的跨媒体互联网艺术项目&＃xff0c;已展出于2021亚洲数字艺术展。

https://github.com/sunyuqian1997/Wander001-V2.1

星际旅航机器人

利用PaddleGAN完成环境模拟&＃xff0c;生成平面护照&＃xff0c;代码简单&＃xff0c;结果有趣&＃xff01;

实现过程&＃xff1a;

项目实现流程简单易懂&＃xff0c;基于PaddleGAN提供的风格迁移&＃xff0c;场景动漫画以及人脸动漫化三个模型完成。然后在云服务器上搭建Wechaty即可连接到微信&＃xff0c;从而快速完成一个微信机器人项目。

飞桨体验&＃xff1a;

基于百度飞桨的开发套件&＃xff0c;开发者可以在短时间内快速完成一个项目&＃xff0c;许多模型仅需少量代码即可调用&＃xff0c;体验感极佳。对于想快速完成一个项目的朋友们来说&＃xff0c;使用PaddleHub套件是一个非常不错的选择。

https://github.com/Cursky/Cosmic-Wanderer-Guide-Robot

Look at the picture and change the color

结合Paddle和Wechaty控制能根据图片改变颜色的LED灯。

实现过程&＃xff1a;

完成这个项目需要解决以下关键技术&＃xff1a;1.用户与ChatBot沟通的接口&＃xff0c;发送图片&返回结果&＃xff1b;2.基于PaddleHub实现的图像分割模型部署及接口调用&＃xff1b;3.底层硬件Arduino的控制方式&＃xff0c;LED灯条的硬件连接。

飞桨体验&＃xff1a;

总的来说&＃xff0c;基于飞桨来实现这样一个简单的创意还是非常方便的&＃xff0c;特别是使用PaddleHub Serving可以部署一个在线服务&＃xff0c;下载完模型后&＃xff0c;只需一行代码即可完成模型部署。

https://github.com/zbp-xxxp/LPCC

跟异类生物聊个天儿

基于飞桨语音识别、闲聊对话、音色克隆、嘴型同步模型实现语音人机交互。

实现过程&＃xff1a;

用户选择一个虚拟角色作为聊天对象&＃xff0c;通过音色克隆&＃xff08;Parakeet模型&＃xff09;高度模仿虚拟对象的语音特征&＃xff0c;再基于Wechaty在微信端进行语音交互&＃xff0c;也可以通过视频&＃xff08;Wav2Lip模型&＃xff09;带来更逼真的体验。语音交互均采用飞桨的开源模型&＃xff0c;DeepSpeech用于语音识别&＃xff0c;Plato-mini辅助对话文本生成&＃xff0c;Parakeet可实现基于音色克隆的文本转语音功能。

飞桨体验&＃xff1a;

飞桨的工具组件和开发套件丰富易用&＃xff0c;涉及到的业务领域广&＃xff0c;模型种类多&＃xff0c;可以像搭积木一样在很短时间内搭建一套应用。想快速上手的朋友可以先在GitHub上浏览飞桨的各种模型&＃xff0c;也可在AI Studio上搜索其他大佬的类似实现&＃xff0c;里面有大量保姆级教程可供学习。

https://github.com/thunder95/Paddle_Voice_ChatBot

太空漫游指南

自动回复星球的介绍与图片&＃xff0c;自动合成宇宙漫游照&＃xff01;

实现过程&＃xff1a;

本项目基于msg.text()收到的星球名称信息&＃xff08;比如“水星”&＃xff09;&＃xff0c;通过await talker.say(dict1[&＃39;水星&＃39;]) 自动回复星球简介和图片&＃xff0c;实现自主太空漫游。旅游结束后&＃xff0c;还可以来一张合影留念照&＃xff0c;主要通过PaddleHub实现图像的自动抠图&＃xff0c;然后将抠出的人物图像合成到祝融号火星自拍中。

飞桨体验&＃xff1a;

本项目主要使用PaddleHub的deeplabv3p_xception65_humanseg模型实现自动抠图&＃xff0c;不得不说PaddleHub在图像分割技术上做的确实不错&＃xff0c;人像抠的非常干净&＃xff0c;然后可以直接与新图片合成&＃xff0c;关键是使用方便&＃xff0c;直接调用模型即可&＃xff0c;初学者也很容易上手。

https://github.com/diandian16/-wechaty-paddlehub-

宇宙知识问答

随机获取题目并进行作答&＃xff0c;可自动合成荣誉证书哦&＃xff01;

实现过程&＃xff1a;

本项目利用字典生成题库&＃xff0c;然后借用await talker.say(dict1[&＃39;随机题目&＃39;])随机发布题目。基于字典的题库&＃xff0c;机器人可以自动判断是否回答正确。最后&＃xff0c;用PaddleGAN生成图像的动漫简笔画&＃xff0c;再合并到预设的荣誉证书里。

飞桨体验&＃xff1a;

PaddleGAN的photo2cartoon模型可以实现头像的卡通简笔画效果&＃xff0c;不得不说这个简笔画效果还是很赞的&＃xff0c;与照片的还原度非常高&＃xff0c;完全看得出是谁&＃xff0c;然后直接与预设的荣誉证书合成&＃xff0c;犹如证件照一般贴到预设位置&＃xff0c;效果棒棒的。

https://github.com/diandian16/wenda/

更多有趣的、好玩的项目还在持续产出中。如果你有好的创意&＃xff0c;快加入技术交流群和大家一起分享吧&＃xff01;

如有飞桨相关技术问题&＃xff0c;欢迎在飞桨论坛中提问交流&＃xff1a;

http://discuss.paddlepaddle.org.cn/

欢迎加入官方QQ群获取最新活动资讯&＃xff1a;793866180。

如果您想详细了解更多飞桨的相关内容&＃xff0c;请参阅以下文档。

·飞桨官网地址·

https://www.paddlepaddle.org.cn/

·飞桨开源框架项目地址·

GitHub: https://github.com/PaddlePaddle/Paddle 

Gitee: https://gitee.com/paddlepaddle/Paddle

????长按上方二维码立即star&＃xff01;????

飞桨(PaddlePaddle)以百度多年的深度学习技术研究和业务应用为基础&＃xff0c;集深度学习核心训练和推理框架、基础模型库、端到端开发套件和丰富的工具组件于一体&＃xff0c;是中国首个自主研发、功能丰富、开源开放的产业级深度学习平台。飞桨企业版针对企业级需求增强了相应特性&＃xff0c;包含零门槛AI开发平台EasyDL和全功能AI开发平台BML。EasyDL主要面向中小企业&＃xff0c;提供零门槛、预置丰富网络和模型、便捷高效的开发平台&＃xff1b;BML是为大型企业提供的功能全面、可灵活定制和被深度集成的开发平台。

END