百度上线深度学习可视化工具VisualDL训练结果“所见即所得”

1月17日&＃xff0c;百度PaddlePaddle & ECharts团队宣布上线深度学习可视化工具Visual DL&＃xff0c;该工具可以使得深度学习任务变得生动形象&＃xff0c;实现可视分析。百度希望能够借此为全球更广泛的用户提供更便捷高效的深度学习工具。

目前&＃xff0c;大部分深度学习框架都提供了Python的用户界面&＃xff0c;其训练过程的状态通常以日记的形式被记录下来&＃xff0c;这种方式可以观察短期内的训练状态&＃xff0c;但是难以从全局把握训练过程中的变化趋势&＃xff0c;导致提取信息时受到较多限制。反观Visual DL&＃xff0c;它改变了传统的日记式记录形态&＃xff0c;便于用户将训练过程可视化&＃xff0c;帮助更好地把控全局。

在具体使用上&＃xff0c;Visual DL深度学习可视化工具功能全面。首先&＃xff0c;它的“Scalar”功能支持Scalar打点数据展示&＃xff0c;可将训练信息以折线图的形式展现出来&＃xff0c;方便观察整体趋势&＃xff0c;还能在同一个可视化视图中呈现多条折线&＃xff0c;方便用户对比分析。其次&＃xff0c;Visual DL的“Image”功能支持图片展示&＃xff0c;用户可轻松查看数据样本的质量&＃xff0c;也可以方便地查看训练的中间结果&＃xff0c;例如卷积层的输出或者GAN生成的图片。同时&＃xff0c;Visual DL还具有Histogram参数分布展示功能&＃xff0c;方便用户查看参数矩阵中数值的分布曲线&＃xff0c;并随时观察参数数值分布的变化趋势。最后&＃xff0c;Visual DL中的“Graph”还能帮助用户查看深度神经网络的模型结构。据悉&＃xff0c;Graph支持直接对ONNX的模型进行预览&＃xff0c;由于MXNet&＃xff0c;Caffe2&＃xff0c;Pytorch和CNTK都支持转成ONNX的模型&＃xff0c;这意味着Graph可间接支持不同框架的模型可视化功能&＃xff0c;让用户便于排查网络配置的错误&＃xff0c;帮助理解网络结构。详情可参照如下可视化案例&＃xff1a;

下图是对参数分布和张量进行可视化&＃xff1a;

下图是对张量和中间生成的图像进行可视化&＃xff1a;

下图是展示训练过程中错误的出现趋势&＃xff1a;

Visual DL除了功能全面以外&＃xff0c;还具有易集成、易使用等优势。它可提供独立的Python SDK&＃xff0c;若用户的训练任务基于Python&＃xff0c;可直接安装Visual DL的WHL软件包&＃xff0c;随后输入到项目中进行使用&＃xff0c;使用方式简单便捷。为了满足用户的不同操作需求&＃xff0c;用户在其Python代码中可加入Visual DL日志记录逻辑&＃xff0c;启动Visual DL后即可通过浏览器查看日志的可视化结果。此外&＃xff0c;Visual DL在底层使用C&＃43;&＃43;编写&＃xff0c;提供原生的C&＃43;&＃43; SDK&＃xff0c;用户可将其深入集成到自己C&＃43;&＃43;的项目&＃xff0c;以实现更高效的性能。

值得一提的是&＃xff0c;Visual DL现已完全开放&＃xff0c;同时支持大部分的深度学习框架。其SDK层面可轻松集成到Python或者C&＃43;&＃43;项目中&＃xff0c;此外&＃xff0c; Graph通过ONNX还可直接支持PaddlePaddle、TensorFlow、MxNet、PyTorch和Caffe2等流行的深度学习框架。对于开发者来说&＃xff0c;Visual DL可以将深度学习任务的训练过程可视化&＃xff0c;减少用户的观察比对时间&＃xff0c;让整个训练过程更高效。

近年来&＃xff0c;深度学习受到各领域的大力追捧&＃xff0c;在国家层面上&＃xff0c;深度学习框架成为了国家人工智能战略的重要组成部分。据悉&＃xff0c;百度也在深度学习领域深耕多年&＃xff0c;2016年&＃xff0c;百度开源PaddlePaddle分布式深度学习平台&＃xff0c;并在开源社区Github及百度大脑平台开放&＃xff0c;供广大开发者下载使用。百度PaddlePaddle具有易学易用、高效灵活等特征&＃xff0c;同时因更适应中国国情而深受中国开发者喜爱。目前&＃xff0c;百度PaddlePaddle已在社区活跃度、易学易用及工业应用三方面取得了突破性进展。

不仅如此&＃xff0c;百度为了培养更多深度学习人才&＃xff0c;不仅组建了PaddlePaddle训练营&＃xff0c;为开发者和初创企业提供大量资源&＃xff0c;帮助他们的产品行业内部快速落地&＃xff0c;同时&＃xff0c;还发起了国内首个深度学习教育联盟&＃xff0c;全方位支持深度学习人才培养。

百度相关负责人表示&＃xff0c;人工智能作为国家战略的一部分&＃xff0c;已成为各大行业巨头的必争之地。深度学习作为其中最热门的研究领域&＃xff0c;关系到中国人工智能行业整体的发展后劲。百度作为中国领先的人工智能公司&＃xff0c;将继续致力于为开发者提供最适合中国国情的开源深度学习平台&＃xff0c;及各种深度学习工具等&＃xff0c;最大程度地满足中国开发者的需要&＃xff0c;让深度学习为各行各业带来巨大变革。