开发者社区> 玄学酱> 正文

深度神经网络可视化工具集锦

简介:
+关注继续查看

  TensorBoard:TensorFlow集成可视化工具

GitHub官方项目:https://github.com/tensorflow/tensorflow/tree/master/tensorflow/tensorboard

TensorBoard 涉及到的运算,通常是在训练庞大的深度神经网络中出现的复杂而又难以理解的运算。

为了更方便 TensorFlow 程序的理解、调试与优化,Google发布了一套叫做 TensorBoard 的可视化工具。你可以用 TensorBoard 来展现你的 TensorFlow 图像,绘制图像生成的定量指标图以及附加数据。

当 TensorBoard 设置完成后,它应该是这样子的:深度神经网络可视化工具集锦深度神经网络可视化工具集锦

输入下面的指令来启动tensorboard:


tensorboard --logdir=/path/to/log-directory

这里的参数 logdir 指向 SummaryWriter 序列化数据的存储路径。如果logdir目录的子目录中包含另一次运行时的数据,那么 TensorBoard 会展示所有运行的数据。一旦 TensorBoard 开始运行,你可以通过在浏览器中输入 localhost:6006 来查看 TensorBoard。进入 TensorBoard 的界面时,你会在右上角看到导航选项卡,每一个选项卡将展现一组可视化的序列化数据集 。对于你查看的每一个选项卡,如果 TensorBoard 中没有数据与这个选项卡相关的话,则会显示一条提示信息指示你如何序列化相关数据。

TensorFlow 图表计算强大而又复杂,图表可视化在理解和调试时显得非常有帮助。 下面是一个运作时的可式化例子:

深度神经网络可视化工具集锦深度神经网络可视化工具集锦

更多详细内容参考:


  Netscope:支持Caffe的神经网络结构在线可视化工具

官网:http://ethereon.github.io/netscope/quickstart.html
GitHub项目:https://github.com/ethereon/netscope

“A web-based tool for visualizing neural network architectures (or technically, any directed acyclic graph). It currently supports Caffe’s prototxt format.”

Netscope是一个支持prototxt格式描述的神经网络结构的在线可视工具。它可以用来可视化Caffe结构里prototxt格式的网络结构,使用起来也非常简单,打开这个地址http://ethereon.github.io/netscope/#/editor,把你的描述神经网络结构的prototxt文件复制到该编辑框里,按shift+enter,就可以直接以图形方式显示网络的结构了。

比如,以 mnist的Lenet 和 imagenet的AlexNet 网络结构为例,分别把Caffe中caffe/examples/mnist/lenet_train_test.prototxt 和 caffe/models/bvlc_alexnet/train_val.prototxt 文件的内容复制到左侧编译框,按shift+enter,立即就可以得到可视化的结构图,具体每层的参数等,如下:

深度神经网络可视化工具集锦

深度神经网络可视化工具集锦深度神经网络可视化工具集锦

Netscope给出的几个常见CNN网络结构示例:

以上网络的prototxt源文件见:https://github.com/ethereon/netscope/tree/gh-pages/presets 。


  使用 python/draw_net.py绘制网络模型

python/draw_net.py,这个文件,就是用来绘制网络模型的,也就是将网络模型由prototxt变成一张图片。

在绘制之前,需要先安装两个库

1.安装GraphViz


$ sudo apt-get install GraphViz

注意,这里用的是apt-get来安装,而不是pip。

2.安装pydot


$ sudo pip install pydot

用的是pip来安装,而不是apt-get。

安装好了,就可以调用脚本来绘制图片了。

draw_net.py执行的时候带三个参数

  • 第一个参数:网络模型的prototxt文件;

  • 第二个参数:保存的图片路径及名字;

  • 第二个参数:- - rankdir = x,x 有四种选项,分别是LR, RL, TB, BT 。用来表示网络的方向,分别是从左到右,从右到左,从上到小,从下到上。默认为LR。

例:绘制Lenet模型


$ sudo python python/draw_net.py examples/mnist/lenet_train_test.prototxt netImage/lenet.png --rankdir=BT


深度神经网络可视化工具集锦深度神经网络可视化工具集锦

参考阅读:


  Neural Network Playground

官网:http://playground.tensorflow.org
GitHub项目:https://github.com/tensorflow/playground

Deep playground is an interactive visualization of neural networks, written in typescript using d3.js.

PlayGround是一个图形化用于教学目的的简单神经网络在线演示、实验的平台,非常强大地可视化了神经网络的训练过程。深度神经网络可视化工具集锦深度神经网络可视化工具集锦

参考阅读:


  ConvnetJS

官网:http://cs.stanford.edu/people/karpathy/convnetjs/
GitHub项目:https://github.com/karpathy/convnetjs

ConvNetJS is a Javascript library for training Deep Learning models (Neural Networks) entirely in your browser. Open a tab and you’re training. No software requirements, no compilers, no installations, no GPUs, no sweat.

深度神经网络可视化工具集锦深度神经网络可视化工具集锦

Some Online Demos

更多内容请关注官网和GutHub项目README


  WEVI

官网:wevi: word embedding visual inspector
GitHub项目:https://github.com/ronxin/wevi

深度神经网络可视化工具集锦

具体参考:wevi: Word Embedding Visual Inspector


  CNNVis

文章来源:Towards Better Analysis of Deep Convolutional Neural Networks arxiv.org/abs/1604.07043

具体参见:能帮你更好理解分析深度卷积神经网络,今天要解读的是一款新型可视化工具——CNNVis,看完就能用!

摘要: 深度卷积神经网络(CNNs)在许多模式识别任务中取得了很大的性能突破, 然而高质量深度模型的发展依赖于大量的尝试,这是由于没有很好的理解深度模型是怎么工作的,在本文中,提出了一个可视化分析系统CNNVis,帮助机器学习专家更好的理解、分析、设计深度卷积神经网络。

深度神经网络可视化工具集锦


====================================分割线================================


本文作者:军君

本文转自雷锋网禁止二次转载,原文链接

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
【Pytorch神经网络基础理论篇】 03 数据操作 + 数据预处理
【Pytorch神经网络基础理论篇】 03 数据操作 + 数据预处理
18 0
构建基于深度学习神经网络协同过滤模型(NCF)的视频推荐系统(Python3.10/Tensorflow2.11)
毋庸讳言,和传统架构(BS开发/CS开发)相比,人工智能技术确实有一定的基础门槛,它注定不是大众化,普适化的东西。但也不能否认,人工智能技术也具备像传统架构一样“套路化”的流程,也就是说,我们大可不必自己手动构建基于神经网络的机器学习系统,直接使用深度学习框架反而更加简单,深度学习可以帮助我们自动地从原始数据中提取特征,不需要手动选择和提取特征。
63 0
【深度学习】pytorch使用tensorboard可视化实验数据
【深度学习】pytorch使用tensorboard可视化实验数据
61 0
【深度学习系列】CNN模型的可视化
【深度学习系列】CNN模型的可视化
70 0
OpenAI 开源新的深层神经网络神经元可视化库 Microscope和 Lucid
OpenAI 开源新的深层神经网络神经元可视化库 Microscope和 Lucid
469 0
100天搞定机器学习|Day61 手算+可视化,终于彻底理解了 XGBoost
100天搞定机器学习|Day61 手算+可视化,终于彻底理解了 XGBoost
127 0
深度学习分类数据集小工具
深度学习分类数据集小工具
34 0
机器学习模型可视化的最佳工具(Neptune)
“每个模型都是错误的,但有些模型是有用的”,这句话在机器学习中尤其适用。在开发机器学习模型时,您应该始终了解它在哪里按预期工作以及在哪里失败。 您可以使用许多方法来获得这种理解:
452 0
如何利用小数据集改进深度学习模型?
本文将讨论在不用更多数据的情况下改进深度学习模型的三种方法。
191 0
学习笔记 | 深度学习开发—TensorFlow实践(TensorBoard可视化工具)
学习笔记 | 深度学习开发—TensorFlow实践(TensorBoard可视化工具)
66 0
+关注
玄学酱
这个时候,玄酱是不是应该说点什么...
文章
问答
视频
来源圈子
更多
+ 订阅
文章排行榜
最热
最新
相关电子书
更多
纯干货 | 机器学习中梯度下降法的分类及对比分析
立即下载
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载