iis服务器助手广告广告
返回顶部
首页 > 资讯 > 后端开发 > Python >在Pytorch中简单使用tensorboard
  • 263
分享到

在Pytorch中简单使用tensorboard

2024-04-02 19:04:59 263人浏览 八月长安

Python 官方文档:入门教程 => 点击学习

摘要

一、tensorboard的简要介绍 TensorBoard是一个独立的包(不是PyTorch中的),这个包的作用就是可视化您模型中的各种参数和结果。 下面是安装: pip

一、tensorboard的简要介绍

TensorBoard是一个独立的包(不是PyTorch中的),这个包的作用就是可视化您模型中的各种参数和结果。

下面是安装:


pip install tensorboard

安装 TensorBoard 后,这些实用程序使您可以将 PyTorch 模型和指标记录到目录中,以便在 TensorBoard UI 中进行可视化。 PyTorch 模型和张量以及 Caffe2 网络和 Blob 均支持标量,图像,直方图,图形和嵌入可视化。

SummaryWriter 类是您用来记录数据以供 TensorBoard 使用和可视化的主要入口。
看一个例子,在这个例子中,您重点关注代码中的注释部分:


import torch
import torchvision
from torchvision import datasets, transfORMs
# 可视化工具, SummaryWriter的作用就是,将数据以特定的格式存储到上面得到的那个日志文件夹中
from torch.utils.tensorboard import SummaryWriter

# 第一步:实例化对象。注:不写路径,则默认写入到 ./runs/ 目录
writer = SummaryWriter()

transform = transforms.Compose([transforms.ToTensor(), transforms.Normalize((0.5,), (0.5,))])
trainset = datasets.MNIST('mnist_train', train=True, download=True, transform=transform)
trainloader = torch.utils.data.DataLoader(trainset, batch_size=64, shuffle=True)
model = torchvision.models.resnet50(False)

# 让 ResNet 模型采用灰度而不是 RGB
model.conv1 = torch.nn.Conv2d(1, 64, kernel_size=7, stride=2, padding=3, bias=False)
images, labels = next(iter(trainloader))

grid = torchvision.utils.make_grid(images)

# 第二步:调用对象的方法,给文件夹存数据
writer.add_image('images', grid, 0)
writer.add_graph(model, images)
writer.close()

点击运行之后,我们就可以在文件夹下看到我们保存的数据了,然后我们就可以使用 TensorBoard 对其进行可视化,该 TensorBoard 应该可通过以下方式运行(在命令行):


tensorboard --logdir=runs

运行结果:

在这里插入图片描述

把上述的地址,粘贴到浏览器就可以看到可视化的结果了,如下所示:

在这里插入图片描述

接着看:

一个实验可以记录很多信息。 为了避免 UI 混乱和更好地将结果聚类,我们可以通过对图进行分层命名来对图进行分组。 例如,“损失/训练”和“损失/测试”将被分组在一起,而“准确性/训练”和“准确性/测试”将在 TensorBoard 界面中分别分组。

我们再看一个更简单的例子来理解上面的话:


from torch.utils.tensorboard import SummaryWriter
import numpy as np

# 第一步:实例化对象。注:不写参数默认是 ./run/ 文件夹下
writer = SummaryWriter()

for n_iter in range(100):
    # 第二步:调用对象的方法,给文件夹存数据
    writer.add_Scalar('Loss/train', np.random.random(), n_iter)
    writer.add_scalar('Loss/test', np.random.random(), n_iter)
    writer.add_scalar('Accuracy/train', np.random.random(), n_iter)
    writer.add_scalar('Accuracy/test', np.random.random(), n_iter)

writer.close()

点击运行(保存数据);
在命令行输入tensorboard --logdir=run(run是保存的数据的所在路径)

实验结果:

在这里插入图片描述

好了,现在你对tensorboard有了初步的认识,也知道了怎么在pytorch中 保存模型在运行过程中的一些数据了,还知道了怎么把tensorboard运行起来了

但是,我们还没有细讲前面提到的几个函数,因此接下来我们看这几个函数的具体使用。

二、torch.utils.tensorboard涉及的几个函数

2.1 SummaryWriter()类

api


class torch.utils.tensorboard.writer.SummaryWriter(log_dir=None, comment='',
purge_step=None, max_queue=10, flush_secs=120, filename_suffix='')

作用:将数据保存到 log_dir 文件夹下 以供 TensorBoard 使用。

SummaryWriter 类提供了一个高级 API,用于在给定目录中创建事件文件并向其中添加摘要和事件。 该类异步更新文件内容。 这允许训练程序从训练循环中调用直接将数据添加到文件的方法,而不会减慢训练速度。

下面是SummaryWriter()类的构造函数:


def __init__(log_dir=None, comment='', purge_step=None, max_queue=10, flush_secs=120, 
filename_suffix='')

作用:创建一个 SummaryWriter 对象,它将事件和摘要写到事件文件中。

参数说明:

  • log_dir (字符串):保存目录位置。 默认值为 run/CURRENT_DATETIME_HOSTNAME ,每次运行后都会更改。 使用分层文件夹结构可以轻松比较运行情况。 例如 为每个新实验传递“ runs / exp1”,“ runs / exp2”等,以便在它们之间进行比较。
  • comment(字符串):注释 log_dir 后缀附加到默认值log_dir。 如果分配了log_dir,则此参数无效。
  • purge_step (python:int ):当日志记录在步骤 T + X T+X T+X 崩溃并在步骤 T T T 重新启动时,将清除 global_step 大于或等于的所有事件, 隐藏在 TensorBoard 中。 请注意,崩溃的实验和恢复的实验应具有相同的log_dir。
  • max_queue (Python:int ):在“添加”调用之一强行刷新到磁盘之前,未决事件和摘要的队列大小。 默认值为十个项目
  • flush_secs (python:int ):将挂起的事件和摘要刷新到磁盘的频率(以秒为单位)。 默认值为每两分钟一次。
  • filename_suffix (字符串):后缀添加到 log_dir 目录中的所有事件文件名中。 在 tensorboard.summary.writer.event_file_writer.EventFileWriter 中有关文件名构造的更多详细信息。

例子:


from torch.utils.tensorboard import SummaryWriter

# 使用自动生成的文件夹名称创建summary writer
writer = SummaryWriter()
# folder location: runs/May04_22-14-54_s-MacBook-Pro.local/

# 使用指定的文件夹名称创建summary writer
writer = SummaryWriter("my_experiment")
# folder location: my_experiment

# 创建一个附加注释的 summary writer
writer = SummaryWriter(comment="LR_0.1_BATCH_16")
# folder location: runs/May04_22-14-54_s-MacBook-Pro.localLR_0.1_BATCH_16/

2.2 add_scalar()函数

API:


add_scalar(tag, scalar_value, global_step=None, walltime=None)

作用:将标量数据添加到summary

参数说明:

  • tag (string) : 数据标识符
  • scalar_value (float or string/blobname) : 要保存的值
  • global_step (int) :要记录的全局步长值,理解成 x坐标
  • walltime (float):可选,以事件发生后的秒数覆盖默认的 walltime(time.time())

例子:


from torch.utils.tensorboard import SummaryWriter

writer = SummaryWriter()
x = range(100)
for i in x:
    writer.add_scalar('y_2x', i * 2, i)

writer.close()

结果:

在这里插入图片描述

2.3 add_scalars()函数

API:


add_scalars(main_tag, tag_scalar_dict, global_step=None, walltime=None)

作用:将许多标量数据添加到 summary 中。

参数说明:

  • main_tag (string) :标记的父名称
  • tag_scalar_dict (dict) :存储标签和对应值的键值对
  • global_step (int) :要记录的全局步长值
  • walltime (float) :可选的替代默认时间 Walltime(time.time())秒

例子:


from torch.utils.tensorboard import SummaryWriter

writer = SummaryWriter()
r = 5
for i in range(100):
    writer.add_scalars('run_14h', {'xsinx':i*np.sin(i/r),
                                    'xcosx':i*np.cos(i/r),
                                    'tanx': np.tan(i/r)}, i)
writer.close()
# 此调用将三个值添加到带有标记的同一个标量图中
# 'run_14h' 在 TensorBoard 的标量部分

结果:

在这里插入图片描述

2.4 add_histogram()


add_histogram(tag, values, global_step=None, bins='Tensorflow', walltime=None, max_bins=None)

作用:将直方图添加到 summary 中。

参数说明:

  • tag (string): 数据标识符
  • values (torch.Tensor, numpy.array, or string/blobname) :建立直方图的值
  • global_step (int) :要记录的全局步长值
  • bins (string) : One of {‘tensorflow','auto', ‘fd', …}. 这决定了垃圾箱的制作方式。您可以在以下位置找到其他选项:https://docs.scipy.org/doc/numpy/reference/generated/numpy.histogram.html
  • walltime (float) – Optional override default walltime (time.time()) seconds after epoch of event

例子:


from torch.utils.tensorboard import SummaryWriter
import numpy as np

writer = SummaryWriter()

for i in range(10):
    x = np.random.random(1000)
    writer.add_histogram('distribution centers', x + i, i)

writer.close()

结果:

在这里插入图片描述

我用到了上面的这些,关于更多的函数说明 ,请点击这里查看:Https://pytorch.org/docs/stable/tensorboard.html#torch-utils-tensorboard

到此这篇关于在Pytorch中简单使用tensorboard的文章就介绍到这了,更多相关Pytorch使用tensorboard内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: 在Pytorch中简单使用tensorboard

本文链接: https://www.lsjlt.com/news/128640.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • 在Pytorch中简单使用tensorboard
    一、tensorboard的简要介绍 TensorBoard是一个独立的包(不是pytorch中的),这个包的作用就是可视化您模型中的各种参数和结果。 下面是安装: pip ...
    99+
    2024-04-02
  • 教你如何在Pytorch中使用TensorBoard
    什么是TensorboardX Tensorboard 是 TensorFlow 的一个附加工具,可以记录训练过程的数字、图像等内容,以方便研究人员观察神经网络训练过程。可是对于 ...
    99+
    2024-04-02
  • Pytorch中怎么使用TensorBoard
    本文小编为大家详细介绍“Pytorch中怎么使用TensorBoard”,内容详细,步骤清晰,细节处理妥当,希望这篇“Pytorch中怎么使用TensorBoard”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。一...
    99+
    2023-07-02
  • Pytorch中使用TensorBoard详情
    目录前言一、 Introduction to TensorBoard二、TensoBoard Pipeline三、后端数据记录1. SummaryWriter类2. 添加数据3. 关...
    99+
    2024-04-02
  • TensorBoard快速入门(Pytorch使用TensorBoard)
    文章目录 TensorBoard 简介TensorBoard 界面介绍TensorBoard 安装TensorBoard 运行Pytorch 使用 TensorBoardGoogle Cola...
    99+
    2023-09-03
    pytorch 深度学习 python
  • Pytorch中的Tensorboard与Transforms搭配使用
    这章是结合之前学习的Tensforboard与Transforms的一个练习。 直接上代码: from PIL import Image from torch.utils.tens...
    99+
    2024-04-02
  • Pytorch中transforms.Resize()的简单使用
    目录transforms.Resize()的简单使用transforms.Resize([224, 224])解读transforms.Resize()的简单使用 简单来说就是调整P...
    99+
    2024-04-02
  • Pytorch中TensorBoard及torchsummary的使用详解
    1.TensorBoard神经网络可视化工具 TensorBoard是一个强大的可视化工具,在pytorch中有两种调用方法: 1.from tensorboardX import...
    99+
    2024-04-02
  • Pytorch中TensorBoard及torchsummary的使用方法
    这篇文章将为大家详细讲解有关Pytorch中TensorBoard及torchsummary的使用方法,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。1.TensorBoard神经网络可视化工具Tensor...
    99+
    2023-06-15
  • 【人工智能概论】 PyTorch可视化工具Tensorboard安装与简单使用
    【人工智能概论】 PyTorch可视化工具Tensorboard安装与简单使用 文章目录 【人工智能概论】 PyTorch可视化工具Tensorboard安装与简单使用一. 安装Tensorb...
    99+
    2023-10-02
    pytorch 深度学习 python
  • Pytorch中的Tensorboard与Transforms怎么搭配使用
    这篇文章主要介绍了Pytorch中的Tensorboard与Transforms怎么搭配使用,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。直接上代码:from PI...
    99+
    2023-06-22
  • python神经网络Pytorch中Tensorboard函数使用
    目录所需库的安装常用函数功能1、SummaryWriter()2、writer.add_graph()3、writer.add_scalar()4、tensorboard --log...
    99+
    2024-04-02
  • pytorch下tensorboard的使用程序示例
    目录一、tensorboard程序实例:1.代码2.在命令提示符中操作3.在浏览器中打开网址4.效果二、writer.add_scalar()与writer.add_scalars(...
    99+
    2024-04-02
  • PyTorch中torch.utils.data.DataLoader简单介绍与使用方法
    目录一、torch.utils.data.DataLoader 简介二、实例参考链接总结一、torch.utils.data.DataLoader 简介 作用:torch.utils...
    99+
    2024-04-02
  • PyTorch中的torch.cat简单介绍
    目录1.toych简单介绍2.张量Tensors3.torch.cat1.toych简单介绍 包torch包含了多维疑是的数据结构及基于其上的多种数学操作。 torch包含了多维张量...
    99+
    2024-04-02
  • 在ASP中如何使用简单Java类
    这篇文章主要介绍在ASP中如何使用简单Java类,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!方式一:把Java类注册成ActiveX组件步骤一:创建一个Java类,命名为Test.javapublic class ...
    99+
    2023-06-03
  • swiper在vue中的简单使用方法
    本次使用的是 swiper5,swiper 不同版本在使用 的过程会有一些差别 说明:本次示例中 skuImageList 是图片列表,由父组件从服务器获取然后传给这个轮播子组件使...
    99+
    2024-04-02
  • vuex在vite&vue3中的简单使用说明
    目录vuex在vite&vue3的使用一、说明二、使用vue3.x之vite初体验一、项目搭建二、附项目结构三、附项目启动成功图vuex在vite&vue3的使用 注...
    99+
    2024-04-02
  • optimizer如何在Pytorch中使用
    本文章向大家介绍optimizer如何在Pytorch中使用,主要包括optimizer如何在Pytorch中使用的使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。如何使用Optimizer要想...
    99+
    2023-06-06
  • 在Anaconda中安装PyTorch的两种方法(简单、快速、稳定)
    前段时间我听说有同学竟然花钱在咸鱼上让别人帮忙安装torch……心情很复杂(哈哈 我一般跑实验都是用Anaconda创建和管理不同环境,在这里总结在Anaconda里的2种torch的安装方法,当然这篇文章中的这两个“包的下载安装方法”可以...
    99+
    2023-10-03
    pytorch python 机器学习 深度学习 conda
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作