【深度学习03】TensorBoard+Transforms+Dataload的使用

简介: 【深度学习03】TensorBoard+Transforms+Dataload的使用

⭐本文内容:TensorBoard、Transforms、Dataload


TensorBoard


from torch.utils.tensorboard import SummaryWriter
writer = SummaryWriter("logs")
for i in range(100):
  writer.add_scalar("y=x",i,i)
writer.close()


%load_ext tensorboard
%tensorboard --logdir /content/logs #注意路径


%tensorboard --logdir /content/logs:保存这个插件,到logs文件夹中


writer = SummaryWriter("logs"):()里面的logs,是%tensorboard --logdir /content/logs的logs


类“SummaryWriter”提供了创建事件文件的高级API 并添加摘要和事件。类更新 异步文件内容。这允许培训程序调用方法 直接从训练循环向文件中添加数据,而不会减慢速度训练


writer.add_image()函数


  • 示例:writer.add_image("test",img,1,dataformats='HWC') #注意dataformats='HWC'表示通道、长、宽的排序


  • 作用:添加image到tensorBoard中


  • 参数:


。img_tensor:数据类型(torch.Tensor, numpy.array, or string/blobname)


202205061956751.png


Transforms


Transforms:图像预处理的工具


eeab8c4c4d00eaacbf6435d0bd0b8574.png


变换数据类型:tensor_trans = transforms.ToTensor()(img),注意在()后面加上(img)


Dataload


import torchvision
from torch.utils.data import DataLoader
# 准备测试集 
test_data = torchvision.datasets.CIFAR10("/content/drive/MyDrive/Learn-                      pytorch/dataset",train=False,download=True,transform=torchvision.transforms.ToTensor())
test_loader = DataLoader(dataset=test_data,batch_size=64,shuffle=True,num_workers=0)


torchvision.datasets()函数


  • 示例:test_data = torchvision.datasets.CIFAR10("/content/drive/MyDrive/Learn-pytorch/dataset",train=False,download=True,transform=torchvision.transforms.ToTensor())


  • 作用:加载官方自带的数据集,返回img,target(图片+标签)


  • 参数:


。.CIFAR10:数据集名称

。“/content/drive/MyDrive/Learn-pytorch/dataset”:数据集的路径,如没有则新建一个文件夹

。train=False:是不是用来训练的,如:train=False表示是测试集

。download=True:是否下载

。transform=torchvision.transforms.ToTensor():数据格式的转换


DataLoader()函数


  • 示例:test_loader = DataLoader(dataset=test_data,batch_size=64,shuffle=True,num_workers=0)
  • 作用:和torchvision.datasets()联用,将数据集以一定的方式打包
  • 参数:

。batch_size=64:一个test_data随机抓取64张图片


writer = SummaryWriter("dataloader")
step = 0
for data in test_loader:
  imgs,targets = data
  writer.add_images("test_image",imgs,step)
  step = step+1
writer.close()


🚀注意SummaryWriter(“dataloader”)、writer.add_images

相关文章
|
机器学习/深度学习 数据可视化 TensorFlow
【深度学习】实验08 TensorBoard案例
【深度学习】实验08 TensorBoard案例
171 0
|
机器学习/深度学习 数据可视化 PyTorch
【深度学习】pytorch使用tensorboard可视化实验数据
【深度学习】pytorch使用tensorboard可视化实验数据
387 0
【深度学习】pytorch使用tensorboard可视化实验数据
|
机器学习/深度学习 监控 数据可视化
深度学习模型训练可视化(TensorBoard可视化)
深度学习模型训练可视化(TensorBoard可视化)
513 0
|
机器学习/深度学习 数据可视化 TensorFlow
学习笔记 | 深度学习开发—TensorFlow实践(TensorBoard可视化工具)
学习笔记 | 深度学习开发—TensorFlow实践(TensorBoard可视化工具)
学习笔记 | 深度学习开发—TensorFlow实践(TensorBoard可视化工具)
|
机器学习/深度学习 存储 数据可视化
深度学习:Tensorflow变量op和可视化TensorBoard
深度学习:Tensorflow变量op和可视化TensorBoard
360 0
|
10月前
|
机器学习/深度学习 运维 安全
深度学习在安全事件检测中的应用:守护数字世界的利器
深度学习在安全事件检测中的应用:守护数字世界的利器
413 22
|
7月前
|
机器学习/深度学习 编解码 人工智能
计算机视觉五大技术——深度学习在图像处理中的应用
深度学习利用多层神经网络实现人工智能,计算机视觉是其重要应用之一。图像分类通过卷积神经网络(CNN)判断图片类别,如“猫”或“狗”。目标检测不仅识别物体,还确定其位置,R-CNN系列模型逐步优化检测速度与精度。语义分割对图像每个像素分类,FCN开创像素级分类范式,DeepLab等进一步提升细节表现。实例分割结合目标检测与语义分割,Mask R-CNN实现精准实例区分。关键点检测用于人体姿态估计、人脸特征识别等,OpenPose和HRNet等技术推动该领域发展。这些方法在效率与准确性上不断进步,广泛应用于实际场景。
1044 64
计算机视觉五大技术——深度学习在图像处理中的应用
|
11月前
|
机器学习/深度学习 传感器 数据采集
深度学习在故障检测中的应用:从理论到实践
深度学习在故障检测中的应用:从理论到实践
977 6
|
9月前
|
机器学习/深度学习 人工智能 运维
深度学习在流量监控中的革命性应用
深度学习在流量监控中的革命性应用
361 40
|
7月前
|
机器学习/深度学习 数据采集 存储
深度学习在DOM解析中的应用:自动识别页面关键内容区块
本文探讨了如何通过深度学习模型优化东方财富吧财经新闻爬虫的性能。针对网络请求、DOM解析与模型推理等瓶颈,采用代理复用、批量推理、多线程并发及模型量化等策略,将单页耗时从5秒优化至2秒,提升60%以上。代码示例涵盖代理配置、TFLite模型加载、批量预测及多线程抓取,确保高效稳定运行,为大规模数据采集提供参考。
189 0

热门文章

最新文章