张量torch
torch.nn.Module.register_forward_hook使用
本文简单介绍 torch.nn.Module.register_forward_hook钩子函数的使用，简单写了一个卷积的网络，在net.conv1.register_forward_hook注册钩子函数，则会有module、输入input数据与卷积后输出数据output，重点说明module是关于 ......
torch.nn.Module.register_forward_pre_hook使用
本文简单介绍 torch.nn.Module.register_forward_pre_hook钩子函数的使用，简单写了一个卷积的网络，在net.conv1.register_forward_pre_hook注册钩子函数，则会有module与输入input数据，重点说明module是关于模型结构se ......
张量
前面说的“转换为张量”，其中的“张量”是什么意思 已发送电子邮件. 前面说的“转换为张量”，其中的“张量”是什么意思 张量（Tensor）是一种多维数组，它是深度学习中用于表示数据和计算的基本数据结构。在PyTorch中，张量由torch.Tensor类实现。 在深度学习中，常用的张量形状包括标量（ ......
pytorch的torch、torchvision、torchaudio版本对应关系
torch与torchvision对应关系 torch与torchaudio对应关系 ......
torch.randn(*tensor_shape, **kwargs)
` randn(*size, *, out=None, dtype=None, layout=torch.strided, device=None, requires_grad=False, pin_memory=False) -> Tensor Returns a tensor filled wi ......
人工智能创新挑战赛：海洋气象预测Baseline[4]完整版（TensorFlow、torch版本）含数据转化、模型构建、MLP、TCNN+RNN、LSTM模型训练以及预测
人工智能创新挑战赛：海洋气象预测Baseline[4]完整版（TensorFlow、torch版本）含数据转化、模型构建、MLP、TCNN+RNN、LSTM模型训练以及预测 ......
Pytorch中张量的连续性：contiguous
根据PyTorch文档¹，`t.contiguous()`返回一个包含与`t`张量相同数据的连续张量。如果`t`张量已经是连续的，这个函数返回`t`张量本身。 一个张量是连续的，如果张量中的相邻元素在内存中实际上是相邻的³。有些对张量的操作，例如`transpose()`，`permute()`，` ......
Pytorch torch.mean() 平均值的简单用法
Pytorch torch.mean()的简单用法 简单来说就是求平均数。比如以下的三种简单情况： import torch x1 = torch.Tensor([1, 2, 3, 4]) x2 = torch.Tensor([[1], [2], [3], [4]]) x3 = torch.Tens ......
小灰灰深度学习day4——数据操作之张量(torch)
震惊了！！！在python中， y = x + y;与 y += x;竟然有区别，且看如下代码: import torch ''' x = torch.arange(12) print(x) #reshape可以改变张量的形状而不改变元素的数量和元素值 X = x.reshape(-1,3) pri ......
macbook苹果m1芯片训练机器学习、深度学习模型,resnet101在mnist手写数字识别上做加速，torch.device("mps")
apple的m1芯片比以往cpu芯片在机器学习加速上听说有15倍的提升，也就是可以使用apple mac训练深度学习pytorch模型！！！惊呆了 安装apple m1芯片版本的pytorch 然后使用chatGPT生成一个resnet101的训练代码，这里注意，如果网络特别轻的话是没有加速效果的， ......
libtorch教程（二）张量的常规操作
前言 libtorch(pytorch c++)的大多数api和pytorch保持一致，因此，libtorch中张量的初始化也和pytorch中的类似。本文介绍四种深度图像编程需要的初始化方法。 本教程禁止转载。同时，本教程来自知识星球【CV技术指南】更多技术教程，可加入星球学习。 欢迎关注公众号C ......
ImportError: cannot import name 'QuantStub' from 'torch.ao.quantization' (E:\Eprogramfiles\Anaconda3\lib\site-packages\torch\ao\quantization\__init__.py)
ImportError: cannot import name 'QuantStub' from 'torch.ao.quantization' (E:\Eprogramfiles\Anaconda3\lib\site-packages\torch\ao\quantization\__init__. ......
安装python torch 遇到的问题
一、解决torch指令安装时Could not find a version that satisfies the requirement xxx (from versions: none) 1.进入torch的wheel下载网站https://download.pytorch.org/whl/to ......
百度飞桨(PaddlePaddle)- 张量（Tensor）
飞桨 使用张量（Tensor） 来表示神经网络中传递的数据，Tensor 可以理解为多维数组，类似于 Numpy 数组（ndarray） 的概念。与 Numpy 数组相比，Tensor 除了支持运行在 CPU 上，还支持运行在 GPU 及各种 AI 芯片上，以实现计算加速；此外，飞桨基于 Tenso ......
torch+torchvision+cuda10.2
torch1.12.1 # CUDA 10.2 conda install pytorch==1.12.1 torchvision==0.13.1 torchaudio==0.12.1 cudatoolkit=10.2 -c pytorch # CUDA 10.2 pip install torch ......
张量（Tensor）、标量（scalar）、向量（vector）、矩阵（matrix）
张量（Tensor）：Tensor = multi-dimensional array of numbers 张量是一个多维数组，它是标量，向量，矩阵的高维扩展 ，是一个数据容器，张量是矩阵向任意维度的推广 注意，张量的维度（dimension）通常叫作轴（axis）, 张量轴的个数也叫作阶（ran ......
torch.scatter
(22条消息) torch.scatter算子详解_leo0308的博客-CSDN博客 了解这个之前需要首先了解dim=0和dim=1的区别 dim=0 dim=1 我们看a 首先a，b是一个3×5的全零矩阵 对a执行scatter操作（将src中的值，按照指定的位置更新到input当中） 0.59 ......
使用model.eval( ) 和 torch.no_grad( )的情况
神经网络每训练1个epoch 会紧接着 evaluate一下，PyTorch提供了model.eval( )和torch.no_grad( )，验证时会使用 model.eval( ) 开启评估模式， 在训练阶段，网络的Dropout 层和BatchNorm 层处于train开启的模式； 在验证阶段 ......
pip安装cuda版torch
一开始安装torch的时候没有指定cuda版本,所以安装的是cpu版本,无法调用gpu 可以使用如下安装方法: pip install torch -f https://download.pytorch.org/whl/cu118/torch_stable.html(应该可以用) pip insta ......
torch+torchvision+cuda10.1
torch1.7.1 # CUDA 10.1 pip install torch==1.7.1+cu101 torchvision==0.8.2+cu101 torchaudio==0.7.2 -f https://download.pytorch.org/whl/torch_stable.html ......
动手学习深度学习-pandas dataframe转为张量
动手学习深度学习-pandas dataframe转为张量 创建数据 在当前目录的上一级目录创建csv文件，然后写入数据 import os os.makedirs(os.path.join('..','data'),exist_ok=True) # '..'表示上一级目录路径 data_file ......
DDP运行报错（单卡无错）：ERROR:torch.distributed.elastic.multiprocessing.api:failed (exitcode: 1)
使用DDP时出现错误，但是单卡跑无错误。 错误记录如下： RuntimeError: Expected to have finished reduction in the prior iteration before starting a new one. This error indicates ......
安装torch报错ERROR: torch has an invalid wheel, .dist-info directory not found
要搭建一篇论文算法的环境，根据yaml文档提供的安装包利用conda进行安装，出现了以上问题，尝试 pip install torch==1.7.0 -f https://download.pytorch.org/whl/torch_stable.html 成功安装 问题原因：之前更换了国内清华源， ......
torch.utils.data
Dataset子类 dataset子类用用构建数据集。是一个抽象类，==需要重写__getitem__函数。== 代码示例如下： from torch.utils.data import Dataset from PIL import Image import os class Mydata(Dat ......
每日学习记录20230406_bert_and_torch
20230407:tensorflow transformer tf.name_scope: 这个函数会规定对象和操作属于那个范围,但是不会对“对象”的“作用域”产生任何影响,也就是不是全局变和局部变量的概念. 这个东西有很多种用法: with tf.name_scope("loss"): #这个名 ......
2.2 张量
张量 张量是一种特殊的数据结构，与数组和矩阵非常相似。 在 PyTorch 中，我们使用张量对模型的输入和输出以及模型的参数进行编码。 张量类似于 NumPy 的 ndarray，此外张量可以在 GPU 或其他硬件加速器上运行。事实上，张量和 NumPy 数组通常可以共享相同的底层内存，无需复制数据 ......
：）关于torch函数中dim的解释-读这篇就够了-|
关于torch函数中dim的解释-读这篇就够了 1 dim的取值范围 1）-1的作用 0，1，2，-1. 其中-1 最后一维 即 2 0，1，2，3，-1其中-1 最后一维 即3 2）维度 0，1，2，3表示 BCHW，常在CV任务中使用。 0，1，2 表示 CHW， 常在NLP任务中使用。 3）用 ......
python-torch numpy matploit pandas
title: 深度学习基础 torch numpy pandas matplotlib numpy 数组对象是 NumPy 中最核心的组成部分，这个数组叫做 ndarray，是“N-dimensional array”的缩写。其中的 N 是一个数字，指代维度. 在 NumPy 中，数组是由 nump ......
torch.clamp()函数、torch.mean()、torch.sum()、torch哈达玛积和普通乘积、torch.expand()函数和torch.expand_as(）函数
torch.clamp()函数 参考博客：https://blog.csdn.net/weixin_39504171/article/details/106069230 torch哈达玛积和普通乘积 https://zhuanlan.zhihu.com/p/537877779 torch.mean( ......
Python小练习：优化器torch.optim的使用
Python小练习：优化器torch.optim的使用 作者：凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 本文主要介绍Pytorch中优化器的使用方法，了解optimizer.zero_grad()、loss.backward()以及optimizer. ......