杂症 疑难pytorch pycharm
从分布式计算的角度看pytorch和TensorFlow哪个更优？
背景： pytorch框架是一个从学术圈出来的框架，因此pytorch并不原生支持分布式计算，而且在大模型火爆的今年以外好像在深度学习领域使用分布式计算的场景确实不多，所以pytorch并不原生支持分布式计算的事情好像也并无大碍，而且pytorch可以通过安装第三方库的方式实现同步形式的分布式计算。 ......
pycharm中间件简介
个人理解： # 中间件顾名思义，是介于request与response处理之间的一道处理过程，相对比较轻量级，并且在全局上改变django的输入与输出。因为改变的是全局，所以需要谨慎实用，用不好会影响到性能 # django内置中间件 'django.middleware.security.Secu ......
【Pytorch基础实战】第二节，卷积神经网络
项目地址 https://gitee.com/wxzcch/pytorchbase/tree/master/leason_2 源码 import torch from torch import nn, optim from torch.autograd import Variable from to ......
喜报：Ubuntu等系统下Jetrbrains IDE（IDEA、PyCharm等）fcitx/ibus输入问题已经被修复
在该Issue被提出超过10年后，终于在2023.3 RC2版本中修复了这个问题。RC2不是正式版，有需要的可以手动更新到2023.3 RC2版本。 https://youtrack.jetbrains.com/issue/JBR-2460/Wrong-position-of-input-windo ......
pycharm usage
1 remote debug 1 when you want to debug the code in server, remember the following set. interpreter: server interpreter script: use path in server, in ......
PyCharm中New Directory 和 New Python Package的区别
如题，这是一个很简单也很基础的问题，先看不同操作的结果有什么不同 结果1：项目下出现了一个空“文件夹” 结果2：项目下多了一个“Python Package”，该package下包含了一个“__init__.py”文件，该py文件是空的 如果把该py文件删掉后，package也就变成了directo ......
pytorch——豆瓣读书评价分析
任务目标 基于给定数据集，采用三层bp神经网络方法，编写程序并构建分类模型，通过给定特征实现预测的书籍评分的模型。 选取数据 在各项指标中，我认为书籍的评分和出版社、评论数量还有作者相关，和其他属性的关系并大。所以，对于出版社，我选取了出版社的平均评分和出版社在这个表格中出现的频率作为出版社的评价指 ......
Mac pycharm快捷键
目录1、Edit编辑操作快捷键2、Run / Debug 运行与调试3、窗口操作 1、Edit编辑操作快捷键 双击 shift：全局搜索 command + F：当前文件内进行查找 command + r ：当前文件内替换 command + shift + r：全局替换 option + comm ......
pytorch 踩坑记录
arr = arr.astypr(numpy.int16) tensor = torch.from_numpy(arr) TypeError: can't convert np.ndarray of type numpy.uint16. The only supported types are: f ......
四、python编写软件-pycharm安装
这里我就不编写了，主要是技术也不是太好，这里给大家分享一个不错安装教程，大家去看看图文教程 视频教程 搜索pycharm安装就可以了 ......
pytorch的docker镜像
安装docker环境 sudo apt-get update sudo apt-get install -y docker.io sudo systemctl enable docker docker版本查看 sudo docker version sudo docker info 查看镜像 sud ......
win11 安装pytorch
第一步骤，是安装cuda和cudnn，看这个链接。 https://zhuanlan.zhihu.com/p/586913250。重点就是如何安装pytorch了，因为网络慢的原因 首先，直接使用下面这个命令不好使，如果你的科上网流量非常足的话，没问题的。我用aconda，差不多就安装好了，可是比较 ......
pytorch——支持向量机
1、任务要求 针对已知类别的5张卧室照片(标签为+1)和5张森林照片(标签为-1)所对应的矩阵数据进行分类训练,得到训练集模型;再利用支持向量机对另外未知类别的5张卧室照片和5张森林照片数据进行测试分类(二分类)，得到分类结果及其准确率。 2、先导入查看基本数据 3、合并数据 将房间的数据和森林的数 ......
pytorch减少显存方式
引导 1. 显存都用在哪儿了？ 2. 技巧 1：使用就地操作 3. 技巧 2：避免中间变量 4. 技巧 3：优化网络模型 5. 技巧 4：减小 BATCH_SIZE 6. 技巧 5：拆分 BATCH 7. 技巧 6：降低 PATCH_SIZE 8. 技巧 7：优化损失求和 9. 技巧 8：调整训练精 ......
pycharm 安装
1、下载地址：https://www.jetbrains.com.cn/en-us/pycharm/download/download-thanks.html?platform=windows 2、选择Download 3、下载完成后。双击，运行安装包 4、安装设置页面 5、下一步，可以修改安装路径 ......
使用ubuntu根据cuda11.2安装pytorch
在使用镜像新建了一个cuda11.2-python3.9 容器配置环境的过程中需要安装PyTorch。一开始我直接使用 pip install torch 来进行安装，但是运行程序时出现报错： RuntimeError: The NVIDIA driver on your system is too ......
pytorch——房价预测
1、首先对数据进行读取和预处理 2、读取数据后，对x数据进行标准化处理，以便于后续训练的稳定性，并转换为tensor格式 3、接下来设置训练参数和模型 这里采用回归模型，既y=x*weight1+bias1，设置的学习率为0.0006，损失函数采用了MSE（均方误差） 4、绘制图像 由于数据量较少， ......
pycharm 新建文件模板
Setting->Editor->File and Code Templates->Python Script #!/usr/bin/env python # -*- coding:utf-8 -*- # @FileName :${NAME}.py # @Time :${DATE} ${TIME} ......
pycharm配置环境
1、首先创建虚拟环境 conda create -n *** python == 3.7 2、install pytorch 去pytorch官网找命令 3、找到 Add Python Interpreter 4、在 Conda Environment里选择你所创建的虚拟环境 在下边 Use exi ......
【Pytorch基础实战】第一节，BP神经网络
项目地址 https://gitee.com/wxzcch/pytorchbase/tree/master/leason_1 实现代码 import pandas as pd import torch import torch.nn as nn import torch.optim as optim ......
使用 PyTorch FSDP 微调 Llama 2 70B
引言 通过本文，你将了解如何使用 PyTorch FSDP 及相关最佳实践微调 Llama 2 70B。在此过程中，我们主要会用到 Hugging Face Transformers、Accelerate 和 TRL 库。我们还将展示如何在 SLURM 中使用 Accelerate。 完全分片数据并 ......
ubuntu使用疑难问题记录
1 虚拟机ubuntu安装好VMware Tools后，可以和windows共享文件，但是终端与windows之间还是无法复制粘贴文字。 解决办法： sudo apt-get install open-vm-tools sudo apt-get install open-vm-tools-deskt ......
使用PyTorch II的新特性加快LLM推理速度
Pytorch团队提出了一种纯粹通过PyTorch新特性在的自下而上的优化LLM方法，包括: Torch.compile: PyTorch模型的编译器 GPU量化:通过降低精度操作来加速模型 推测解码:使用一个小的“草稿”模型来加速llm来预测一个大的“目标”模型的输出 张量并行:通过在多个设备上运 ......
pycharm中三种解释器：virtual Enviroment、conda Enviroment、system interpreter
1、system interpreter不推荐使用 2、Virtual Environment—Python的虚拟环境可以使一个Python程序拥有独立的库library和解释器interpreter，而不用与其他Python程序共享统一个library和interpreter。虚拟环境的好处是避免 ......
在pytorch中保存模型或模型参数
在 PyTorch 中，我们可以使用 torch.save 函数将 PyTorch 模型保存到文件。这个函数接受两个参数：要保存的对象（通常是模型），以及文件路径。 保存模型参数 import torch import torch.nn as nn # 假设有一个简单的模型 class Simple ......
JetBrains PyCharm 2023.3 (macOS, Linux, Windows) - 面向专业开发者的 Python IDE
JetBrains PyCharm 2023.3 (macOS, Linux, Windows) - 面向专业开发者的 Python IDE 请访问原文链接：https://sysin.org/blog/jb-pycharm-2023/，查看最新版。原创作品，转载请保留出处。 作者主页：sysin. ......
pycharm插件离线安装
给不能联网的电脑或者不能访问外网的云桌面安装pycharm插件，需要离线安装 首先在能访问网络的电脑上打开插件主页，如下： 下载插件安装文件 ......