extension pytorch环境failed
Jenkins构建Host key verification failed. lost connection
使用jenkins发版，构建时使用了调用shell从jenkins服务器scp jar包到业务服务器。 由于新购买了服务器，并且要将jar包cp到新购买的服务器上，涉及到前任运维交接问题，这块一直没有了解。 在jenkins服务器 su jenkins切换到jenkins用户，找到/var/lib/ ......
大模型环境搭建（一）
一：Python 安装 安装简介： 电脑系统:Win11 安装Python版本：3.10.11 第一步,下载Python 打开官网：https://www.python.org/ 国内镜像：https://mirrors.huaweicloud.com/python/ 第三步,确认Python,pi ......
day 01 计算机基础和环境搭建
1.计算机基础 1.1 基本概念 计算机的组成 计算机是由多个硬件组合而成，常见的硬件有：CPU、硬盘、内存、网卡、显示器、机箱、电源... 操作系统 用于协调计算机的各个硬件，让硬件之间协作工作，以完成某个目标 - Windows - Linux - Mac 软件 在安装上操作系统之后，我们会在自 ......
fish 复用 .bash_profile 里的环境变量
vim ~/.config/fish/config.fish 添加以下代码 # REUSE ENVIRONMENT VARIABLES FROM ~/.bash_profile bash -c '. ~/.bash_profile; env' | while read e set var (echo ......
自有AI芯片接入AI框架Pytorch的方案
现在AI框架主要用Pytorch，包括一些常用的库对Pytorch支持都较好 一、华为昇腾npu 能够跟上Pytorch的更新，直接和Pytorch兼容，而且有较多人来维护，代码风格不错，之前是通过注入Pytorch预留的的xla搞的接入，现在被官方接收了。 二、寒武纪MLU 这个版本很老，他们是通 ......
hive执行sql报错 FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
前言： 执行hive sql报错，sql逻辑是两个表左连接并将数据插入新的表中。 报错信息： [ERROR] 2023-12-05 15:49:49.165 +0800 - execute sql error: Error while processing statement: FAILED: Ex ......
Cplex学术版申请及Python API环境配置
当使用Cplex时弹出下面错误： CPLEX Error 1016: Community Edition. Problem size limits exceeded. Purchase at http://ibm.biz/error1016. 不出意外，是因为使用了社区版的Cplex无法求解大规模问 ......
JAVA JDK 17--安装及环境配置
第一步：下载并安装 JAVA JDK 官网：https://www.oracle.com/java/technologies/downloads/#jdk17-windows 我在这里选择的是 windows系统的 安装包 JDK17： 将JDK放到C盘外 无 中文 与 空格下的目录： （我放在了E ......
centos 8 Failed to download metadata for repo ‘AppStream’: Cannot prepare internal mirrorlist: No URLs in mirrorlist
查询后发现问题的原因是Centos8于2021年年底停止了服务，我们在使用yum源安装时候，出现下面错误“错误：Failed to download metadata for repo ‘AppStream’: Cannot prepare internal mirrorlist: No URLs ......
不要用第三方日志包了Microsoft.Extensions.Logging功能就很强大
在.NET中，Microsoft.Extensions.Logging是一个广泛使用的日志库，用于记录应用程序的日志信息。它提供了丰富的功能和灵活性，使开发人员能够轻松地记录各种类型的日志，并将其输出到不同的目标，包括日志文件。本文将详细介绍Microsoft.Extensions.Logging的 ......
【PyTorch】如何判定运算维度
实际上无论是几维，方法都是一样。假设以 torch.softmax() 为例： # 下面运行结果所使用的代码 import torch import numpy as np z = np.arange(1, 33).reshape((2, 2, 2, 4)) z = torch.tensor(z, ......
关于在Windows环境下如何使用dtrace来获取程序运行的堆栈信息
如果启动的程序名为PerfTest.exe，对应的pid为30248，则打印堆栈调用信息的命令如下： dtrace -Fn "tick-5sec { exit(0);} pid30248:::entry/execname == \"PerfTest.exe\"/{ @num[ustack()] = ......
超详细Linux搭建Java开发环境
硬件 JDK1.8.0_121(截止2017-1-26最新) CentOS 7(截止目前最新版) 下载jdk8 http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 选择对应jdk版本下 ......
在 macOS 上搭建 Flutter 开发环境
目录下载 Flutter SDK配置 Flutter 环境变量及镜像检查开发环境参考 下载 Flutter SDK flutter官网下载：https://flutter.io/sdk-archive/#macos 若上述链接无法访问，可通过GitHub下载 https://github.com/f ......
Linux环境中动态库文件（.so文件）的realname，soname和linkname--解释清楚
realname： 实际等同于库文件的filename，是在库文件生成时就被指定的，如：gcc -shared -o $(realname) dependence flagsrealname的一般格式为 lib$(name).so.$(major).$(minor).$(revision)，$(na ......
PyTorch造大模型“加速包”，不到1000行代码提速10倍！英伟达科学家：minGPT以来最好的教程式repo之一
前言 PyTorch团队让大模型推理速度加快了10倍。且只用了不到1000行的纯原生PyTorch代码！ 本文转载自量子位 仅用于学术分享，若侵权请联系删除 欢迎关注公众号CV技术指南，专注于计算机视觉的技术总结、最新技术跟踪、经典论文解读、CV招聘信息。 CV各大方向专栏与各个部署框架最全教程整理 ......
Windows Docker Desktop 设置镜像环境变量
Images->run->展开Optional settings container name ：容器名称 Ports：根据你需要的端口进行输入，不输入则默认 Volumes：卷，也就是做持久化 需要docker 数据保存的地方 Environment variables：环境变量，也就是启动时需要 ......
ansible 报错 "changed": false, "msg": "Failed to connect to the host
报错： "changed": false, "msg": "Failed to connect to the host via ssh: root@node1: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password)." ......
基于ATMega16的最小系统及其开发环境简介
AVR实验例程用的最小系统如下图所示，芯片采用ATMega16A，主晶振频率为8MHz，异步晶振频率为32768Hz，系统采用JTAG接口调试及下载程序。 以上仅是最小系统的电路图，后续例程中使用到的额外电路会在例程中给出相应的模块电路。 AVR Studio集成开发环境（IDE）是专门用于开发AV ......
使用 PyTorch 完全分片数据并行技术加速大模型训练
本文，我们将了解如何基于 PyTorch 最新的 完全分片数据并行 (Fully Sharded Data Parallel，FSDP) 功能用 Accelerate 库来训练大模型。 动机 🤗 随着机器学习 (ML) 模型的规模、大小和参数量的不断增加，ML 从业者发现在自己的硬件上训练甚至加载 ......
Go开发环境
https://golang.google.cn/dl/ | go1.21.4.windows-386.zip | Archive | Windows | x86 | 69MB | 870a0e462b94671dc2d6cac707e9e19f7524fdc3c90711e6cd4450c3713 ......
linux python virtualenv虚拟环境安装
python virtualenv虚拟环境安装 pip3 install virtualenv pip3 install virtualenvwrapper 创建环境存放目录 mkdir $HOME/.virtualenvs 查看已安装的virtualenv find / -name virtual ......
国标GB28181视频监控EasyCVR内网环境部署无法启动怎么办？
安防视频监控系统EasyCVR平台可拓展性强、视频能力灵活、部署轻快，可支持的主流标准协议有国标GB28181、RTSP/Onvif、RTMP等，以及支持厂家私有协议与SDK接入，包括海康Ehome、海大宇等设备的SDK等，能对外分发RTMP、RTSP、HTTP-FLV、WebSocket-FLV、 ......
[pytorch] 余弦退火+warmup实现调研
tl;dr: pytorch的 torch.optim.lr_scheduler.OneCycleLR 就很不错，能兼顾warmup和余弦学习率，也不用下载额外的包 import torch from torch.optim.lr_scheduler import CosineAnnealingLR ......
环境安装anaconda
what： 1. 简介 Anaconda（官方网站）就是可以便捷获取包且对包能够进行管理，同时对环境可以统一管理的发行版本。Anaconda包含了conda、Python在内的超过180个科学包及其依赖项。 2. 特点 Anaconda具有如下特点： ▪ 开源 ▪ 安装过程简单 ▪ 高性能使用Pyt ......
Jupyter Notebook使用anaconda虚拟环境
参考： https://blog.csdn.net/qq_34319660/article/details/126246351 基本上就是如下几步 启动环境 conda activate LLM_env 查看已安装路径 jupyter kernelspec list 安装ipykernel pip ......
设置JDK环境变量
设置JDK环境变量 1.下载jdk https://www.123pan.com/s/KYyzVv-ajDzv.html 提取码:WT18 2.设置Jdk环境变量 windows JAVA_HOME C:\Program Files\Java\jdk-18.0.1.1 CLASSPATH .;% ......
【jenkins】linux下环境搭建
Jenkins是什么： Jenkins是一个开源软件项目，是基于Java开发的一种持续集成工具，用于监测持续重复的工作，旨在提供一个开放易用的软件平台，是软件项目可以进行持续集成。通常，项目中常用Jenkins作为编译打包项目的工具，做自动化部署。 本文的Jenkins安装基于Jenkins.war ......