随想录 训练营 祖先 随想
算法训练DAY01
算法训练DAY01| 704. 二分查找、27. 移除元素 704. 二分查找 大体思路： 处理数组为空的特殊情况 初始化left，right，使用[l，r]形式的二分法 确定while条件，处理二分 实现细节： (l+r)//2 python中//运算符向下取整 处理while中的分支时，最好用c ......
解决PaddlePaddle飞桨在迁移学习使用预训练模型时更改num_classes参数出现警告
使用 PaddlePaddle 进行迁移学习，直接导入模型会有个警告，通过自定义网络结构，实现既加载了预训练模型，又能更好的训练自己的数据 ......
代码随想录算法训练营第七天 | 454.四数相加II 、383.赎金信
📋目录 ✅ 454.四数相加II ➡️ 383.赎金信 ➡️ 15.三数之和 ➡️ 18.四数之和 454.四数相加II ⏰ 1.解题思路 定义一个map,key用来存放a和b的两数之和，value用来存两数之和出现的次数 将四个数组两两分组，nums1和nums2、nums3 和 nums4 定 ......
yolov5训练栏杆检测模型日志记录
yolov5训练栏杆检测模型日志记录 (wind_2021) H:\PytorchProject\yolov5_train_xinru_2023050901> (wind_2021) H:\PytorchProject\yolov5_train_xinru_2023050901> (wind_202 ......
TensorFlow下利用MNIST训练模型识别手写数字
本文将参考TensorFlow中文社区官方文档使用mnist数据集训练一个多层卷积神经网络(LeNet5网络)，并利用所训练的模型识别自己手写数字。 训练MNIST数据集，并保存训练模型 # Python3 # 使用LeNet5的七层卷积神经网络用于MNIST手写数字识别 import tensor ......
大模型训练数据统计+探索如何创建自己的数据集
羊驼数据集52k,基于llama模型训练 此数据集是是使用llama模型自己生成数据,然后对这些生成进行过滤，以删除低质量或类似的生成，并将生成的数据添加回任务池。这个过程可以重复多次，从而产生大量的教学数据，这些数据可以用来微调语言模型，以更有效地遵循指令。此创建数据集的方法其实和目标检测任务创建 ......
YOLO v5训练自己的模型
YOLO v5训练自己的模型 1.1 前期准备 1.1.1 数据集的准备 数据集VOCdevkit文件夹内设置如下： 其中： images和labels文件夹内都包含着train文件夹和val文件夹： Images/train文件夹里面保存着训练集的照片； Images/val文件夹里面保存着验 ......
VOC标签格式转yolo格式并划分训练集和测试集
VOC标签格式转yolo格式并划分训练集和测试集 经常从网上获取一些目标检测的数据集资源标签的格式都是VOC(xml格式)的，而yolov5训练所需要的文件格式是yolo(txt格式)的，就需要对xml格式的标签文件转换为txt文件。同时训练自己的yolov5检测模型的时候，数据集需要划分为训练集和 ......
模型训练
安装cuda vim ~/.bashrcexport PATH=/usr/local/cuda/bin:$PATHexport LD_LIBRARY_PATH=/usr/local/cuda/lib64:$LD_LIBRARY_PATH 安装cudnn sudo cp cudnn-linux-x86 ......
代码随想录算法训练营14期 Day1
数组理论基础 原文：https://github.com/youngyangyang04/leetcode-master/blob/master/problems/数组理论基础.md 704. 二分查找 解析链接：https://programmercarl.com/0704.二分查找.html#_ ......
随想 2023-05-08
How are you? My life sucks. 最近的状态真的非常的差。 学习方面，过于混和摆，除了面向对象的作业是自己做的，其余的都是面向学长博客代码/面向chatGPT；任务全部压在ddl前仓促的完成；基本丧失了独立思考的能力，目标只有把任务完成。于是乎，今天os的exam喜提fail； ......
Java 中的机器学习正在加速图像处理 Java 开发人员可以使用预训练的机器学习模型快速实现图像分类或对象检测。
来源: https://www.infoworld.com/article/3601711/machine-learning-in-java-is-speeding-image-processing.html 近年来，人们对机器学习的兴趣稳步增长。具体来说，企业现在在各种用例中使用机器学习进行图像识 ......
DGL用户指南---第6章：在大图上的随机（批次）训练
6.1 针对节点分类任务的邻居采样训练方法 6.2 针对边分类任务的邻居采样训练方法 6.3 针对链接预测任务的邻居采样训练方法 6.4 定制用户自己的邻居采样器 6.5 为小批次训练实现定制化的GNN模块 6.6 超大图上的精准离线推断 ......
阅读笔记：Merak 大模型并行训练系统
本篇为Merak: An Efficient Distributed DNN Training Framework With Automated 3D Parallelism for Giant Foundation Models论文的阅读笔记 ......
阅读笔记：Merak 大模型并行训练系统
本篇为Merak: An Efficient Distributed DNN Training Framework With Automated 3D Parallelism for Giant Foundation Models论文的阅读笔记 ......
加速 AI 训练，如何在云上实现灵活的弹性吞吐
AI 已经成为各行各业软件研发的基础，带来了前所未有的效率和创新。今天，我们将分享苏锐在AWS量化投研行业活动的演讲实录，为大家介绍JuiceFS 在 AI 量化投研领域的应用经验，也希望为其他正在云上构建机器学习平台，面临热点数据吞吐不足的企业提供一些启发。 1. 背景 JuiceFS 最初是为了 ......
chatglm-6b法律名词数据训练
整体流程于上一份微调文件基本一致，此份是详细备份及关键说明： 1.处理文件 处理好法律名词解释为json文件的格式，其中prompt column为 content，response column 为summary，如下： （如果KEY不是content-summary的形式，也可修改train.s ......
最近公共祖先 RMQ
就是把LCA问题转化为RMQ问题 转化之前先要了解欧拉序列：对一棵树进行 DFS，无论是第一次访问还是回溯，每次到达一个结点时都将编号记录下来，可以得到一个长度为 2n-1 的序列，这个序列被称作这棵树的欧拉序列。 比如下面这个树：(2连3和4) 1->2->3 ->4->5 其序列就是1 2 3 ......
OpenCV3训练人脸检测分类器生成XML文件的过程
原文：https://www.bilibili.com/read/cv10624306/ OpenCV训练自己的分类器 注：本文写的是一个训练人脸分类器的例子，亲自试验过，采用的是openCV3.41.准备训练样本看网上说正负样本比例为1：3最佳；尺寸为20x20最佳附上人脸训练的数据集的下载链接： ......
基于深度神经网络的图像分类与训练系统（MATLAB GUI版，代码+图文详解）
本博客详细介绍了基于深度神经网络的图像分类与训练系统的MATLAB实现代码，包括GUI界面和数据集，可选择模型进行图片分类，支持一键训练神经网络。首先介绍了基于GoogleNet、ResNet进行图像分类的背景、意义，系统研究现状及相关算法。然后展示了系统的界面演示效果，包括选择图片分类、选择文件夹... ......
自动驾驶图像全景分隔，基于HRnetSegmentation从训练工程到tensorRT工程部署Demo闭环一套，包含训练工程及?
自动驾驶图像全景分隔，基于HRnetSegmentation从训练工程到tensorRT工程部署Demo闭环一套，包含训练工程及部署工程，和环境的配置说明，已在实际项目中使用。大厂自动驾驶工程师沉淀实实在在的工作经验总结资料是一线自动驾驶工程师辛苦工作的结果。ID:3150671806789047 ......
自动驾驶图像分类，基于HRnet从训练工程到tensorRT工程部署Demo闭环一套，包含训练工程及部署工程，和环境?
自动驾驶图像分类，基于HRnet从训练工程到tensorRT工程部署Demo闭环一套，包含训练工程及部署工程，和环境的配置说明，已在实际项目中使用。大厂自动驾驶工程师沉淀资料是一线自动驾驶工程师辛苦工作的结果ID:5150672485127196 ......
自动驾驶车道线检测，基于LaneLine Detect从训练工程到tensorRT工程部署Demo闭环一套，包含训练工程及部署?
自动驾驶车道线检测，基于LaneLine Detect从训练工程到tensorRT工程部署Demo闭环一套，包含训练工程及部署工程，和环境的配置说明，已在实际项目中使用。大厂自动驾驶工程师沉淀实实在在的工作经验总结资料是一线自动驾驶工程师辛苦工作的结果ID:7950671420904511 ......
最近公共祖先 算法总结
现知LCA算法有倍增、Tarjan、树链剖分 再LCA问题上各自的特点如下表 | | 倍增 | Tarjan | 树链剖分 | | : : | : : | : : | : : | | 数组 | fa[u][i], dep | fa, vis, query, ans | fa, dep, size_t ......
最近公共祖先 树链剖分
例题：洛谷P3379 【模板】最近公共祖先（LCA） https://www.luogu.com.cn/problem/P3379 首先是几个概念 重儿子：父结点所有子树中最大的子树的根节点（只有一个或没有） 轻儿子：父结点除了重儿子以外的所有子结点（没有或有很多个） 重边：父结点和重儿子连的边 轻 ......
MNIST 数据集训练及测试代码
简单概念 MNIST 是一个手写体数字的图片数据集，统计了来自 250 个不同的人手写数字的图片。该数据集可以通过算法，实现机器对手写数字的识别。 训练代码 import torch from torchvision import transforms, datasets from torch.ut ......
【2023 · CANN训练营第一季】昇腾AI入门Pytorch
昇腾AI全栈架构 华为AI全栈全场景解决方案为4层，分别为芯片层、芯片使能层、AI框架层和应用使能层。 芯片 基于统一、可扩展架构的系列化AI IP和芯片，为上层加速提供硬件基础。 芯片产品：昇腾310和昇腾910的独立芯片，Nano-Tiny-Lite的非独立芯片。 Ascend层，一切集成电路的 ......
最近公共祖先 Tarjan算法
例题：洛谷P3379 【模板】最近公共祖先（LCA） https://www.luogu.com.cn/problem/P3379 tarjan算法是利用了并查集来求LCA的，时间复杂度比倍增低，是O(n+m) #include<iostream> #include<vector> #include ......
最近公共祖先 倍增算法
求最近公共祖先（Lowest Common Ancestor，LCA） 例题：洛谷P3379 【模板】最近公共祖先（LCA） https://www.luogu.com.cn/problem/P3379 基本思路就是先用倍增把两点升到同一深度，然后倍增来找最近公共祖先。 其中fa数组是关键 #inc ......
NFLS NOI 训练赛
NOI2023训练赛12 NOI2023训练赛12 门把手集合 每个点的价值是子树中与自身距离不超过 $k$ 的点权两两异或的平方和。 异或想到拆位，平方只与两个为有关，枚举两个位置，合并子节点权值，实时删去距离大于 $k$ 的节点，可以做到 $O(n\log^2 V)$。 本题卡空间，dsu on ......