tensorflow深度 环境 笔记
Flink Sql线上环境踩坑记录
背景：Flink Sql程序本机测试执行没问题，上到生产环境就报各种诡异得问题，搞得头都大了。。。特此记录下解决过程。 问题原因主要两点： 1.JDK版本问题 2.Flink Sql相关jar包冲突 问题一 2020-09-27 06:06:33,125 INFO org.apache.flink. ......
Java环境配置
前言（文章摘抄如：https://blog.csdn.net/xhmico/article/details/122390181）java 环境配置，网上教程很多，那我为什么还要写？ 首先为了完善我的知识体系 今后一些软件的安装教程也可能会用到 想写一个更加详细的，因为这并不仅仅是写给 IT 行业的， ......
【系统设计】笔记3
尽管此刻没有如愿以偿找到合适的ft，但我希望能够充分认识到自己的不足，积蓄力量。相信在不久的将来未来会有爆发的机会。 知识的广度（component, 目的）和深度(sde1: 3年以内，sde2: 4年以上，sde3：team lead，org impact可小可大，深度，3+：org lead, ......
读元宇宙改变一切笔记03_元素（下）
1. 元素2：3D，互联网的下一个伟大迈进 1.1. 3D的必要性不仅仅是因为它预示着新事物的出现 1.1.1. 为了使人类文化和劳动实现从物理世界向数字世界的过渡，必须借助3D环境 1.2. 用户通过几乎源源不断的高分辨率照片甚至视频来表达自己，其中许多照片和视频都是在旅途中拍摄的 1.2.1. ......
《Span-Based Joint Entity and Relation Extraction with Transformer Pre-Training》阅读笔记
代码 原文地址 预备知识： 1.什么是束搜索算法（beam search）? beam search是一种用于许多自然语言处理和语音识别模型的算法，作为最终决策层，用于在给定目标变量(如最大概率或下一个输出字符)的情况下选择最佳输出。 2.什么是条件随机场（Conditional Random Fi ......
Docker 学习笔记 - 2
操作容器 终止 可以使用 docker container stop 来终止一个运行中的容器。 此外，当 Docker 容器中指定的应用终结时，容器也自动终止。 此外，docker container restart 命令会将一个运行态的容器终止，然后再重新启动它。 进入容器 在使用 -d 参数时， ......
Python中TensorFlow的长短期记忆神经网络(LSTM)、指数移动平均法预测股票市场和可视化|附代码数据
原文链接：http://tecdat.cn/?p=23689 最近我们被客户要求撰写关于LSTM的研究报告，包括一些图形和统计输出。 本文探索Python中的长短期记忆（LSTM）网络，以及如何使用它们来进行股市预测 （ 点击文末“阅读原文”获取完整代码数据）。 在本文中，你将看到如何使用一个被称为 ......
【学习笔记】并查集
并查集是一种树形数据结构。它管理一系列不相交的集合。它支持两种操作： 查询 Find 合并 Union 查询 有一个 fa 数组，里面存放了每个节点的父节点。这样下去，查询一个节点的父节点，再查询它的父节点的父节点，再查询它的父节点的父节点的父节点……我们就可以顺藤摸瓜，通过这个数组来查询这个节点的 ......
《软件工程—实践者的研究方法》读书笔记
《软件工程—实践者的研究方法》这本书内容丰富，从软件工程的定义、软件过程、建模、质量管理到管理软件项目和软件工程发展趋势的探讨，作者逐个展开并做了大量的讲解。内容丰富，当然书也是非常厚。借到这本书之后，一开始没看，一再推迟，大概十一月末才鼓起勇气开始翻阅这本厚厚的书。 这本书不像之前翻阅的软件工程书 ......
【学习笔记】并查集
并查集是一种树形数据结构。它管理一系列不相交的集合。它支持两种操作： 查询 Find 合并 Union 查询 有一个 fa 数组，里面存放了每个节点的父节点。这样下去，查询一个节点的父节点，再查询它的父节点的父节点，再查询它的父节点的父节点的父节点……我们就可以顺藤摸瓜，通过这个数组来查询这个节点的 ......
Golang学习笔记（八）—— 泛型
泛型 泛型是什么？为什么要用泛型？ 在开发中，会有一些复用性很强的功能，它被应用到很多地方，但为了适用会被不断重写，这很低效。例如一个intADD函数，他能进行 int 的加法，假如我们想进行 float 加法，又得重写一个floatADD函数，泛型就是为了解决这个问题而推出的功能。 想要接收多种类 ......
【笔记】wqs 二分
适用范围 wqs 二分可以用来解决类似这样的问题： 令 \(f(x)\) 为恰好使用 \(x\) 次某种操作，求 \(f(p)\)。 \(f(x)\) 具有凸性（图像为上凸或下凸）。 对于一个值 \(k\)，若是下凸壳能较快的求出 \(\min\limits_{i = 1}^n\{f(i) - k\ ......
高级数据结构笔记
树套树 顾名思义，就是一个树套一个树。。。 广义的树套树是指嵌套多层的数据结构。常见的有：线段树套线段树（二维线段树），线段树套平衡树（“二逼平衡树”），分块套平衡树，树状数组套线段树（带修主席树）等等。 在这里，由于 set，map 等 STL 内部实现是平衡树，因此将这些 STL 的嵌套也算作树 ......
支持NVIDIA GPU —— 如何运行docker环境下的Jax环境
项目地址： https://github.com/NVIDIA/JAX-Toolbox 具体的安装命令： 地址： https://github.com/NVIDIA/JAX-Toolbox/pkgs/container/jax linux/amd64 docker pull ghcr.io/nvid ......
深度可分离卷积
深度可分离卷积，使用了一些 trick 极大减少卷积所需参数量和计算量。 理解深度可分离卷积 若需要对 12×12×3 的输入使用卷积，获得 8×8×256 的输出，直接的卷积方法是使用 256 个 5×5×3 的卷积核（无 padding、步长为 1，下同）。此时卷积层的参数量为 19200，卷积 ......
模式识别自学笔记：最小错误率贝叶斯决策
目标：判断特征x属于标签ω1还是ω2 似然度 = 条件概率密度p(x|ωi) * 先验概率p(ωi) 后验概率p(ωi|x) = 条件概率密度 * 先验概率 / 特征向量的概率分布 比较方法一：直接比较分子大小 由于比较后验概率大小时，分母特征向量的概率分布与特征x无关，比较的后验概率的两个分母（特 ......
docker学习笔记
目录基本使用搜索镜像下载镜像列出镜像信息列出容器信息创建并运行容器删除容器进入容器执行命令查看日志容器文件拷贝容器运行和停止run命令详解-p端口对外发布(端口映射)-v数据卷-e设置环境变量--name机器命名--restart容器退出后的重启策略其他镜像详细信息容器详细信息容器内进程数据卷高级d ......
深度学习图像复原之去雨：常用数据集介绍
可能有帮助的链接：https://paperswithcode.com/task/single-image-deraining 合成数据集 Rain100H 出自 CVPR 2017 论文 Deep Joint Rain Detection and Removal from a Single Ima ......
CHAT GPT全称及其发展历程深度剖析
CHAT GPT全称为Conversational Generative Pre-trained Transformer，是一种由OpenAI开发的自然语言处理模型。该模型旨在生成流畅且连贯的对话回复，从而在聊天机器人应用中表现出卓越的性能。 CHAT GPT的发展起始于OpenAI提出的GPT架构 ......
手把手教你在 Windows 环境中搭建 MQTT 服务器
前言 前些天要对接一家硬件商的设备数据，对方使用的 MQTT 协议点对点透传，所以又赶紧搭建 MQTT 服务器，写 .NET 程序接收数据等等，今天分享一下如何搭建 MQTT 服务器。 MQTT 协议是什么？ MQTT（Message Queuing Telemetry Transport）是一种轻 ......
Linux firewalld 防火墙 笔记
Linux 防火墙策略: 严格过滤入站，允许出站 防火墙有两类: 硬件防火墙(可以组成集群保护)，软件防火墙(本机安装的软件，本机防护)。 1.firewalld防火墙服务： Linux默认安装的防火墙系统服务： firewalld防火墙是centos7系统默认的防火墙管理工具，一般是自带的无需安装 ......
oneforall配置环境，报错cannot import name 'sre_parse' from 're' 解决方法
高版本python中re模块没有了sre_parse模块， 可以修改python中的exrex.py 代码，直接导入sre_parse模块 ......
CentOS7 Suricata生产环境部署
一、部署PF_RING step1:安装依赖 [root@localhost ~]# yum install -y flex bison kernel-devel kernel-headers gcc gcc-c++ make wget [root@localhost ~]# git clone h ......
查看虚拟环境中安装包位置
1 确保你已经激活了虚拟环境。你可以在终端或命令提示符中运行虚拟环境的激活命令，例如： 在Windows上，使用以下命令激活虚拟环境： venv\Scripts\activate 在Linux或macOS上，使用以下命令激活虚拟环境： source venv/bin/activate 2 显示当前虚 ......
Window 环境安装Redis ，并配置为开启自启动
前言：本文章只讲解如何在Window 环境下安装以及配置Redis，其它教程会在另外的文章详细介绍。 1、我们先来大致了解一下什么是Redis Redis （全称：REmote DIctionary Server） 是一个由 Salvatore Sanfilippo 写的 key-value 存储系 ......
Kotlin学习笔记——第一天
1. 方法 fun main(){ println("Hello, World!") } fun 方法声明关键字 main() 程序入口 方法体用{}包含 println() 、print() 标准输出方法 2. 变量 任何程序都需要存储数据，变量可以帮助我们做到这一点。在Kotlin中，有两种变量 ......
动手学深度学习v2：数据操作+数据预处理
数据操作 import torch x=torch.arange(12) # x的output为 tensor([0,1,2,3,4,5,6,7,8,9,10,11]) # 可以通过张量的shape属性来访问张量的形状和张量中元素的总数 x.shape # output: torch.Size([1 ......
find 命令笔记
find 命令作用 根据预设条件递归查询文件，当查询一个文件时他会将目录下所有的文件包括子目录全部查询一遍，就算找到了对应文件也不会停止会一直查询到所有文件都查过为止。 命令格式 - find [目标] [条件] [-a|-o] [条件2] # -a(并且) -o(或者) 常见的条件： -type ......
使用docker搭建deepspeed多机多卡分布式微调大模型环境
前置环境：两台可以互通的centos服务器（服务器1、服务器2），docker，NVIDIA驱动 docker创建overlay共享网络 1）选用服务器1作为manage节点进行初始化，执行docker swarm init Swarm initialized: current node (ly4d ......
Springboot 多环境配置、${key:default_value}的作用与使用
多环境配置 方式一 创建多个配置文件 application.yml #主配置文件 application-dev.yml #开发环境的配置 application-prod.yml #生产环境的配置 application-test.yml #测试环境的配置 # application.yml s ......