数据库 笔记 数据mysql

nas硬件选择笔记from天马

硬件选择和Nas系统的选择 系统 收费 厂商 厂商价格系统预估价格优势 群晖 (3289 418PALY) 2389 优化多,适合小白 威联通 (1399TR-004) 499 易用性弱于群晖,性价比高 铁威马 (1033 F4-210) 133 免费 品牌问题 FreeNAS 1.缺少定制app ......
硬件 笔记 from nas

【莫队】【bitset】【数据分治】P5313 [Ynoi2011] WBLT 题解

P5313 看到值域比较,又支持离线,可以想到莫队和桶。 考虑先将桶按 \(b\) 分段,将每段分别进行按位与运算,做完第 \(i\) 段时用于运算的桶全都为 \(0\),就可以直接得到答案。这显然可以用 bitset 优化。但是 STL 的 bitset 不支持分裂操作,所以需要手写。 当 \(b ......
题解 数据 bitset P5313 5313

个人数据存储计划:NAS基础知识

前言# 距离去年国庆入手了NAS至今有好几个月时间了(上一篇文章:NAS开箱),NAS折腾起来有点麻烦,且实际作用因人而异,并没有想象中的好用,所以说好的这个系列一直没有更新~ 还有另一方面的原因,这些NAS的系统基于Linux深度定制,对于我这种习惯用Linux的人来说,用着很别扭不自在,处处受限 ......
基础知识 基础 知识 数据 个人

密码协议学习笔记(1.4):密码学的一些数学基础

数学基础: 抽象代数: 一个算符的代数结构: 幺半群: 数的集合和一个算符构成的代数结构$(G,+)$,且满足 封闭性 结合律 存在恒等元(在群中我习惯这么叫,避免混淆) 群: 满足如下条件的代数结构$(G,+)$: 封闭性 结合律 存在恒等元 对于每个元素均存在逆元 交换群/阿贝尔群: 满足如下条 ......
密码 密码学 数学基础 数学 基础

【大数据】HIVE部署(文档版本)

Mysql 安装配置远程登录 # 更新密钥 rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022 # 安装Mysql yum库 rpm -Uvh http://repo.mysql.com//mysql57-community-rele ......
版本 文档 数据 HIVE

【大数据】MapReduce与YARN 介绍与配置

MapReduce 架构 MapReduce是一种分布式计算模型,用于处理大规模数据集。它将数据分成小块,分配给集群中的节点进行处理。Map阶段处理数据并生成键值对,Shuffle阶段将相同键的值对传输到同一节点进行排序和分组,Reduce阶段对每组键值对执行操作并生成结果。整个过程由Master节 ......
MapReduce 数据 YARN

火山引擎DataLeap一站式数据治理解决方案及平台架构

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 在字节跳动内部,DataLeap数据平台数据治理团队致力于建立一站式、全链路的数据治理解决方案平台。 数据治理的概念 数据治理是一种数据管理的概念,确保组织能在数据的全生命周期中具有高质量的数据质量能力,并且实现对 ......
火山 架构 DataLeap 解决方案 引擎

实验1 C语言开发环境使用和数据类型、运算符、表达式

//打印一个字符小人 #include <stdio.h> int main() { printf(" o \n"); printf("<H>\n"); printf("I I\n"); printf(" o \n"); printf("<H>\n"); printf("I I\n"); retur ......
运算符 表达式 语言 类型 环境

NetCore学习笔记:单元测试和集成测试

前言# 我在使用 AspNetCore 的这段时间内,看了很多开源项目和博客,发现各种 .Net 体系的新技术很多人都有关注和使用,但却很少有人关注测试。 测试是软件生命周期中的一个非常重要的阶段,对于保证软件的可靠性具有极其重要的意义。在应用程序的开发过程中,为了确保它的功能与预期一致,必须对其进 ......
单元 NetCore 笔记

【大数据】Hadoop配置(文档版本)

主机配置: 192.168.88.101 test1 192.168.88.102 test2 192.168.88.103 test3  Hadoop 上传压缩包并且解压 hadoop百度云:链接:https://pan.baidu.com/s/1DRV_x7Q_ZTUO4KMkr2-6Qg? ......
版本 文档 数据 Hadoop

numpy 多维数据的理解(三维数据,更多维度)

numpy 多维数据的理解(三维数据,更多维度) In [22]: a = np.array([[11, 12, 13, 14, 15], ...: [16, 17, 18, 19, 20], ...: [21, 22, 23, 24, 25], ...: [26, 27, 28 ,29, 30], ......
数据 维度 更多 numpy

如何在ipad上对pdf做笔记

在iPad上做笔记,您可以按照以下步骤: 1.选择一个文本编辑应用程序,如GoogleDocs、GoodNotes、Notability或OneNote。 2.打开文本编辑器应用程序,并在其中输入要记录的文本。 3.点击文本编辑器应用程序的“标记”(菜单)图标。 4.从弹出的菜单中,选择“注释”选项 ......
笔记 ipad pdf

数据结构

创建一个线性表 #define MAXSIZE 100 typedef struct { ElemType *elem; int length; } SqlList; Status InitList_Sq (SqlList & L) { // 构造一个空的顺序表 L.elem = new ElemT ......
数据结构 结构 数据

Java 学习笔记

Java 学习笔记 dos 环境下(Windows 即 cmd)的 Java 命令 先用javac 文件名.java;命令,编译 java 文件,生成一个后缀为 class、名与类名相同的文件。 再用java 类名命令,执行文件。 当类名前的修饰符为 public 时,类名必须和源文件名一致。并且以 ......
笔记 Java

TCP Socket 数据发送和接收时进制转换

确实经过了转换:十六进制--》十进制--》ASCII字符 十六进制的 61,对应十进制的 97,对应ASCII字符a https://blog.csdn.net/cybersnow/article/details/88079026 C# 代码: // 16进制字符串转字节数组 格式为 string ......
进制 数据 Socket TCP

JAVA学习笔记1

private 封装 extends继承 编译类型是爷爷 多态 点击查看代码 package com.hspstudy.Test1; public class Extend_ { public static void main(String[] a) { GraFather graFather = ......
笔记 JAVA

JS异步笔记

Promise 最早接触异步是在.net中,当时还是比较流行使用基于控件的BackgroundWorker,其自身通过子线程的方式来异步处理一些情况,并且封装了一些功能与主线程通信。后来,开始使用Thread,再后来,因为Thread的性能与生成数量的不可控,使用了ThreadPool,再后来,出现 ......
笔记

【python笔记】虚拟环境

1. 虚拟环境的建立 python -m venv <虚拟环境名> # 例如: python -m venv my_venv 2. 虚拟环境的激活与去激活 激活 cd 到虚拟环境文件夹下的Scripts,在终端执行activate 去激活 cd 到虚拟环境文件夹下的Scripts,在终端执行deac ......
环境 笔记 python

请教大佬数据量大导致的慢sql问题

业务:查询近一个月的数据办结情况 现象:数据量大接口响应慢(10多秒),导致sql connection timed out,有时候又能正常返回 请教如何优化该sql 或是 解决超时问题。尝试过修改数据库的timeout时长,无效 ......
数据 问题 sql

MySQL innoDB 间隙锁产生的死锁问题

线上经常偶发死锁问题,当时处理一张表,也没有联表处理,但是有两个mq入口,并且消息体存在一样的情况,频率还不是很低,这么一个背景,我非常容易怀疑到,两个消息同时近到这一个事务里面导致的,但是是偶发的,又模拟不出来什么场景会导致死锁,只能进行代码分析,问题还原的方式去排查问题。 ......
间隙 innoDB 问题 MySQL

数据泵(impdb)导入Oracle分片的数据库dump文件

数据泵(impdb)导入Oracle数据库 一.sqlplus登录目标数据库,创建导入的目录路径 #该目录要在导入的数据库本机建立,如果是docker就在容器内部创建 create directory data_dir as '/home/oracle/prd_imp/prd_dump'; data ......
数据 数据库 文件 Oracle impdb

jdbc-批量插入mssql数据库-原

package com.swift.aaa; import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.SQLException; imp ......
数据库 数据 mssql jdbc

三维模型3DTile格式轻量化的数据压缩与性能平衡关系分析

三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作,从而实现三维模型轻量化。轻量化压缩比大,模型轻量化效率高,自动化处理能力高;采用多种算法对三维模型进行几何精纠正处理,精度高,... ......
模型 性能 格式 数据 3DTile

多数据源管理:掌握@DS注解的威力

大家在日常后端开发过程,不可避免的会接触到需要用到配置多个数据源的场景,在这里,小编介绍一种简单方便的,只需要简单的配置和一个@DS注解就能实现动态数据源的方式,这种动态数据源底层原理是基于Mybatis-plus来实现的。 ......
数据源 注解 威力 数据 DS

服务器没有开放3306端口 远程访问MySQL数据库方法

一、前言 ​ 当装有MySQL的服务器为了防止数据库被黑,提高安全性,把3306端口禁止掉,禁止对外访问,我之前写过一篇是借助跳板机的SSH隧道来访问实现安全,这种情况依然需要开放3306端口和使用一个额外的跳板机,比较麻烦,后来,突发奇想,直接使用MySQL所在服务器来做SSH隧道,并且使用loc ......
端口 服务器 数据库 方法 数据

【爬虫实战】用python爬小红书某话题的笔记,以#杭州亚运会#为例

用Python采集抓取小红书指定话题下的笔记数据,字段包含:笔记标题,笔记id,笔记链接,作者昵称,作者id,作者链接,发布时间。 ......
爬虫 亚运会 实战 话题 笔记

数据链路层的关键技术实现

1. 链路建立与释放通过异步协议建立和释放点对点的链路。典型协议有PPP协议。 2. 封装成帧在网络层传下来的IP数据报上加上目标MAC地址、源MAC地址等字段构成帧。 3. 差错检测通过增加CRC码来实现对帧中比特差错的检测。 4.流量控制通过滑动窗口机制来进行流量控制,防止过快发送帧导致溢出。 ......
链路 关键 数据 技术

《流畅的Python》 读书笔记 231007(第二章第一部分)

第2章 数据结构 ABC语言是Python的爸爸~ 很多点子在现在看来都很有 Python 风格:序列的泛型操作、内置的元组和映射类型、用缩进来架构的源码、无需变量声明的强类型 不管是哪种数据结构,字符串、列表、字节序列、数组、XML 元素,抑或是数据库查询结果,它们都共用一套丰富的操作:迭代、切片 ......
第一部 第二章 笔记 Python 231007

jdbc-批量插入百万数据-5秒

package com.swift.aaa; import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.SQLException; imp ......
数据 jdbc

人事管理系统 SpringBoot2+MyBatis+MySQL5.7

人事管理系统 一、系统介绍 本系统为人事管理系统,系统分为七大模块:绩效考核,招聘管理,档案管理,工资管理,考勤管理,培训管理,系统管理。 可满足小企业日常办公。本系统最大特色是有强大和灵活的权限控制功能,所有菜单,按钮功能均可由管理通过配置来控制。 系统默认有四个角色:管理员,财务专员,人事专员, ......