数据库 笔记 数据mysql
14-Mysql主从复制
一、mysql复制原理 1.1 主从复制原理过程 从库的I/O thread 线程会读取master info 文件 获取主库的 user,password port信息然后还会获取上次获取主库二进制日志的位置 如3640 就是00003这个文件640这个位置，主库收到从库的请求后，会验证用户名密码 ......
12-Mysql的日志管理
一、mysql常见日志 二、错误日志 配置方法: [mysqld] log-error=/data/mysql/mysql.log 查看配置方式： mysql> show variables like '%log%error%'; 作用： 记录mysql数据库的一般状态信息及报错信息，是我们对于数据 ......
面试官：MySQL 到底是 join 性能好，还是 in 一下更快呢？被问懵逼了…
来源：https://juejin.cn/post/7169567387527282701 先总结： 数据量小的时候，用join更划算 数据量大的时候，join的成本更高，但相对来说join的速度会更快 数据量过大的时候，in的数据量过多，会有无法执行SQL的问题，待解决 事情是这样的，去年入职的新 ......
11-MySQL 存储引擎
MySQL 存储引擎 可以理解为，MySQL的“文件系统”，（插件形式存在）只不过功能更加强大。mysql提供的存储引擎有InnoDB、MyISAM等 TokuDB 是第三方的存储引擎moardb，数据压缩比打，写入数据快，如果你的应用是读多写少的情况强烈建议使用此存储引擎 innodb存储引擎的功 ......
09-MySQL 索引管理及执行计划
一、mysql索引类型 BTREE:B+树索引 （常用） HASH：HASH索引 FULLTEXT：全文索引 RTREE：R树索引 二、索引分类 主键索引 普通索引*** ** 唯一索引 三、索引基本管理 创建和删除： alter table stu add index idx_name(stu_n ......
07-数据类型
四种主要类别： – 数值类型 – 字符类型 – 时间类型 – 二进制类型 数据类型的ABC 要素： – Appropriate（适当） – Brief（简洁） – Complete（完整） 一、 数值数据类型 使用数值数据类型时的注意事项： 数据类型所表示的值的范围 – 列值所需的空间量 – 列精度 ......
08-Informatica_schema获取元数据
数据库的元数据即数据库对象的数据，如表，库，的属性数据等，存放在informatica——schema数据库中，已虚拟表的形式存在，只能读不能写 一、 获取元数据的方法 查询INFORMATION_SCHEMA 数据库表。 其中包含MySQL数据库服务器所管理的所有对象的相关数据 使用SHOW 语句 ......
04-Mysql多实例
多实例就是多套线程和多各进程和多个预分配的内存结构 配置思路 启动多个mysqld进程 规划多套数据 规划多个端口 规划多套日志路径 配置例子 1、创建多套目录 mkdir -p /data/330{7,8,9} 2、准备多套配置文件 vi /data/3307/my.cnf [mysqld] ba ......
05-Mysql 用户管理
一、MySQL用户管理 用户定义： user 主机范围 使用某个用户 从哪个（些）地址访问我的数据库 用户的功能： 1、用来登录mysql数据库 2、用来管理数据库对象（库、表） 权限 功能：针对不同用户设置对不同对象管理能力 select update delete insert create d ......
03-MySQL基本管理
一、数据库连接管理 mysql -uroot -poldboy123 # 隐藏条件-S 默认socket方式 mysql -uroot -poldboy123 -h 10.0.0.52 -P 3308 #tcp/ip的方式 mysql -uroot -poldboy123 -S /applicati ......
02-Mysql体系结构
一、 MySQL服务器连接模型 2、应用程序如何连接到mysql 2.1 tcp/ip的方式 mysql -uroot -poldboy123 -h 10.0.0.200 2.2 套接字的方式 mysql -uroot -poldboy123 -S /tmp/mysql.sock 二、MySQL服务 ......
在windows下安装mysql 8.1
1、下载并解压 官网下载mysql8,https://dev.mysql.com/get/Downloads/MySQL-8.0/mysql-8.0.11-winx64.zip 解压到D:\mysql， 以下称为根目录 2、编写配置文件 在根目录下新建my.ini文件， 配置以下内容 [mysqld ......
莫队学习笔记
前置知识：分块 莫队是非常好的数据结构，可以离线解决很多序列问题 当对于一个查询\([l,r]\)可以\(O(1)\)转移到\([l-1,r],[l+1,r],[l,r-1],[l,r+1]\)时可以考虑用(普通)莫队 莫队先读入所有的询问,接着离线对于所有询问区间 \([l,r]\) , 用 \( ......
01-Mysql介绍及安装
关系型数据库的特点 二维表 典型产品Oracle传统企业，MySQL是互联网企业 数据存取是通过SQL 最大特点，数据安全性方面强（ACID） • NoSQL：非关系型数据库（Not only SQL） 不是否定关系型数据库，做关系型数据库的的补充 想做老大，先学会做老二 • NoSQL特性总览 – ......
Mysql tls 会话：再一次抓包之后，我认识到…
本文分享自华为云社区《有些事你只有抓包才知道之mysql tls会话》，作者：张俭。 你的mysql客户端和服务端之间开启tls了吗？你的回答可能是No，我根本没开启mysql的tls。 可是当你抓取了3306 mysql的端口之后，你会发现，抓出来的包里居然有Client Hello、Server ......
数据可视化结合2D地图能够给我们带来什么样的变化？
在信息时代，数据可视化与2D地图的结合为我们的生活和工作带来了深刻的变革。这一强大的组合不仅为我们提供了全新的视角，更为各行各业的发展和决策提供了更为精准的指导。下面我就以可视化从业者的视角，来简单聊聊数据可视化和2D地图的结合。 首先，结合2D地图的数据可视化为城市规划和管理等带来了变化。通过将各 ......
大数据搬迁方案简单实践 _tyt2023
本实验以通过华为云CDM服务进行数据迁移为例，介绍如何将其他Hadoop集群的历史数据迁移至华为云MRS中，以便获取MRS云服务的诸多特性。 本迁移指导将指导适用于多种不同场景下的HBase、Hive数据向MRS集群的迁移工作。由于数据迁移过程中可能存在数据覆盖、丢失、损坏等风险，因此本指导只作为实 ......
Go语言编程教程-基本数据类型
课程要点 了解布尔类型 了解整数类型 了解浮点数类型 了解复数类型 了解字符串类型 了解字符类型 布尔类型 类型 名称 取值范围 说明 bool 布尔类型 true或false 默认值为false 示例 ok := true println(ok) 整数类型 类型 名称 取值范围 说明 uint8 ......
精彩回顾｜【ACDU 中国行·西安站】数据库主题交流活动成功举办！
2023年12月23日下午，【ACDU 中国行·西安站】圆满落幕。围绕「数据库技术发展及实践」主题这一主题，六位数据库资深学者及专家从数据库系统平台、数据库应用及实践等热点话题进行分享，与会观众踊跃发言、各抒已见，十分热闹。 ......
【python爬虫课程设计】大数据分析———不同车辆类型不同零件的城市道路油耗、高速公路油耗、二氧化碳排放量数据分析
一、选题背景 随着社会经济的发展和人们生活水平的提高，汽车已经成为现代化生活中不可或缺的交通工具之一。同时，环保意识的提高也给汽车产业带来了新的挑战，例如减少汽车的油耗和减少尾气排放。 在这样的背景下，通过分析不同车辆类型的城市道路油耗、高速公路油耗和二氧化碳排放量数据，可以帮助我们更好地了解不同车 ......
后端技术：Redis进行数据缓存的两种方法
在fastapi项目中Redis进行数据缓存的两种不同的方法的demo 第一种方法：通过FastAPI应用状态 准备文件：models/redis.py为fastapi的数据库模型文件 import os import aioredis from aioredis import Redis asyn ......
flink 的安装以及fink-cdc 基于多数据源导入的es 的简单使用
此文档是参照flink-cdc 文档( https://ververica.github.io/flink-cdc-connectors/master/content/快速上手/mysql-postgres-tutorial-zh.html) 案例 的最佳实践 1.下载flink release 最 ......
【Python】将xlsx表格中的特定数据标红
原表格是这样： 将姓名为“韩立“，年龄大于14的标红 import openpyxl from openpyxl.styles import Font workbook = openpyxl.load_workbook(r"C:\Users\PC\Desktop\PYTHON项目\01.xlsx") ......
nacos2.3数据库兼容postgresql
简介：nacos默认支持数据库是mysql，但是我们是pg为主要数据库，所以，将pg作为持久层会更好 一、nacos官网 1、nocos 文档地址：https://nacos.io/zh-cn/2、源码下载地址：https://github.com/alibaba/nacos/releases/ta ......
PostgreSQL数据库中插入数据并跳过重复记录
概述：ON CONFLICT 是将新数据插入现有表时处理唯一性冲突的一种方式 快速预览 1. DO UPDATE SET: 重复则更新 2. DO NOTHING: 重复则跳过 先创建表t_daily_stats、并且主键字段由serial_no、date组成，以及其他字段 -- 创建设备每日统计表 ......
Mysql根据字段值的长度查找过滤，排序等
Mysql根据字段值的长度查找过滤，排序等 http://www.shanhubei.com/archives/5882.html 1.Mysql 根据字段的指定长度搜索过滤 SELECT * FROM user WHERE is_deleted= 0 AND length(name) > 52.添 ......
数据可视化是如何做到在各行各业中都发挥重要作用的？
在信息时代的浪潮中，数据无疑成为推动各行各业发展的引擎。而数据可视化作为数据处理与表达的有力工具，其在各个领域发挥的重要作用日益凸显，成为推动创新、提高效率的关键因素。下面我就从可视化行业从业者的角度，简单聊聊这个问题。 首先，数据可视化通过图表、图形等直观形式呈现复杂的数据，使得信息一目了然。在商 ......
postgresql socket读数据返回-1
如下所示： { n = secure_raw_read(port, ptr, len); // pg的socket读是非阻塞读，所以返回-1不影响，后面等到socket可读之后继续读。见下文socket返回值解释 waitfor = WL_SOCKET_READABLE; } /* In block ......
IntelliJ IDEA 数据访问工具配置 Caché/M 数据库系统
首先打开 IntelliJ IDEA 的数据库访问工具，然后在数据源中选择： 其他下面的 InterSystems IRIS 数据源。 配置数据库驱动 默认情况下的数据驱动给了 9091，这个端口是不对的。 IRIS 的数据库端口应该是 1972。 如果你使用的是默认的数据库安装，那么可以参考下面的 ......
Nuscenes数据集浅析
Nuscenes主要在波士顿和新加坡进行，用于采集的车辆装备了1个旋转雷达（spinning LIDAR），5个远程雷达传感器（long range RADAR sensor）和6个相机（camera） 一、数据集结构：（借用https://zhuanlan.zhihu.com/p/46353705 ......