mysql日志

flume传输日志文件到hdfs笔记

1、flume官网 https://flume.apache.org/ 2、安装kerberos客户端 由于我在hdfs开启了kerberos认证,所以要先装kerberos客户端: yum install krb5-devel krb5-workstation -y再将kerberos serve ......
文件 笔记 flume 日志 hdfs

mysql数据库的锁-select for update

# 乐观锁与悲观锁 乐观锁和悲观锁只是两个加锁的思路,其实现方式多种多样。以下举几个在mysql数据库中的例子。 对于一次的数据修改,我们可以大概将其分为三步: 1. 获取数据 2. 修改数据 3. 提交修改 ## 乐观锁 假设A、B两个角色对数据进行修改: - 乐观锁对数据保持一个乐观态度(大概率 ......
数据库 数据 select update mysql

Mysql Workbench的CSV数据导入

首先新建一个数据库和要从.csv导入数据的表,注意数据格式的选取。 然后将CSV文件用NOTEPAD++打开,将文件格式转换为UTF8.具体操作为: ![img](https://img2023.cnblogs.com/blog/3203736/202306/3203736-202306061729 ......
Workbench 数据 Mysql CSV

更改MySQL 5.7的数据库的存储位置

操作系统:Windows 10 x64 MySQL安装包版本:mysql-installer-community-5.7.17.0 参考:MySQL 5.7版本的安装使用详细教程+更改数据库data的存储路径 默认情况下,数据库存放在C:\ProgramData\MySQL\MySQL Server ......
位置 数据库 数据 MySQL 5.7

MySql导出存储过程、事件、触发器等

一、 导出数据库表结构(不包含数据)导库语句: mysqldump -h localhost -uroot -pFingard@1@# --routines --events --triggers -d atsdb > /data/atsdb_20220909_str.sql 参数解释: -h lo ......
触发器 过程 事件 MySql

(转)直击痛点,详解 K8s 日志采集最佳实践

原文:https://developer.aliyun.com/article/749468 导读:上一篇文章主要介绍 Kubernetes 日志输出的一些注意事项,日志输出最终的目的还是做统一的采集和分析。在 Kubernetes 中,日志采集和普通虚拟机的方式有很大不同,相对实现难度和部署代价也 ......
痛点 日志 K8s K8 8s

Postgresql,MySQL, SQL Server 的多表连接(join)update 操作

数据库更新时经常会 join 其他表做判断更新,PostgreSQL 的写法与其他关系型数据库更有不同,下面以 SQL Server, MySQL,PostgreSQL 的数据库做对比和展示。 先造数据源。 create table A(id int, city varchar(20)); crea ......
Postgresql Server update MySQL join

(转)常见日志收集方案及相关组件

原文:https://www.cnblogs.com/hujinzhong/p/15005523.html 一、常见日志收集方案 1.1、EFK ​ 在Kubernetes集群上运行多个服务和应用程序时,日志收集系统可以帮助你快速分类和分析由Pod生成的大量日志数据。Kubernetes中比较流行的 ......
组件 常见 方案 日志

mysql日志

# mysql三大日志 ## redo log **redo组成**:表空间号+数据页号+偏移量+修改数据长度+具体修改的数据 `redo log` 它是物理日志,记录内容是“**在某个数据页上做了什么修改**”,属于 `InnoDB` 存储引擎特有。 mysql的数据是以页为单位的,当我们查询数据 ......
mysql 日志

mysql的ROUND、TRUNCATE函数

在MySQL中,可以使用ROUND函数对数字进行四舍五入并保留指定位数的小数,语法如下: `ROUND(number, decimals)` 其中,number参数表示要进行四舍五入的数字,decimals参数表示要保留的小数位数。 例如,要对数字3.1415926进行四舍五入并保留两位小数,可以使 ......
函数 TRUNCATE mysql ROUND

Linux 日志收集器:syslog,syslog-ng,rsyslog

### 一 参考:https://www.cnblogs.com/zhaoyong631/p/14441090.html 基本上,它们都是相同,它们都允许在中央存储库中记录来自不同类型系统的数据。 但是它们是三个不同的项目,每个项目都试图通过更多的可靠性和功能性来改进前一个项目。 ### 二 参考: ......
syslog syslog-ng rsyslog Linux 日志

mysql-窗口函数

转:https://zhuanlan.zhihu.com/p/456560406 什么是 窗口 --窗口对于group分组和聚合函数等,窗口是固定的,就是每一组,比如想知道每个学生的平均成绩,指定的组就是每个学生的id,聚合函数在这个id划定的窗口内对所有记录进行计算。这是静态窗口,窗口内的记录相互 ......
函数 mysql

Mysql三大范式

**第一范式** 原子性:保证每一列都不可再分 **第二范式** 满足第一范式,每张表只描述一件事情 **第三范式** 满足第一、第二范式,保证数据表中的每一列数据都和主键相关,而不能间接相关 **注意:规范性和性能应该合理取舍** 性能问题:满足查询的表关联不得超过3张,因此可以适当给某些表增加冗 ......
范式 三大 Mysql

字符集问题(mybatis 插入mysql中文乱码,入参是中文)

1. 启动/停止/重启/状态 service mysqld start service mysqld stop service mysqld restart service mysqld status mysqld 是守护进程脚本,init.d 不是mysql的home 2. home/进入控制台 ......
字符集 乱码 字符 mybatis 问题

canal+RabbitMQ实现Redis与Mysql解决双写一致性

# canal+RabbitMQ实现Redis与Mysql的数据最终一致性问题 ## 配置mysql(windows版本) ![image-20230603221946517](https://img2023.cnblogs.com/blog/2415626/202306/2415626-20230 ......
一致性 RabbitMQ canal Mysql Redis

mysql 存储过程

存储过程是一组特定的语句合计, 为实现某种特定的功能。编译后存贮在字典中。 因为的多条语句集合后执行,为了避免与sql语句的结束符;冲突而逐条执行,创建之前要申明存储过程需要使用的分隔符。 delimter $$ #定义分隔符为$$ ………… $$ #执行delimiter; #执行后结束符修改为; ......
过程 mysql

浅谈mysql索引类型(normal、unique、full textl) 的区别和使用场景

mysql索引类型 mysql索引类型normal,unique,full text的区别是什么? normal:表示普通索引 unique:表示唯一的,不允许重复的索引,如果该字段信息保证不会重复例如身份证号用作索引时,可设置为unique full textl: 表示 全文搜索的索引。 FULL ......
索引 场景 类型 normal unique

Mysql数据库-事务操作

mysql 中默认级别 Repeatable read。 另外需要注意的是 mysql 执行一条查询语句默认是一个独立的事务,所以看上去效果跟 Read committed 一样。 通过Navicat中每建立一个查询,默认是一个独立的事务,会恢复默认级别:Repeatable read ```mys ......
事务 数据库 数据 Mysql

yum安装MySQL

########################################### 一、安装yum源 下载地址:https://dev.mysql.com/downloads/repo/yum/ rpm -ivh mysql80-community-release-el7-7.noarch.rp ......
MySQL yum

MySQL用户与权限管理

一:用户管理 1:登录MySQL服务器 我们在安装完MySQL以后,就会通过root用户进行登录;那么root该怎么登录呢?所以我们启动MySQL服务后,可以通过mysql命令来登录MySQL服务器 基本语法:mysql <-u username> <-p> [password] [-h hostn ......
权限 用户 MySQL

mysql utf-8 utf-8mb4字符集有哪些具体的区别

在 MySQL 中,UTF-8 和 UTF-8mb4 都是针对 Unicode 字符集的编码方式。它们之间的主要区别在于能够存储的字符范围不同。 UTF-8 编码使用 1 到 4 个字节来表示字符,其中大部分字符只需要 1 到 3 个字节,而只有一小部分需要 4 个字节来表示,这些字符包括一些较新的 ......
字符集 字符 mysql 8mb utf

自定义logger写入日志到kafka中

# 1.引入开源组件logback-kafka-appender ```xml com.github.danielwegener logback-kafka-appender 0.2.0-RC2 ch.qos.logback logback-classic ``` # 2.logback-sprin ......
logger kafka 日志

Linux - 安装mysql

下载 https://downloads.mysql.com/archives/community/ 根据自己的 linux,选择 mysql 版本,我用的是 Alibaba Cloud Linux 3.2104 LTS 64 位,选择:mysql-8.0.32-linux-glibc2.12-x8 ......
Linux mysql

hj_mysql主从配置

一主一从 mysql8.0.32版本; podman pull mysql:8.0.32 # 创建对应目录,配置my.cnf文件.文件示例在后面~ # 然后启动容器 podman run -d --privileged=true \ --name mysql_8.0.32_3308 -p 3308: ......
主从 hj_mysql mysql hj

Mysql中如何去除重复数据,只保留一条。

1、如果没有主键,则新增自增主键: -- 改变表结构,增加名为id的列 ALTER TABLE emp add id int first; -- 将id字段设置为主键自增; ALTER table emp MODIFY id int PRIMARY key auto_increment; 2、根据n ......
数据 Mysql

mysql语句函数给时间添加指定时间间隔

DATE_ADD() 函数向日期添加指定的时间间隔。 //date 日期表达式。expr 添加的时间间隔。 DATE_ADD(date,INTERVAL expr type) 例如:对获取到的支付时间添加5分钟 select o.order_id orderId, date_add(o.pay_ti ......
时间 语句 函数 mysql

一个MYSQL监控与CONNECTION_CONTROL引起的问题

[[toc]] # 适用范围 mysql 任何版本 # 问题概述 客户反应我们监控工具占用了太多连接,已出现连接数告警,影响生产环境了,总共最大连接数为1000,我们监控软件达到800多! 如下: ![](https://img2023.cnblogs.com/blog/1402942/202306 ......

MySQL如何查询B+树高以及树能存放多少数据

来源: https://blog.csdn.net/Hmj050117/article/details/121349435 ......
数据 MySQL

基于 log4j2 插件实现统一日志脱敏,性能远超正则替换

# 前言 [金融用户敏感数据如何优雅地实现脱敏?](https://mp.weixin.qq.com/s/ljChFiNLzV6GLaUDjehA0Q) [日志脱敏之后,无法根据信息快速定位怎么办?](https://mp.weixin.qq.com/s/tZqOH_8QTKrD1oaclNoewg ......
正则 插件 性能 log4j2 日志