工具 数据mysql shell
Mysql5
title: Mysql5.7 MGR模式 date: 2022-08-26 tags: Linux Mysql MGR categories: 运维 数据库 Mysql MGR同步 keywords: 'Linux,Mysql,MGR' description: Mysql5.7 MGR模式 co ......
关于Mysql中文字段的排序
发表这个帖子是因为产品的一个需求，按照名称首字母正序排序。 目前所有的库默认的字符集都是utf8mb4, 排序规则是utf8mb4_general_ci，这种排序规则不支持按中文的拼音首字母排序而GBK字符集基本是按照汉字的拼音码进行编码的，所以这里想到了用转换字符集的方式来处理这个问题。目前想了两 ......
CentOS安装Mysql5
title: CentOS安装Mysql5.7 date: 2022-08-14 17:45:50 tags: Linux CentOS Mysql categories: 运维 数据库 Mysql keywords: 'Linux,CentOS,Mysql' description: CentOS ......
迁移数据从A表到B表
1.写一个异步线程，同步数据from a -> b2.比对数据的差异性select b.* from A a right join B b on a.xx_id = b.xx_id and b.is_deleted = 0 where a.xx_id is null and b.xx_id is n ......
Mysql开启日志
title: Mysql日志 date: 2022-09-7 tags: Linux Mysql 日志 categories: 运维 数据库 Mysql 日志 keywords: 'Linux,Mysql,日志' cover: https://qiufuqi.gitee.io/img/hexo/20 ......
Docker安装Mysql
title: Docker安装Mysql date: 2022-09-11 tags: Linux Docker Mysql categories: 运维 Docker Mysql keywords: 'Linux,Docker,Mysql' cover: https://qiufuqi.gitee ......
Quicker快速开发，简单的网页数据爬取（示例，获取天眼查指定公司基础工商数据）
前言 有某个线上项目，没有接入工商接口，每次录入公司的时候，都要去天眼查、企查查或者其他公开数据平台，然后手动录入，一两个还好说，数量多了的重复操作就很烦，而且，部分数据是包含超链接，一不注意就点进去，又多了一个步骤。 因此，我就用Quicker写了一个数据抓取脚本，用来抓取一些公开的工商数据，逻辑 ......
Excel同一工作簿中引用不同sheet数据，点击后引用失效
电源时序sheet中要引用电源质量sheet中的B6单元格数据， 鼠标点击之后，电源时序sheet中的数据就变成了=电源质量!B6，且不能恢复为ABCD。如下 原因：单元格格式不能是文本，只能是常规。引用才能一直有效。 ......
CSAPP-Shell Lab
提供的工具： parseline：获取参数列表char **argv，返回是否为后台运行命令（true）。 clearjob：清除job结构。 initjobs：初始化jobs链表。 maxjid：返回jobs链表中最大的jid号。 addjob：在jobs链表中添加job deletejob：在j ......
Python工具箱系列(二十九)
MongoDB号称文档数据库，是目前发展迅速的NoSQL数据库。它由C++语言编写，旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。MongoDB... ......
mySQL面试题
MySQL面试题 1.InnoDB索引和MyISAM索引的区别是什么？ InnoDB的索引的索引在存储的时候，他的索引是和数据是存储在一个文件里的，MyisAm的索引是另外的一个文件，和数据不是在一个文件里。 索引文件所对应的B+树的最叶子结点记录的数据有所区别，InnoDB里是存储的数据行的Id， ......
mysql8主从复制（一主三从） docker
一、准备挂载文件 为了将配置文件在宿主机做挂载，先运行测试镜像拷贝配置文件 1、拉取镜像 docker pull mysql:8.0.26 2、创建测试容器mysql-demo docker run -it -p 3300:3306 \ --name mysql-demo \ -e MYSQL_RO ......
mongo-listener: 监听 mongo 数据变化的一个应用程序相关设计
mongo-listener 为了开放一些数据库变更信息, 需要监听数据库的数据变更, 之后将信息投递到信息队列中, 开放对应的端口, 供其他系统订阅. mongo 数据变更监听 对于数据库信息的变更, 或者说是数据异构, 也就是当数据源数据变更时, 另一个数据源可以接收到相关的变更信息进行处理, ......
mysql关联表查询最新的数据
mysql关联表查询最新的数据 select it.name,ns.id,it.id childId,it.id_card idCard,it.card_type cardType,it.birthday,ns.guardian guardian,ns.mother_phone motherPhon ......
MySQL-ACID与事务隔离级别
MySQL-ACID与事务隔离级别 1. 事务的概念 数据库的事务是并发控制的基本单位，是指逻辑上的一组操作，要么全部执行，要么全部不执行。中间任何一个操作出现错误, 都会回滚(rollback)到数据最初的安全状态, 以保证不会对系统数据库造成错误的改动。 事务有如下几个特点： 原子性（Atomi ......
制作房贷利息计算工具
from decimal import Decimal from pickle import GLOBAL from easygui.boxes.derived_boxes import enterbox from prettytable import PrettyTable import copy ......
阿里又开源一款数据同步工具 DataX，稳定又高效，好用到爆！
作者：愿许浪尽天涯 链接：https://juejin.cn/post/7077744714954309669 前言 我们公司有个项目的数据量高达五千万，但是因为报表那块数据不太准确，业务库和报表库又是跨库操作，所以并不能使用 SQL 来进行同步。当时的打算是通过 mysqldump 或者存储的方式 ......
自定义动态数据源
1.思路 1）自定义一个注解 @DataSource，该注解可以加在service层方法或者类上面，表示该方法或者类中的所有方法都是用某一个数据源。 2）如果某个方法上或类上有 @DataSource 注解，将该方法或类需要使用的数据源名称存入到ThreadLocal。 3）自定义切面，在切面中解析 ......
大数据之—dolphinscheduler海豚调度
前言 本文参考：https://blog.csdn.net/zhengzaifeidelushang/article/details/127841043 参考：https://blog.csdn.net/shuyv/article/details/128847853 参考：https://blog. ......
数据仓库SQL代码规范
1.命名规则： 数据库、表、列、索引等名称应使用有意义、易于理解和记忆的命名方式。 应使用小写字母和下划线，避免使用大写字母和特殊字符。 应避免使用保留字和关键字作为名称，或在名称前加上特定前缀或后缀以避免与保留字冲突。 2.编码风格： 应使用一致的缩进、空格、换行等格式规范，以提高代码的可读性。 ......
Mysql常用语法详解
一、数据库 创建数据库 create database 数据库名; 查询所有数据库 show databases; 查看正在创建的数据库信息 show create database 数据库名; 删除数据库 drop database 数据库名; 使用数据库 use 数据库名; 二、表 创建表 cr ......
Redis保证缓存数据和数据库一致
1 Redis 在分布式环境下的数据一致性主要是通过以下几种方式来保证的： 主从复制：Redis 支持主从复制，当主节点有新的数据写入时，会自动同步到从节点，从节点与主节点的数据保持一致。 Sentinel 哨兵：Redis Sentinel 哨兵是 Redis 的高可用性解决方案，通过监控主节点的 ......
审查人员进行数据仓库SQL代码审查的指南
代码规范：审查人员需要确保SQL代码符合团队的代码规范。这包括代码缩进、代码注释、命名规则等。 SQL性能：审查人员需要检查SQL查询的性能。这包括检查是否使用了索引、是否存在冗余计算、是否使用了正确的连接方式等。 SQL正确性：审查人员需要检查SQL语句的正确性，确保SQL语句执行不会引发错误或意 ......
数据仓库是一个用于存储和管理企业数据的中央存储库，因此需要确保其中的代码质量。以下是几种保证数据仓库代码质量的方法：
代码审查：在数据仓库开发过程中，通过对代码的定期审查来检查潜在的错误和问题，并确保代码符合团队的开发标准和最佳实践。 自动化测试：实现自动化测试是确保代码质量的关键，包括单元测试、集成测试和端到端测试。这些测试可以检测代码的可靠性、性能和安全性等方面的问题，同时还可以快速检测到任何潜在的问题。 代码 ......
Vue2可以检测 引用数据类型 数组的响应式变化
在Vue2中，响应式基于Object.defineProperty实现的响应式，官方文档中明确说明 Vue 不能检测以下数组的变动： 当你利用索引直接设置一个数组项时，例如：vm.items[indexOfItem] = newValue 当你修改数组的长度时，例如：vm.items.length ......
几种高效的方法来进行数据仓库的code review
制定标准和规范： 在开发数据仓库的过程中，制定统一的代码规范和标准，确保所有开发人员都能按照这些规范和标准进行代码开发。这些标准和规范可以包括SQL语法、代码注释、命名规则、代码结构等。 审查指南： 在进行code review时，可以提供一份指南来帮助审查人员进行审查。这份指南可以列出常见的错误类 ......
MySQL创建数据库（CREATE DATABASE语句）
在 MySQL 中，可以使用 CREATE DATABASE 语句创建数据库，语法格式如下： CREATE DATABASE [IF NOT EXISTS] <数据库名> [[DEFAULT] CHARACTER SET <字符集名>] [[DEFAULT] COLLATE <校对规则名>]; [ ......
ArcMap将Python写的代码转为工具箱与自定义工具
本文介绍在ArcMap软件中，通过已有的Python脚本程序，建立新的工具箱并在其中设置自定义工具的方法。 通过本文介绍的操作，我们便可以实现将自己的Python代码封装，并像其他ArcGIS已有工具一样，进行界面化的地理处理操作。 话不多说，我们开始具体操作。首先，在ArcMap中打开“ArcTo ......