数据库 笔记 数据mysql
迁移数据从A表到B表
1.写一个异步线程，同步数据from a -> b2.比对数据的差异性select b.* from A a right join B b on a.xx_id = b.xx_id and b.is_deleted = 0 where a.xx_id is null and b.xx_id is n ......
Mysql5
title: Mysql5.7 MGR模式 date: 2022-08-26 tags: Linux Mysql MGR categories: 运维 数据库 Mysql MGR同步 keywords: 'Linux,Mysql,MGR' description: Mysql5.7 MGR模式 co ......
关于Mysql中文字段的排序
发表这个帖子是因为产品的一个需求，按照名称首字母正序排序。 目前所有的库默认的字符集都是utf8mb4, 排序规则是utf8mb4_general_ci，这种排序规则不支持按中文的拼音首字母排序而GBK字符集基本是按照汉字的拼音码进行编码的，所以这里想到了用转换字符集的方式来处理这个问题。目前想了两 ......
CentOS安装Mysql5
title: CentOS安装Mysql5.7 date: 2022-08-14 17:45:50 tags: Linux CentOS Mysql categories: 运维 数据库 Mysql keywords: 'Linux,CentOS,Mysql' description: CentOS ......
高效管理笔记，选择IHome在线笔记
IHome在线笔记是一款极其便捷的云笔记应用，它的出现彻底改变了人们的笔记方式。 Home在线笔记提供了一系列强大的功能，让你在任何地方、任何时间，都可以高效地管理自己的笔记，大大提高了工作和生活的效率。 首先，IHome在线笔记支持数据备份，这意味着你的笔记会被存储在云端服务器中，不会因为电脑损坏 ......
[重读经典论文] AlexNet笔记
1. 前言 AlexNet是一个深度卷积神经网络模型，由Alex Krizhevsky、Ilya Sutskever和Geoffrey Hinton于2012年设计。这个模型在ImageNet图像识别挑战赛中获得了当时的冠军，并推动了卷积神经网络在计算机视觉中的广泛应用。 AlexNet包括5个卷积 ......
Mysql开启日志
title: Mysql日志 date: 2022-09-7 tags: Linux Mysql 日志 categories: 运维 数据库 Mysql 日志 keywords: 'Linux,Mysql,日志' cover: https://qiufuqi.gitee.io/img/hexo/20 ......
Docker安装Mysql
title: Docker安装Mysql date: 2022-09-11 tags: Linux Docker Mysql categories: 运维 Docker Mysql keywords: 'Linux,Docker,Mysql' cover: https://qiufuqi.gitee ......
Quicker快速开发，简单的网页数据爬取（示例，获取天眼查指定公司基础工商数据）
前言 有某个线上项目，没有接入工商接口，每次录入公司的时候，都要去天眼查、企查查或者其他公开数据平台，然后手动录入，一两个还好说，数量多了的重复操作就很烦，而且，部分数据是包含超链接，一不注意就点进去，又多了一个步骤。 因此，我就用Quicker写了一个数据抓取脚本，用来抓取一些公开的工商数据，逻辑 ......
Excel同一工作簿中引用不同sheet数据，点击后引用失效
电源时序sheet中要引用电源质量sheet中的B6单元格数据， 鼠标点击之后，电源时序sheet中的数据就变成了=电源质量!B6，且不能恢复为ABCD。如下 原因：单元格格式不能是文本，只能是常规。引用才能一直有效。 ......
mongo-listener: 监听 mongo 数据变化的一个应用程序相关设计
mongo-listener 为了开放一些数据库变更信息, 需要监听数据库的数据变更, 之后将信息投递到信息队列中, 开放对应的端口, 供其他系统订阅. mongo 数据变更监听 对于数据库信息的变更, 或者说是数据异构, 也就是当数据源数据变更时, 另一个数据源可以接收到相关的变更信息进行处理, ......
mySQL面试题
MySQL面试题 1.InnoDB索引和MyISAM索引的区别是什么？ InnoDB的索引的索引在存储的时候，他的索引是和数据是存储在一个文件里的，MyisAm的索引是另外的一个文件，和数据不是在一个文件里。 索引文件所对应的B+树的最叶子结点记录的数据有所区别，InnoDB里是存储的数据行的Id， ......
mysql8主从复制（一主三从） docker
一、准备挂载文件 为了将配置文件在宿主机做挂载，先运行测试镜像拷贝配置文件 1、拉取镜像 docker pull mysql:8.0.26 2、创建测试容器mysql-demo docker run -it -p 3300:3306 \ --name mysql-demo \ -e MYSQL_RO ......
mysql关联表查询最新的数据
mysql关联表查询最新的数据 select it.name,ns.id,it.id childId,it.id_card idCard,it.card_type cardType,it.birthday,ns.guardian guardian,ns.mother_phone motherPhon ......
MySQL-ACID与事务隔离级别
MySQL-ACID与事务隔离级别 1. 事务的概念 数据库的事务是并发控制的基本单位，是指逻辑上的一组操作，要么全部执行，要么全部不执行。中间任何一个操作出现错误, 都会回滚(rollback)到数据最初的安全状态, 以保证不会对系统数据库造成错误的改动。 事务有如下几个特点： 原子性（Atomi ......
《Spectral–Spatial Morphological Attention Transformer for Hyperspectral Image Classification》论文笔记
论文作者：Swalpa Kumar Roy， Ankur Deria， Chiranjibi Shah， et al. 论文发表年份：2023 模型简称：morphFormer 发表期刊：IEEE Transactions on Geoscience and Remote Sensing 论文代码： ......
阿里又开源一款数据同步工具 DataX，稳定又高效，好用到爆！
作者：愿许浪尽天涯 链接：https://juejin.cn/post/7077744714954309669 前言 我们公司有个项目的数据量高达五千万，但是因为报表那块数据不太准确，业务库和报表库又是跨库操作，所以并不能使用 SQL 来进行同步。当时的打算是通过 mysqldump 或者存储的方式 ......
自定义动态数据源
1.思路 1）自定义一个注解 @DataSource，该注解可以加在service层方法或者类上面，表示该方法或者类中的所有方法都是用某一个数据源。 2）如果某个方法上或类上有 @DataSource 注解，将该方法或类需要使用的数据源名称存入到ThreadLocal。 3）自定义切面，在切面中解析 ......
大数据之—dolphinscheduler海豚调度
前言 本文参考：https://blog.csdn.net/zhengzaifeidelushang/article/details/127841043 参考：https://blog.csdn.net/shuyv/article/details/128847853 参考：https://blog. ......
数据仓库SQL代码规范
1.命名规则： 数据库、表、列、索引等名称应使用有意义、易于理解和记忆的命名方式。 应使用小写字母和下划线，避免使用大写字母和特殊字符。 应避免使用保留字和关键字作为名称，或在名称前加上特定前缀或后缀以避免与保留字冲突。 2.编码风格： 应使用一致的缩进、空格、换行等格式规范，以提高代码的可读性。 ......
Mysql常用语法详解
一、数据库 创建数据库 create database 数据库名; 查询所有数据库 show databases; 查看正在创建的数据库信息 show create database 数据库名; 删除数据库 drop database 数据库名; 使用数据库 use 数据库名; 二、表 创建表 cr ......
Redis保证缓存数据和数据库一致
1 Redis 在分布式环境下的数据一致性主要是通过以下几种方式来保证的： 主从复制：Redis 支持主从复制，当主节点有新的数据写入时，会自动同步到从节点，从节点与主节点的数据保持一致。 Sentinel 哨兵：Redis Sentinel 哨兵是 Redis 的高可用性解决方案，通过监控主节点的 ......
审查人员进行数据仓库SQL代码审查的指南
代码规范：审查人员需要确保SQL代码符合团队的代码规范。这包括代码缩进、代码注释、命名规则等。 SQL性能：审查人员需要检查SQL查询的性能。这包括检查是否使用了索引、是否存在冗余计算、是否使用了正确的连接方式等。 SQL正确性：审查人员需要检查SQL语句的正确性，确保SQL语句执行不会引发错误或意 ......
数据仓库是一个用于存储和管理企业数据的中央存储库，因此需要确保其中的代码质量。以下是几种保证数据仓库代码质量的方法：
代码审查：在数据仓库开发过程中，通过对代码的定期审查来检查潜在的错误和问题，并确保代码符合团队的开发标准和最佳实践。 自动化测试：实现自动化测试是确保代码质量的关键，包括单元测试、集成测试和端到端测试。这些测试可以检测代码的可靠性、性能和安全性等方面的问题，同时还可以快速检测到任何潜在的问题。 代码 ......
Vue2可以检测 引用数据类型 数组的响应式变化
在Vue2中，响应式基于Object.defineProperty实现的响应式，官方文档中明确说明 Vue 不能检测以下数组的变动： 当你利用索引直接设置一个数组项时，例如：vm.items[indexOfItem] = newValue 当你修改数组的长度时，例如：vm.items.length ......
几种高效的方法来进行数据仓库的code review
制定标准和规范： 在开发数据仓库的过程中，制定统一的代码规范和标准，确保所有开发人员都能按照这些规范和标准进行代码开发。这些标准和规范可以包括SQL语法、代码注释、命名规则、代码结构等。 审查指南： 在进行code review时，可以提供一份指南来帮助审查人员进行审查。这份指南可以列出常见的错误类 ......
MySQL创建数据库（CREATE DATABASE语句）
在 MySQL 中，可以使用 CREATE DATABASE 语句创建数据库，语法格式如下： CREATE DATABASE [IF NOT EXISTS] <数据库名> [[DEFAULT] CHARACTER SET <字符集名>] [[DEFAULT] COLLATE <校对规则名>]; [ ......
数据库事务总结
1、事务 事务指的是满足 ACID 特性的一组操作，可以通过 Commit 提交一个事务，也可以使用 Rollback 进行回滚。 ACID 原子性（Atomicity） 事务被视为不可分割的最小单元，事务的所有操作要么全部提交成功，要么全部失败回滚。 回滚可以用回滚日志（Undo Log）来实现， ......