数据库 数据mysql ddl
数据分析之数据建模
一、什么是数据建模？ （1）数据模型，就是在数据层面建立起来的一种逻辑关系的算法集合，该算法集合可以运算未来的同源数据，并产生可预期的结果。通俗说，模型就是算法或公式，如模型y=ax+b，通过该公式，输入x，可以得到y值。通过数据建模输出的模型，就是数据模型。 （2）数据建模是数据分析的一部分，数据 ......
数据分析之数据分析方法
常用数据分析方法分类： 数据分析方法有很多种，需要根据业务场景中分析目的的不同，选择对应的分析方法，如果你的分析目的是想将复杂的问题变得简单，就可以使用逻辑树分析方法，例如经典的费米问题就可以用这个分析方法。如果你想分析用户的转化，就要用到漏斗分析方法，录入店铺小周销量下降，想知道中间那个业务环节出 ......
数据分析第十章实践
import pandas as pd import matplotlib.pyplot as plt inputfile ='C:/Users/Lenore/Desktop/data\original_data.xls' # 输入的数据文件 data = pd.read_excel(inputfi ......
保存mysql执行结果
1. 使用mysql的tee命令记录对mysql的操作过程 (1)第一种情况是在连接数据库的时候使用tee >mysql -u root -p --tee=/app/log.txt //这时我们对数据库的所有操作都会记录在log.txt上； (2) 第二种方式是在连接上数据库后使用 mysql> u ......
力扣1097(MySQL)-游戏玩法分析（困难）
题目： 我们将玩家的安装日期定义为该玩家的第一个登录日。 我们还将某个日期 X 的第 1 天留存时间定义为安装日期为 X 的玩家的数量，他们在 X 之后的一天重新登录，除以安装日期为 X 的玩家的数量，四舍五入到小数点后两位。 需求：编写一个 SQL 查询，报告每个安装日期、当天安装游戏的玩家数量和 ......
c# 连接 sql server 数据库时报错，证书链是由不受信任的颁发机构颁发的。
c# 连接 sql server 数据库时报错：A connection was successfully established with the server, but then an error occurred during the login process. (provider: SSL ......
MySQL事务隔离级别
事务 事务是一个不可分割的数据库操作序列，也是数据库并发控制的基本单位，其执行的结果必须使数据库从一种一致性状态变到另一种一致性状态。事务是逻辑上的一组操作，要么都执行，要么都不执行。 特征 事务就是一组原子性的操作，这些操作要么全部发生，要么全部不发生。事务把数据库从一种一致性状态转换成另一种一致 ......
MySQL-存储过程
什么是存储过程我们前面所学习的MySQL语句都是针对一个表或几个表的单条 SQL 语句，但是在数据库的实际操作中，并非所有操作都那么简单，经常会有一个完整的操作需要多条SQL语句处理多个表才能完成。例如，为了确认学生能否毕业，需要同时查询学生档案表、成绩表和综合表，此时就需要使用多条 SQL 语句来 ......
第一次结对作业——如何将mysql数据表里的数据导入到安卓SQLite数据库
在进行安卓地铁系统编写的过程中，我产生了一个疑问，怎么才能将mysql数据库里的数据导入到SQLite里面 于是我开始查找资料来解决这个问题，终于能够实现这个导入。 步骤如下： 1.进入idea，找到自己要导出的数据库，将数据库里的文件导出csv文件 2.打开Android Studio的地铁查询系 ......
hive和kudu数据之间的互相迁移存在的坑
一、为什么要进行数据迁移 背景：我现在有个需求：需要修改kudu表的主键，主键由1个字段增加为2个字段。因为不能影响下游系统使用kudu表，kudu表表名不能做修改。需要将原kudu表删除后再建新kudu表。 这里存在几个潜在知识点： 1.kudu表修改主键不能使用命令直接修改，必须重新删表然后建表 ......
MySQL数据库三个关键性能指标TPS\QPS\IOPS
今天主要介绍MySQL数据库，或者说所有数据库的三个关键性能指标： qps 每秒处理的查询数 tps 每秒处理的事务数 IOPS 每秒磁盘进行的I/O操作次数 如果IOPS过高，分析原因： 内存不足，查询数据较多（一般为慢查询，但有时候并不是，单纯的查询数据较多），特别关注一下数据量大还需要排序的分 ......
银河麒麟4.0.2（飞腾平台） 安装MySQL数据库
1. 操作系统信息 root@Kylin:/# cat /etc/.kyinfo [dist] name=Kylin milestone=4.0.2-server-sp2-18071110.Z1 arch=arm64 beta=False time=2018-07-11 10:57:13 dist_ ......
Linux操作系统之locate命令详解：通过文件名称来查找文件（与find命令进行全局搜索不同，locate命令是读取数据文件（/var/lib/locatedb）进行查找；由于缩小了查找的范围，因此locate命令查找文件会比find命令速度快很多）
https://blog.csdn.net/yspg_217/article/details/122113017 https://www.cnblogs.com/liujiaxin2018/p/16211758.html http://www.hnwypx.com/zhishi/284406.htm ......
6-springboot配置多数据源
1.application.properties中配置多数据源 #refund数据源#此种标黄的没办法自己进行解析，代码读取spring.datasource.refunddb.url=jdbc:mysql://refund地址spring.datasource.refunddb.username= ......
7-springboot-多数据源事务管理-jta+atomikos的分布式事务
jta+atomikos的分布式事务 <!--jta+atomikos分布式事务--><dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jta-atomikos</arti ......
如何使用C# 对MongoDB数据库操作
一、在nuget 引入MongoDB.Bson，和MongoDB.Driver这个两个类库 二、对MongoDB数据库连接 string con = @"mongodb://127.0.0.1:27017"; var client = new MongoClient(con); //数据库 var ......
面试题：如何用数据库去实现一个乐观锁/悲观锁？（锁分类，死锁）
本文意在解析锁的概念，不只是解析题目，而是将锁弄清楚，知道大概的实现方案。 数据库锁的分类 数据库锁的分类有很多种。 分类1 从数据库系统角度分为三种：排他锁X、共享锁S、更新锁U。 排他锁（X锁）：该锁也称为独占锁，用于数据修改操作，例如 INSERT、UPDATE 或 DELETE。确保不会同时 ......
MariaDB start 报错：mysql-bin.index' not found (Errcode: 2) (Errcode: 13)
问题是修改配置log-bin=/data/mysql/binlog/mysql-bin后出现的。 报错：Errcode: 2 mkdir -p /data/mysql/binlog ## 和正常的DB节点比较可以看到没有binlog目录，创建目录之后没有这个报错。 报错：Errcode: 13 ch ......
备份和迁移数据
迁移方式介绍 容器中的数据，如果没有用挂载目录，删除容器后就会丢失数据。如果你是用bind mount直接把宿主机的目录挂进去容器，那迁移数据很方便，直接复制目录就好了如果你是用volume方式挂载的，由于数据是由容器创建和管理的，需要用特殊的方式把数据弄出来。 备份和导入 Volume 的流程 备 ......
Django创建数据时报错解决
报错内容： { "code": "500", "msg": { "is_delete": [ { "message": "这个字段是必填项。", "code": "required" } ] } } models.py from django.db import models class BaseM ......
爬取的数据，存到mysql中、爬虫和下载中间件、加代理，cookie，header，加入selenium、去重规则源码分析（布隆过滤器）、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫：写的一个个类 -引擎： -调度器：排队，去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
Redis跟MySQL的双写问题
本文已收录至Github，推荐阅读 👉 Java随想录 微信公众号：Java随想录 项目中有遇到这个问题，跟MySQL中的数据不一致，研究一番发现这里面细节并不简单，特此记录一下。 写在前面 严格意义上任何非原子操作都不可能保证一致性，除非用阻塞读写实现强一致性，所以缓存架构我们追求的目标是最终一 ......
Oracle 数据库 官方下载 安装 及配置监听
Oracle 数据库 官方下载 安装 及配置监听 1、Oracle 官方下载 推荐使用官方下载地址：https://edelivery.oracle.com/osdc/faces/SoftwareDelivery ;这是Oracle的一个官方云产品下载地址可以下载 “Oracle JDK”、"Ora ......
SQL 分类及 mysql安装及卸载注意事项
SQL structural query language 分类 DML 数据操纵语言 data manipulation language insert update delete select DDL 数据定义语言 data definition language create table al ......
Rsync + Lsync 实时同步数据部署
1、环境 服务器名称 IP地址 备注 backup-24-109 172.16.24.109 源 backup-24-108 172.16.24.108 目标 2、源主机Rsync安装 # dnf -y install rsync # vi /etc/rsync_exclude.lst test t ......
二进制安装MySQL
#二进制方式安装MySQL，安装过程如下： #（1）建立MySQL用户账号 首先以root身份登录到Linux系统中，然后执行如下命令创建mysql用户账号： #<==创建mysql用户。 [root@xkf ~]# useradd mysql -s /sbin/nologin -M #（2）下载、 ......