数据库 笔记 数据mysql
3月阅读笔记1
首先要明确开发计算机软件是一个复杂的工程，并不比建设高楼大厦简单。这项活动和传统的土木工程类有相似的部分，也有迥然不同的地方。 主要有下面的几种活动（根据进程推动顺序）： 定义问题 需求分析 规划构建 软件架构/高层设计 详细设计 编码与调试 单元测试 集成测试 系统测试 部署/分发及保障维护 《代 ......
3月阅读笔记2
软件构建是软件开发的核心活动；构建活动是每个项目中位移一项必不可少的工作 软件构建的主要活动包括：详细设计、编码、调试、集成、开发者测试（包括单元测试和集成测试） 构建也被称作“编码”和“编程” 构建活动的质量对软件的质量有着实质性的影响 最后，你对“如何进行构建”的理解程度，决定了你这名"程序员" ......
3月阅读笔记3
无论是以何种方式来进行设计，小型项目也能和大型项目一样从精心的设计之中获益，而如果能认识到设计是一项明确的活动，你就更会获益匪浅。 设计过程充满了不确定性，因此设计技术也趋于探索性质 软件的首要技术使命：管理复杂度 设计特征： 最小复杂度 易于维护 松散耦合 可扩展性 可重用性 高扇入：大量的类使用 ......
datax安装使用(sqlserver同步到mysql)
环境: [root@host135 ~]# java -version java version "1.8.0_361" Java(TM) SE Runtime Environment (build 1.8.0_361-b09) Java HotSpot(TM) 64-Bit Server VM ( ......
mysql批量更新update操作，导致锁表
sql如下： update pay_trans set return_state = 1 WHERE order_id = #{orderId} and user_id = #{userId} 批量执行此条sql时，导致数据表被锁，所有交易异常。 经排查where条件order_id and use ......
OI 学习笔记 III：字符串
阅读时建议在右下角开启目录。 本文涉及以下内容： 字符串的性质与结构 哈希及其扩展应用 trie & 有穷状态自动机 KMP & AC自动机 SA数组和SAM 1.字符串的性质与结构 ......
mysql - 存储过程
定义 存储过程(stored procedure)是一组为了完成特定功能的SQL语句集合，经编译后存储在服务器端的数据库中，利用存储过程可以加速SQL语句的执行。 分类 存储过程分为系统存储过程和自定义存储过程。1）系统存储过程在master数据库中，但是在其他的数据库中可以直接调用，并且在调用时不 ......
pwn学习笔记-栈溢出
背景知识 函数调用栈 函数调用栈是指程序运行时内存一段连续的区域，用来保存函数运行时的状态信息。包括函数参数与局部变量等。 称之为栈是因为在函数调用时，调用函数的状态被保存在栈内，被调用函数的状态被压入调用栈的栈顶；在函数调用结束之后，栈顶的函数状态会被弹出，栈顶回复到调用函数之前的状态。 函数调用 ......
Mysql主从同步
什么是Mysql主从同步 从库同步主库上的数据，(让其他数据库服务器自动同步当前正在被访问的数据服务器上的数据) MYSQL主从复制的模式 1.异步模式（默认方式） 异步模式下，主节点执行完客户端提交的事务后立即提交事务并返回给客户端，并不关心 log dump 线程是否成功地将将此次事务写进 bi ......
mysql查看死锁
查看死锁 Mysql 查询是否存在锁表有多种方式，这里只介绍一种最常用的。 1、查看正在进行中的事务 SELECT * FROM information_schema.INNODB_TRX 2、查看正在锁的事务 SELECT * FROM INFORMATION_SCHEMA.INNODB_LOCK ......
java代码备份mysql数据库
生成环境的数据库我们需要不断的进行备份,不然服务器出现故障,会是灾难性的 直接添加我的代码 package com.hrp.task; import com.alibaba.fastjson.JSON; import com.base.exception.SysException; import c ......
【解答】如何保障数据库的测试质量？
保障数据库的测试质量可以从以下几个方面进行： （1）设计合理的测试用例：需要设计合理、全面、准确的测试用例，覆盖数据库的各种功能和场景，包括常规操作、异常操作、性能测试、安全测试等。 （2）自动化测试：可以采用自动化测试的方式，提高测试的效率和准确性，同时可以快速发现和解决问题。 （3）定期回归测试 ......
MySql随笔记基础
XAMPP使用 shell 命令 每个数据库对应 一个子文件夹 mysql 进入mySQL的命令 -uroot userroot 登录用户 -uroot -p password 登录密码 -p123 show databases 显示数据库 use databaseName 使用哪个数据库 show ......
Mysql 修改表编码
Mysql 修改表编码，字段编码还是以前的 Mysql 修改表编码，字段编码未变 ALTER TABLE `table6` CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_bin; -- ALTER TABLE`rented_bill` CHARAC ......
通过vba将sheet1(基础数据表)的内容通过相关计算自动填充内容到sheet2(数据整理表)
一、应用场景 基础数据表有产品的初始时间、产品名称、批号、备注。①根据批号自动计算批次，注：每个批次用英文分号分隔开；②根据表头的标志"时间（天）"或者"时间（月）"来计算初始时间+表头数字(月或天)，即计算时间；③根据内容判断是"√"，计算内容就加上该内容。以标志"时间（天）"或者"时间（月）"判 ......
【艾跃进】口才艺术与社交礼仪笔记
写在前面 不知道从何写起，说了许久要去看艾老师的课，终于在一周后看完了，艾老师的课真是让人受益匪浅，只能说相见恨晚，如果大学时就看到，那现在应该会是另一个现象，但现在也不晚，希望可以以后做到更好。 1.礼仪 2.口才 参考链接 【艾跃进】口才艺术与社交礼仪（57集全） ......
Asp-Net-Core开发笔记：使用RateLimit中间件实现接口限流
前言# 最近一直在忙（2月份沉迷steam，3月开始工作各种忙），好久没更新博客了，不过也积累了一些，忙里偷闲记录一下。 这个需求是这样的，我之前做了个工单系统，现在要对登录、注册、发起工单这些功能做限流，不能让用户请求太频繁。 从 .Net7 开始，已经有内置的限流功能了，但目前我们的项目还在使用 ......
数据清洗
操作： 一张表的数据插入到另一张表，可以这样写： INSERT INTO 目标表(字段1, 字段2, ...) SELECT 字段1, 字段2, ... FROM 来源表 WHERE 条件; 批量更新一张表的某个字段到另一张表，那么 SQL 可以类似这样写： # 写法一 UPDATE b AS tb ......
pwn学习笔记-什么是gcc、libc、glibc、libc++、libstdc++
在做pwn题目的时候总是会遇到自己不熟悉，不会的内容，每次都觉得非常难整理和理清，不如每遇到一次就做一次笔记，方便随时复盘。 gcc gcc在我学习c语言的时候，编译阶段有用到，和pwn题貌似关系不大，放一放。 libc libc是Linux下的标准C语言库，也是当初写helloworld里包含的头 ......
MYSQL执行顺序
MYSQL的执行顺序如下所示： fromonjoinwheregroup byhavingselectdistinctunionorder by 可以看到，select是在where后执行的，也就是说，select下的窗口函数也是在where之后执行的，所以如果涉及窗口函数的筛选，要在往外一层进行查 ......
自动生成sql 这是MySQL例子
@Test public void testGeneSql() { try { String ss = getFileContentTwo("D:\test\13json.txt"); JSONObject jo = JSONObject.parseObject(ss); JSONArray ja ......
【解答】大数据量场景下，如何测试验证函数的数值计算的数据正确性
测试的大数据量场景已2T为例进行介绍如下: （1）数据抽样验证：由于数据量非常大，可以采用数据抽样的方式进行验证。从数据集中随机抽取一小部分数据进行测试和验证，以此来推断整个数据集的正确性。 （2）并行计算验证：可以采用并行计算的方式进行验证，将数据集分成多个部分进行计算，然后将结果汇总。这样可以大 ......
MS SQL Server 删除重复行数据
您可以使用以下 SQL 语句删除 MS SQL Server 表中重复的行： WITH CTE AS ( SELECT ROW_NUMBER() OVER(PARTITION BY column1, column2, ... columnN ORDER BY (SELECT 0)) RN FROM ......
express node模块连接数据库提示Connect error Error: connect ETIMEDOUT
服务器配置，点开防火墙配置，添加规则设置好端口号即可。 ......
数据分析第九章 基于水色图像的水质评价
#%% 水流状态记录数及水流量分布箱线图 import pandas as pd import matplotlib.pyplot as plt inputfile = r"D:\py_project\a_三下\original_data.xls" # 输入的数据文件 data = pd.read_ ......
MySQL用户及权限相关
1、创建用户： CREATE USER 'test'@'%' IDENTIFIED BY 'XXXXXXX'; GRANT SELECT,INSERT,UPDATE,DELETE,CREATE,DROP,ALTER ON bdp.* TO 'test'@'%'; 2、修改密码： set passwo ......
如何保障ETL过程的数据正确性。这个过程会产生哪些问题？
保障ETL过程的数据正确性可以从以下几个方面考虑： 数据源的质量：ETL过程的数据质量取决于数据源的质量，因此需要对数据源进行充分的验证和清洗，确保数据的准确性、完整性和一致性。 数据转换的准确性：在ETL过程中，数据转换是非常重要的一步，需要确保数据转换的准确性和正确性。可以采用数据验证、数据重复 ......
MySQL联合索引创建规则
1、索引应该按照最常用于查询的列的顺序创建。这样可以最大程度地提高查询性能。 2、如果查询中包含的列与索引中的列顺序不一致，则无法使用索引。因此，如果您有多个查询，每个查询都包含不同的列，那么最好为每个查询创建一个单独的索引。 3、联合索引应该包含尽可能少的列。联合索引的列数越多，更新索引的成本就越 ......
数据挖掘5
1、 import pandas as pdimport numpy as npdata = pd.read_excel('original_data.xls')print('初始状态的数据形状为：', data.shape)data.drop(labels=["热水器编号","有无水流","节能模 ......