工具 数据mysql shell
Mysql 锁的分类
锁的分类：表级锁、行级锁 InnDB： 共享排他锁： 共享锁含义：共享锁允许事务并发读取一行数据，但是不能修改。 SQL语句：select 后缀 share 排他锁含义：允许持有的事务修改、删除某行数据 SQL语句：select 后缀 for update 意向锁 含义：某个时刻，事务要加共享/排他 ......
mysql使用注意事项
当接触到大量数据时候需要注意访问数据库的一些问题 navicat连接mysql数据库时候 有时候为了方便直接双击打开表，默认会打开1000条数据，如果表很大则不建议这么操作，因为你这么做了之后，往往会去筛选一些条件去查询数据，如果字段没有索引 会影响线上业务 这里限制每页访问条数 查询sql，尽量使 ......
SpringMVC-实现返回json数据
在实际应用中我们最多用的就是json，故这里学习一下返回json数据 简单效果展示: list 主要代码 package com.aurora.json; import com.aurora.pojo.User; import org.springframework.stereotype.Contr ......
建立大模型的数据质量的保障机制
建立大模型的数据质量保障机制是确保模型性能和可靠性的关键一步。以下是建立此类机制的一般步骤： 1. **数据采集与收集**： - 确定数据来源：明确定义从哪里获取数据，例如数据库、外部API、传感器等。 - 数据采集策略：定义数据采集频率、数据范围、采集设备等。 - 数据收集：设计和实施数据收集过程 ......
数据结构
数据结构 定义 数据结构就是设计数据以何种方式组织并存放在计算机中 eg：列表，字典，元组，堆，栈，队列 程序 = 数据结构（静态的数据） + 算法（动态的操作） 分类 逻辑结构 线性（一对一） 非线性 树结构（一对多） 图结构（多对多） 集合结构（除属于同一集合，别无其它关系） 存储结构（物理结构 ......
python sqlalchemy批量插入大量数据，性能最佳！
def create_user_items(db: Session, mouse_events, user, events_dict): mouse_events = json.loads(mouse_events) db.execute( models.Sessions.__table__.ins ......
Mysql数据查询逻辑
MySQL是一定有一个唯一非空索引的，如果有主键则是主键，没有主键则是用唯一键，唯一键也没有则会自动生成一个隐藏的字段作为主键；然后以这个字段作为聚簇索引； 所以比如表foo，它的每一行的所有列数据是连续的（至少每一列数据的“指针”值在行里是连续的，比如text这种列，在一行里可能只是存储的它的“指 ......
好用的API调试工具推荐：Apipost
随着数字化转型的加速，API（应用程序接口）已经成为企业间沟通和数据交换的关键。而在API开发和管理过程中，API文档、调试、Mock和测试的协作显得尤为重要。Apipost正是这样一款一体化协作平台，旨在解决这些问题，提高API开发效率和质量。 Apipost提供API文档管理功能，让后端开发人员 ......
数据库【分库分表】
一、场景 由于用户数量越来越大会出现以下问题： 订单量剧增，单表数据量已经达到了千万的级别了，这个时候的索引查询已经很慢了，所以现在我们的类似这些大数据表的查询性能很差。 数据量持续增加，现在我们的磁盘大部分空间都被使用，导致数据库的复制备份操作很缓慢，所以，目前数据库系统已不能满足现在的数据量级。 ......
com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException: Public Key Retrieval is not？
问题 ：连接MySQL数据库时抛出异常信息： com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException: Public Key Retrieval is not allowed一开始aplication.yml配置如下所 ......
另辟蹊径-诊断工具之 IO wait
最近在做日志的实时同步，上线之前是做过单份线上日志压力测试的，消息队列和客户端、本机都没问题，但是没想到上了第二份日志之后，问题来了：更多技术干货详见www.linuxprobe.com ......
MySQL系列：binlog日志详解（参数、操作、GTID、优化、故障演练）
目录简介作用系统参数--log_bin--server_id--binlog_format--sync-binlog（双一标准）--gtid-mode(gtid)--enforce-gtid-consistency(gtid)--expire-logs-day（优化参数）--binlog_cache ......
Linux21--shell编程基础
1 bash shell 介绍 # 介绍 shell是一门解释型、弱类型、动态语言 # 类比 shell语法 < > python语法 bash解释器 < > python解释器 平台 < > 平台 2 变量 2.1 基本使用 ### 交互式环境中 [root@localhost ~]# x=1 # ......
硬件测试常见仪器，线材，工具
1，仪器： 信号发生器：信号发生器是一个笼统的说法，实际上针对不同的电子产品，需要不同的信号发生器，信号发生器是一种能提供各种频率、波形和输出电平电信号的设备。在测量各种电信系统或电信设备的振幅特性、频率特性、传输特性及其它电参数时，以及测量元器件的特性与参数时，用作测试的信号源或激励源的一种设备， ......
git：使用 git-repo-clean工具清仓库大文件，并重写commit记录（建议）
参考：README 安装 下载链接：https://gitee.com/oschina/git-repo-clean/releases/ 解压后，即可看到二进制程序：git-repo-clean，复制到需要清理的仓库中。 使用 查看大文件 ./git-repo-clean --verbose --s ......
java程序通过ssl连接mysql(windows环境)
环境:OS:windows2012(mysql服务器)mysql:5.7.29jdk:1.8 说明:mysql5.7版本安装会自动生成如下的证书文件(可以用不自己再生成ca文件):ca.pemclient-cert.pemclient-key.pem同时mysql是默认开启了ssl了的 keytoo ......
数据驱动的风险管理：保险行业的可视化革命
保险行业正处于数字转型的前沿，而可视化大屏技术将在这一过程中发挥至关重要的作用。这是一个信息时代的保险，一个更加智能、高效和客户导向的保险，其核心是数据的力量和可视化的魅力。 ......
Linux系统重装后恢复数据盘LVM卷
请注意，在执行这些步骤之前，确保已经了解 LVM 的基本概念和操作方式，并且谨慎操作以避免数据丢失。此外，如果有关于卷组的备份，那么更安全的方法是直接恢复备份，在重装系统之后再进行数据还原。 在 Linux 系统重装后恢复 LVM 数据盘卷时，您可以按照以下步骤进行： 1、确保 LVM 卷组已经存在 ......
这才是 SpringBoot 统一登录鉴权、异常处理、数据格式 的正确姿势
本篇将要学习 Spring Boot 统一功能处理模块，这也是 AOP 的实战环节 用户登录权限的校验实现接口 HandlerInterceptor + WebMvcConfigurer 异常处理使用注解 @RestControllerAdvice + @ExceptionHandler 数据格式返 ......
Oracle系列---【数据库连接数超了，导致数据库连接不上，如何排查当前连接数，以及如何修改最大连接数限制？】
数据库连接数超了，导致数据库连接不上，如何排查当前连接数，以及如何修改最大连接数限制？ 1.对比当前连接数和最大连接数 如果差的比较少，比如相差十几，二十几，连不上的话，很有可能是用连接池连接，一次申请连接数大于剩余的连接数导致的。 #查看当前总连接数 SELECT count(*) FROM V$ ......
SQL Server数据库创建远程服务器备份计划（小白详细图文教程）
一、前言 最近项目系统做安全加固，以前是本地备份，现在需要做远程内网服务器数据库备份，后期也有可能做异地备份。下面以SQL Server2016 内网服务器数据库备份为例， 数据库服务器地址：192.168.10.200 备份服务器地址：192.168.10.100 二、创建存储文件夹192.168 ......
数据库【读写分离】
一、业务场景 一般在业务读多写少的场景，我们为了解决数据库IO瓶颈，可以考虑采用数据库读写分离，将写请求和读请求进行分开数据处理。 注意：主从不是主备。主从中的从服务器是要承担业务的，主备中备用服务器一般只做备份存在。 二、架构 一主多从的结构如下： 其中有个关键技术：主从复制。每次写入数据的时候， ......
JavaScript数据类型的转换
一、字符串类型的转换 1、自动转换 <script> var str = 'hello'; var num = 100; console.log(str+num); console.log(typeof (str+num)); </script> 2、强制转换 String（），object.toS ......
数据统计分析 — 正态分布
连续型随机变量的概率分布 德国的高斯 法国的拉普拉斯 回到最开始的业务场景 通过统计描述，分析师已经了解了配件A过去的日消耗量波动情况，现希望基于历史数据设定库存控制线，要求该库存量能够保证99%的使用日不会出现库存断货情况。 该怎么办呢？ 控制线设置成均数可以吗？ 肯定是不可以的，因为均值只是代表 ......
数据结构：栈与队列-详解循环队栈
《详解循环队栈》 目录： 循环队列的定义及其特点 循环队列的实现 完整Demo 运行截图 小结 参考文献 一、循环队列的定义及其特点 队列是一种特殊的线性表，特殊之处在于它只允许在表的前端（front）进行删除操作，而在表的后端（rear）进行插入操作，和栈一样，队列是一种操作受限制的线性表。进行插 ......
shell脚本里如何设置Python的环境变量
在shell脚本中设置Python的环境变量可以通过以下几个步骤来完成。 首先，需要确定Python的安装路径。可以通过以下命令来查找Python的安装路径： 该命令会返回Python可执行文件的路径，例如：/usr/bin/python。 which python 接下来，将Python的安装路径 ......
Playwright已经是目前最好的测试自动化工具了吗？
作者观点：很长时间以来，Selenium是QA工程师寻求测试自动化解决方案的首选测试框架。它能够测试任何浏览器（这在IE浏览器的统治时期尤其重要）和任何平台。然而，现在看来，那个时代已经过去了。 今天，大多数web应用程序都是用现代前端框架开发的，如React、Angular或Next.js，所有的 ......
第一篇 静态代码检查工具
一、静态测试简介 静态测试包括代码检查、静态结构分析、代码质量度量等。它可以由人工进行，充分发挥人的逻辑思维优势，也可以借助软件工具自动进行。 代码检查包括代码走查、桌面检查、代码审查等，主要检查代码和设计的一致性，代码对标准的遵循、可读性，代码的逻辑表达的正确性，代码结构的合理性等方面；可以发现违 ......