数据库 笔记 数据mysql
关于处理数据分页查询用最后一个id还是用offset
批量处理数据 经常用到分页查询，两个形式第一种 1 select * from table where name = 'name' order by id desc offset 0 limit 10 2 select * from table where name = 'name' and id ......
滴滴一面：MySQL主从复制不一致，主要原因是？
文章很长，且持续更新，建议收藏起来，慢慢读！疯狂创客圈总目录 博客园版 为您奉上珍贵的学习资源 ： 免费赠送 :《尼恩Java面试宝典》 持续更新+ 史上最全 + 面试必备 2000页+ 面试必备 + 大厂必备 +涨薪必备 免费赠送 :《尼恩技术圣经+高并发系列PDF》 ，帮你 实现技术自由，完成职 ......
多通道振弦数据记录仪在预防地质灾害中的重要性
多通道振弦数据记录仪在预防地质灾害中的重要性 地质灾害是指在地表或岩体内部发生的、由地质原因引起的、对人类生命、财产和环境安全造成威胁或损害的各种灾害。地质灾害的预测和预防对于保障人民生命财产安全、维护社会稳定和可持续发展具有重要的意义。而多通道振弦数据记录仪在预防地质灾害中起到了非常重要的作用。 ......
EasyGBS云存储方案让视频监控的存储与数据挖掘更有保障
EasyGBS云存储方案为视频监控的存储与数据挖掘提供了更为可靠的保障。随着视频监控系统的广泛应用，海量的视频数据需要被高效地存储和管理，以应对日益增长的数据量和复杂的应用场景。而传统的本地存储方式往往面临着容量限制、数据冗余和安全性问题。 EasyGBS云存储方案是一种基于云计算技术的存储解决方案 ......
pbjs 无法编码 bytes 类型数据问题的解决方案
一段包含 bytes 类型的 protobuf 二进制数据，经过 pbjs 解码生成的 json 文件，再传递给 pbjs 编码后生成的二进制数据和原始数据差异巨大，经过一番探究，发现居然是 pbjs 的一个 bug，快来看看你是否踩过这个坑吧~ ......
药理学相关数据库
TCMSP 数据库：http://ibts.hkbu.edu.hk/LSP/tcmsp.php 备注：用于中药复方有效成分的检索和筛选，成分-靶点关系的获取，靶点-疾病关系的获取。如果做复方，主要利用该数据库进行 ADME 参数的筛选和分析。 Pubchem 数据库：https://pubchem. ......
《软件需求十步走》阅读笔记
软件需求是什么？是客户最基本的要求，是开发人员如何针对开发的基准，若软件开发没有了这一步，也就失去了此次开发的必要性，也就如同做了无用功。有需求的存在，对客户、开发团队双方来言是互利的存在，所以我们作为软件工程的学生，自当做好对需求的正确、准确分析。 软件需求是软件项目和产品开发的起点，更是用户和开 ......
MySQL 索引、事务与存储引擎
MySQL 索引、事务与存储引擎 MySQL 索引 1．索引的概念 ●索引是一个排序的列表，在这个列表中存储着索引的值和包含这个值的数据所在行的物理地址（类似于C语言的链表通过指针指向数据记录的内存地址）。 ●使用索引后可以不用扫描全表来定位某行的数据，而是先通过索引表找到该行数据对应的物理地址然后 ......
MySQL——处理JSON类型的数据
- MySQL对JSON类型数据的处理 参考视频：快速学习MySQL 8 JSON 注意，本文的键名也可以叫key，键值也可以叫value，意思是一样的 1. 字符串查询：JSON_EXTRACT 假设我们有一个表叫做testDemo，其中有一个字段叫做details，类型为JSON，他的数据结构如 ......
mysql常用函数
1、AVG()：返回平均值 2、COUNT()：返回行数 3、FIRST()：返回第一个记录的值 4、LAST()：返回最后一个记录的值 5、MAX()：返回最大值 6、MIN()：返回最小值 7、SUM()：返回总和 8、UCASE()：将某个字段转换为大写 9、LCASE()：将某个字段转换为小 ......
软件工程测试--hive数据分析，步骤
 \) 查询（二维前缀和）。 难点就在于如何去重相同的图形。 T3 这么喜欢出矩阵乘法吗。 一眼 \( ......
mysql8安装踩坑记
背景：已安装mysql5.7版本 问题一：默认的3306端口被占用 进入mysql5.7的my.ini文件，更改port为3307或者其他未被占用的端口 问题二：Install/Remove of the Service Denied! cmd用管理员的身份运行，执行mysqld --install ......
机器学习笔记
机器学习笔记 mAP（mean Average Precision）在机器学习中的目标检测领域，是十分重要的衡量指标，用于衡量目标检测算法的性能。一般而言，全类平均正确率（mAP，又称全类平均精度）是将所有类别检测的平均正确率（AP）进行综合加权平均而得到的。 李课 理论部分 损失函数（Loss F ......
MySQL实战实战系列 06 全局锁和表锁 ：给表加个字段怎么有这么多阻碍？
今天我要跟你聊聊 MySQL 的锁。数据库锁设计的初衷是处理并发问题。作为多用户共享的资源，当出现并发访问的时候，数据库需要合理地控制资源的访问规则。而锁就是用来实现这些访问规则的重要数据结构。 根据加锁的范围，MySQL 里面的锁大致可以分成全局锁、表级锁和行锁三类。今天这篇文章，我会和你分享全局 ......
mysql 查询时额外查询一个index列，类似sqlserver的ROW_NUMBER()
-- 创建临时表CREATE TEMPORARY TABLE temp1 AS ( SELECT (@rowindex := @rowindex +1) AS rowindex,a.city_id,b.name as 'city_name' ,a.dept_name,a.final_point FR ......
雾里滑雪笔记（三）热力学第一定律
热一律及其衍生物 一、热力学第一定律的基本内容 热力学第一定律是能量守恒定律在一定条件下的表现形式。为了理解这种说法，我们考虑所有可能的形式的能量。 系统的总能量可以分为三部分：系统在外力场中的势能或位能 $V$ ，系统整体运动的动能 $T$ ，和系统的内能，即热力学能 $U$ 。 $$E=T+V+ ......
Mysql数据库定时备份到OSS
背景 mysql运行在Docker中，计划每天定时备份数据并存储到阿里云OSS。其中用到了定时任务crontab、云存储管理rclone、shell脚本 部署脚本 # 创建目录 mkdir -p ~/task cd ~/task # 创建主备份脚本 touch backup_main.sh # 创建 ......
echarts 使用双Y轴时，数据差距大，对不齐的问题，已解决
两个不同种类的数据差距大 使用dataset的option配置项 option = { legend: {}, tooltip: {}, dataset: { dimensions: ['model', '评分数', '评分值'], source: [ { model: 'FBA', 评分数: 15 ......
mysql5.7的一些日常操作
查看库 MySQL [mysql]> show databases; + + | Database | + + | information_schema | | auditlog | | mysql | | nacos_config | | performance_schema | | sys | ......
Mysql 字符集不一致导致连表异常的解决
Mysql 字符集不一致导致连表异常的解决 做一个简单的如下的连表查询，居然直接提示错误，居然是字符集不一致的问题，本文记录一下mysql的字符集类型，感兴趣的可以了解一下。 目录 1. 解决方法 2. mysql字符集 字符集 校验规则 做一个简单的如下的连表查询，居然直接提示错误，居然是字符集不 ......
MySQL运维1-日志
一、错误日志 错误日志是MySQL中最重要的日志之一，它记录了当MySQL启动和停止时，以及服务器在运行过程中发生的任何严重错误时的相关信息，当数据库出现任何故障导致无法正常使用时，建议首先查看此日志 错误日志默认是开启的，默认存在目录/var/log/，默认的日志文件名为mysqld.log, 但 ......
SDTM初学笔记 - [001] - SDTM基础概念学习
SDTM，全称Study Data Tabulation Model，围绕着observations的概念构建，observations由研究期间收集的一些离散信息组成，通常对应于数据集中的rows。 1 Domains 一个domain是关于一个特定topic的观测的集合。 SDTM的首要目的是展 ......
异常检测：探索数据深层次背后的奥秘《下篇》
异常检测：探索数据深层次背后的奥秘《下篇》 异常检测——高维数据异常检测：孤立森林 在实际场景中，很多数据集都是多维度的。随着维度的增加，数据空间的大小（体积）会以指数级别增长，使数据变得稀疏，这便是维度诅咒的难题。维度诅咒不止给异常检测带来了挑战，对距离的计算，聚类都带来了难题。例如基于邻近度的方 ......
MySQL实战实战系列 04 深入浅出索引（下）
在上一篇文章中，我和你介绍了 InnoDB 索引的数据结构模型，今天我们再继续聊聊跟 MySQL 索引有关的概念。 在开始这篇文章之前，我们先来看一下这个问题： 在下面这个表 T 中，如果我执行 select * from T where k between 3 and 5，需要执行几次树的搜索操作 ......
（转）Python描述数据结构之线索二叉树篇
原文：https://blog.csdn.net/qq_42730750/article/details/108285846 前言 本篇章主要介绍线索二叉树，包括线索二叉树的基本概念、构造及遍历，并用Python实现其创建及其遍历等操作。 1. 基本概念 上篇博客介绍的二叉链表的存储结构体现的只是一 ......
对企业数据分析来说，使用数据可视化至关重要的几个原因？
在当今信息时代，企业面临着大量的数据产生和积累。这些数据蕴含着巨大的价值，可以为企业提供深入洞察、支持决策以及发掘业务机会。然而，将这些庞大的数据转化为有意义的见解并进行决策，并不是一件容易的事情。这正是为什么数据可视化在企业数据分析中至关重要的原因之一。 1. 向日益忙碌的管理层传递信息：高层管理 ......
Kettle遍历记录集循环提取他表数据
假设有员工表 with a as ( select 1 id , '张三' name,'男' 性别,'销售1部' 部门 from dual union all select 2 id , '李四' name,'男' 性别,'销售2部' 部门 from dual union all select 3 ......