数据库 笔记 数据mysql
利用NewtonSoft.Json的JsonScheme校验数据格式
推送的报文信息，需要校验格式是否正确，必传的是否传了，字符串长度是否超长。之前是把报文反序列化为类后，一个字段一个字段进行校验。JsonSchema可以一次性校验 校验对象的格式，如下： { "type": "object", "properties": { "soId": { "type": "s ......
如何处理海量数据并发
后端优化： 一：优化算法和代码 1.优化算法： （1）尽量避免使用嵌套循环，因为嵌套循环的时间复杂度很高，容易导致程序的性能下降。 （2）选择合适的数据结构，比如哈希表、二叉树、红黑树等，可以极大地提高程序的效率。 （3）尽量减少数据交换和数据拷贝的次数，避免频繁的数据操作，因为这会消耗大量的系统资 ......
httprunner 4.x学习 - 10.参数化(parameters)引用外部 csv 数据文件 和函数
前言 httprunner 4.x 实现参数化使用parameters 关键字，数据源有三种方式 1.在yaml 文件中直接写测试数据源 2.测试数据源写到csv文件 3.自定义函数，函数返回列表形式数据 独立参数 对于已有参数列表，并且数据量比较大的情况，比较适合的方式是将参数列表值存储在 CSV ......
高维数据惩罚回归方法：主成分回归PCR、岭回归、lasso、弹性网络elastic net分析基因数据|附代码数据
全文链接：http://tecdat.cn/?p=23378 最近我们被客户要求撰写关于高维数据惩罚回归方法的研究报告，包括一些图形和统计输出。 在本文中，我们将使用基因表达数据。这个数据集包含120个样本的200个基因的基因表达数据。这些数据来源于哺乳动物眼组织样本的微阵列实验 1 介绍 在本文中 ......
R语言用线性混合效应（多水平/层次/嵌套）模型分析声调高低与礼貌态度的关系|附代码数据
全文下载链接：http://tecdat.cn/?p=23681 最近我们被客户要求撰写关于线性混合效应的研究报告，包括一些图形和统计输出。 线性混合效应模型与我们已经知道的线性模型有什么不同？ 线性混合模型（有时被称为 "多层次模型 "或 "层次模型"，取决于上下文）是一种回归模型，它同时考虑了（ ......
Eviews回归分析股权集中度、股权制衡度与公司绩效关系：中小板上市公司数据
全文链接：http://tecdat.cn/?p=32345 原文出处：拓端数据部落公众号 本文深入分析了国内外关于股权结构与公司绩效的影响因素; 帮助客户运用回归分析法，以ROE作为公司绩效的度量指标，考察中小企业板上市公司股权集中度、股权制衡度对公司绩效的影响因素。 为了进行实证研究，选取了部分 ......
QT中线程睡眠对数据IO的影响——串口bug记录
这两天用QT做一个上位机，涉及到有一个数据发送完后需要用到延时，我一开始使用了线程休眠的方式进行延时： //发送读取指令 if (serialport->write(data) == -1) { qDebug() << "发送失败！"; }QThread::msleep(1000); serialp ......
第五章学习 循环结构,分支结构,break,continue,return的用法,接收用户数据的fmt.scanln
package main import "fmt" func main(){ //实现功能,键盘录入学生age,name,grage,是否为vip var age int fmt.Println("请录入年龄") //传入age地址的目的:scanln函数中,对地址的值进行改变,实际上是对age值进 ......
Django笔记三十九之settings配置介绍
本文首发于公众号：Hunter后端 原文链接：Django笔记三十九之settings配置介绍 这一篇笔记介绍 Django 里 settings.py 里一些常用的配置项，这些配置有一些是在之前的笔记中有过介绍的，比如 logging 的日志配置，session 的会话配置等，这里就只做一下简单的 ......
常见的写热点数据优化方案
在MySQL中当对一行数据进行更新时，通常都要加行锁，直到事务提交或回滚时才释放。同一时段内，对于同一个数据行，只有一个事务能够进行更新，其它事务需要等待。 在电商平台业务中，限购、秒杀是常用的促销手段。在这些场景下，大量对热点行的更新请求在极短时间间隔内到达后台数据库系统，必然造成严重的行锁竞争和 ......
第三十七天 数据库基础
一、数据存取演变史 1.文本文件 文件路径不一致: C:\a.txt D:\aaa\b.txt E:\ccc.txt 数据格式不一致: jason|123 tony$123 kevin@123 2.软件开发目录规范 规定了数据文件的大致存储位置: db文件夹 针对数据格式还是没有完全统一: 比如统一 ......
五月第一篇阅读笔记
人月神话读后感 书名《人月神话》中的人指的是人力，月指的是工作时间，主要的意思是人月作为一种衡量软件开发工作量的单位有其误导性，举例来说，1个人可以在10周之内做完的项目，10个人不一定可以在1 周之内完成。 其实在书中作者更进一步地指出，单纯地增加开发人力，不仅不能对应地减少项目的开发时间，甚至有 ......
《一类基础子串数据结构》摘抄及注解
基本子串数据结构 阅读 xtq 的 2023 年集训队论文《一类基础子串数据结构》，对它进行一个摘抄和注解。 按. 根据作者的语义，推测主要介绍的和字符串有关的结构叫做“基本子串结构”，而该结构和其相关的拓展（例如树链剖分部分）统称为“基础子串数据结构”。 1 前言 摘抄自 xtq 的论文： 字符串 ......
面试题之数据库存储引擎
复习老师讲得 什么是存储引擎？ 数据库针对数据采取的多种存取方式 如何查看常见存储引擎的方式？ show engines; 需要了解的四个存储引擎 MyISAM MySQL5.5之前默认的存储引擎 存取数据的速度快 但是功能较少 安全性较低 InnoDB MySQL5.5之后默认的存储引擎 支持事务 ......
【数据库测试】【shell脚本】查询同一个SQL执行多次，并统计每次耗时
场景说明 在数据库查询中会常见cold run与hot run，hot run是指将同一个SQL连续运行多遍。 运行脚本创建一个run.sh直接复制如下脚本 - 注意修改数据库的连接IP与密码等- queries2.sql 存放查询的SQL，请将queries2.sql 文件与run.sh放在同一个 ......
学习JavaScript数据结构与算法 第八章
八，字典和散列表 8.3 ES2015 Map 类 ECMAScript 2015 新增了 Map 类。 const map = new Map(); map.set('Gandalf', 'gandalf@email.com'); map.set('John', 'johnsnow@email.c ......
React笔记-组件(一)
React学习笔记-组件(一未完成) 特点 声明式 组件化 跨平台 React脚手架 a. 全局安装react脚手架 create-react-app npm install create-react-app -g & npx create-react-app my-app b. 使用create- ......
React笔记-样式(二)
React学习笔记-样式(二) 内联样式 import React from "react"; export default class LearnStyle extends React.Component { render () { return ( <div> {/* 以下两种方法都可以 一种不 ......
React笔记-事件(三)
React学习笔记-事件(三) 定义事件 React 元素的事件处理和 DOM 元素的很相似 但是有一点语法上的不同 React 事件的命名采用小驼峰式(camelCase)而不是纯小写 如点击事件onClick import React from 'react' export default cl ......
人月神话阅读笔记04
过去我是怎么做的 没有在写程序之前写关于程序的使用的文档（文档的表达应简介明确） 很少对程序进行全面的验证 为什么这样做不好 自己很久后再使用这个程序的话可能会忘记某些操作 这是不好的习惯，没有太程序的健壮性，自己知道输入什么合法而用户不知道，如果用户输入非法而导致程序崩溃就不好了 解决办法 慢慢尝 ......
React笔记-state(四)
React学习笔记-state(四) 概念 state的主要作用是用于组件保存 控制以及修改自己的状态 它算是组件的私有属性 不可通过外部访问和修改 只能通过组件内部的this.setState来修改 修改state属性会导致组件的重新渲染 注意: 如果直接通过this.state.xxx的方式修改 ......
React笔记-渲染列表Key(五)
React学习笔记-渲染列表Key(五) 渲染列表需要添加key属性 import React from "react" export default class LearnKey extends React.Component { state = { infos : [ {name : 'Bob' ......
如何进行MySQL源码调试（一条select语句的执行流程）
一、背景 MySQL是当今世上最受欢迎的使用最广泛的开源数据库，它的繁荣离不开它的开源特性。放在过去商业数据库的时代，大家都没有机会接触到数据库的源代码，但在如今开源数据库的时代，越来越多的人开始研究数据库的源码，并给社区贡献代码，MySQL官方每次发布新版本都要感谢一些在社区上贡献代码的程序员。现 ......
中国剩余定理学习笔记
给定 $n$ 组非负整数 $a_i, b_i$，其中 $b_i$ 两两互质，求解关于 $x$ 的方程组的最小非负整数解。 $\begin{cases} x \equiv b_1\ ({\rm mod}\ a_1) \ x\equiv b_2\ ({\rm mod}\ a_2) \ ... \ x \ ......
R数据分析：生存数据预测模型的建立和评价（二）timeROC与决策曲线
上篇文章依照jama surgery的一篇文章给大家写了生存数据预测模型评价的C指数、校准曲线和模型验证结果的做法，其实生存数据预测模型的评价方法还有很多，本期接着往下看。 Time-dependent ROC 当结局是一个二分类变量的时候，考虑模型性能的两个指标一个叫灵敏度和特异度，我们希望两个都 ......
Python获取jsonp数据
编写爬虫时不可避免遇到 jsonp 格式的响应内容，想要获取实际的数据需要对响应内容进行一些操作，本文简单介绍了三种获取方式，分别从请求头、字符串、js 入手。 ......
带你完成数据库的clickbench性能测试(小白都能看懂)
clickbench官网链接：https://benchmark.clickhouse.com/ 如下采用的数据库为分析型数据库支持MySQL协议，其他所有的数据库操作方法均类似 测试背景 利用clickhouse的clickbench测试数据与查询SQL对AtomData进行了性能测试，所有的测试 ......
数据结构（python版）—— 1、前期知识和综述
前言 为了提高代码质量和后续处理需求的能力，有必要再复习下算法和数据结构，为后续ESP32项目和数据处理打下坚实基础。故根据所学整理此系列文章。文章分为： 1、概述：计算理论 2、算法分析 3、基本结构（线性表、链表、栈和队列） 4、递归（递归算法和分治策略） 5、排序与查找 6、树及其算法 7、图 ......
学习JavaScript数据结构与算法 第七章
7. 集合 7.4 ESMAScript 2015 Set 类 ECMAScript 2015 新增了 Set 类作为 JavaScript API 的一部分。我们可以基于 ES2015 的 Set 开发我们的 Set 类。 const set = new Set() set.add(1) cons ......