工具 数据mysql shell
MySQL（九）InnoDB数据结构
InnoDB数据结构 1 数据库的存储结构：页 索引信息和数据记录都是保存在文件上的，确切来说是保存在页结构中；另一方面，索引是在存储引擎上实现的，MySQL服务器上的存储引擎负责对表中数据的读取和写入工作。不同的存储引擎的存放格式是不同的，比如Memory甚至不使用磁盘进行存储数据。 磁盘和内 ......
MySQL（九）InnoDB行格式
InnoDB行格式 查看默认行格式： select @@innodb_default_row_format; 查看数据库表使用的行格式 mysql> use atguigudb; Reading table information for completion of table and column ......
MySQL（十）表空间结构：区、段与碎片区
表空间结构：区、段与碎片区 为什么要有区？ B+树中的每一层的页都会形成一个双向链表，双向链表之间的物理位置可能会离得非常远，当遇到范围查询的适用场景的时候，就会定位到最左边和最右边的记录，然后沿着双向链表一直扫描，而如果这其中的两个页面物理上离得特别远，就会成为随机I/O，由于磁盘和内存的速度 ......
线程间数据传递之ThreadLocal、InheritableThreadLocal、TransmittableThreadLocal
前言 在JAVA中线程之间传输数据的方式有多种，而本文旨在探讨ThreadLocal及其衍生类的使用场景。 使用场景 业务系统的参数传递：在我们的业务系统中可能会用到许多公共参数，可能是用户的token信息，在我们链路中可能某一个方法需要用到它，那么我们又不想一层层的传递它。 分布式系统要打通各个系 ......
【数据结构】串 - 习题
就一道题，开摆了orz 习题 等值子串 【问题描述】如果字符串的一个子串（其长度大于1）的各个字符均相同，则称之为等值子串。试设计一算法，求出串S中一个长度最大的等值子串；如果串S 中不存在等值子串，则输出信息no 【输入形式】输入一个字符串，并以！结束 【输出形式】输出第一个出现的最长字符串，如果 ......
关系数据库同步框架 Dotmim.Sync
推荐一款 在线+离线数据 同步框架 Dotmim.Sync 移动智能应用可以分为在线模式、纯离线模式与“在线+离线”混合模式。在线模式下系统数据一般存储在服务器端的大中型数据库（如 SQL Server、Oracle、MySQL 等），移动应用依赖于稳定可靠的网络连接；纯离线模式下系统数据一般存储在 ......
MYSQL基础知识之DDL语句
一、DDL概念 DDL（Data Definition Language）语言：数据定义语言，用来定义数据库对象，如数据库、数据表和数据字段，主要是进行定义/改变表的结构、数据类型、表之间的链接等操作。常用的语句关键字有 CREATE、DROP、ALTER 等。 二、数据库操作 2.1、linux环 ......
【数据结构】二叉树先序、中序、后序及层次遍历（C语言版）
一、图示展示 1. 先序遍历 先序遍历可以想象为，一个小人从一棵二叉树根节点为起点，沿着二叉树外沿，逆时针走一圈回到根节点，路上遇到的元素顺序，就是先序遍历的结果 先序遍历结果为：A B D H I E J C F K G 动画演示： 记住小人沿着外围跑一圈（直到跑回根节点），多看几次动图便能理解 ......
Shell基础
第一章 Shell基础 1 shell脚本介绍 什么是shell脚本？ 什么是shell命令？ $ ls $ cd $ pwd # 也就是liniux命令 shell脚本就是一系列shell命令的集合，还可以加入一些逻辑操作（if else for）将这些命令放到一个文件中。 文件 shell命令【 ......
大数据经典论文解读 - Hive
Hive 基于HDFS和MapReduce提供了一个基本的SQL的数据仓库方案。关键点：在数据库系统设计时，如何把查询语言和计算框架分离，做好对现有系统的复用 设计目标 写SQL执行MapReduce任务 数据模型 从MapReduce任务到SQL语言间存在很多鸿沟 序列化和类型信息，基于SQL的数 ......
shell命令调用http接口（curl方式）
shell命令调用http接口（curl方式） 样例 1、curl -H "Content-Length:0" -X GET "http://127.0.0.1:8080" 2、curl -H "Content-Type: application/json" -H "connection:Keep- ......
数据库的CRUD语句
Insert语句 values里面的值依次对应各个列 # 创建表goods CREATE TABLE goods( id INT , good_name VARCHAR(10), price DOUBLE); # 插入数据 INSERT INTO goods (id ,good_name) -- 该 ......
python批量处理Excel数据
# 1、 批量提取一个工作簿中所有工作表的特定数据'''import xlwings as xwimport pandas as pdapp = xw.App(visible = False, add_book = False)workbook = app.books.open('采购.xlsx') ......
Cassandra 数据模型
Cassandra 数据模型 Cassandra 的数据模型与我们通常在关系型数据库中看到的有很大不同。本文概述了 Cassandra 如何存储其数据。 Cluster Cassandra 数据库分布在多台一起运行的机器上。最外面的容器称为集群。对于故障处理，每个节点都包含一个副本，如果发生故障，副 ......
大数据经典论文解读 - 分布式锁 Chubby
Chubby 在谷歌“三驾马车”中3个系统都是单Master系统，这个Master是系统的单点，一旦Master故障集群就无法提供服务。使用Backup Master，通过监控机制进行切换。但是： 如何实现Backup Master和Master完全同步？ 监控程序也是单点，如何确定是Master宕 ......
IDEA Spring-boot 使用@Component注解的工具类，用@Autowired注入 @Service或者@Repository 会空指针（使用@PostContruct ）
IDEA Spring-boot 使用@Component注解的工具类，用@Autowired注入 @Service或者@Repository 会空指针（使用@PostContruct ） 原文链接：https://blog.csdn.net/ld_secret/article/details/10 ......
PL/SQL 基础---复杂数据类型和自定义类型
原文地址：https://blog.csdn.net/villare/article/details/53437924 PL/SQL 基础—复杂数据类型和自定义类型PLSQL中常用的自定义类型就两种： 记录类型、 PLSQL内存表类型（根据表中的数据字段的简单和复杂程度又可分别实现类似于简单数组和记 ......
highcharts 3D圆环图y轴数据为0 的较多，会出现显示不出来的问题
问题的效果图如下： 问题原因：好像是数据位置重叠了 解决办法：没有找到比较合适的解决办法，最后选择了不显示值为0的，代码如下所示（主要代码已用红色背景显示）： plotOptions: { pie: { allowPointSelect: true, cursor: 'pointer', dataL ......
MySQL 关闭 binlog 日志
【关闭binlog日志】 1、vim /etc/my.cnf 注释如下内容： #log-bin=mysql-bin #binlog_format=mixed #server-id = 1 #expire_logs_days = 10 2、重启 mysql 服务 /etc/init.d/mysql r ......
ansible 部署mysql 5.7
准备工作 创建roles目录 # mkdir -pv /data/apps/ansible/roles/mysql-5.7/{files,tasks,handlers,templates,vars} hosts [ubuntu] 172.16.18.31 ansible_ssh_port=22 an ......
Springboot 系列 (28) - Springboot+HBase 大数据存储（六）| Springboot 项目通过 RestTemplate 访问 HBase REST 服务
Apache HBase 是 Java 语言编写的一款 Apache 开源的 NoSQL 型数据库，不支持 SQL，不支持事务，不支持 Join 操作，没有表关系。Apache HBase 构建在 Apache Hadoop 和 Apache Zookeeper 之上。Apache HBase: h ......
MySQL中的锁（表锁、行锁）
锁是计算机协调多个进程或纯线程并发访问某一资源的机制。在数据库中，除传统的计算资源（CPU、RAM、I/O）的争用以外，数据也是一种供许多用户共享的资源。如何保证数据并发访问的一致性、有效性是所在有数据库必须解决的一个问题，锁冲突也是影响数据库并发访问性能的一个重要因素。从这个角度来说，锁对数据库而 ......
MySQL实现over partition by（分组后对组内数据排序）
开发中遇到了这样一个需求：统计商品库存，产品ID + 子产品名称都相同时，可以确定是同一款商品。当商品来自不同的渠道时，我们要统计每个渠道中最大的那一个。如果在Oracle中可以通过分析函数 OVER(PARTITION BY… ORDER BY…)来实现。在MySQL中应该怎么来实现呢。现在通过两 ......
php swoft 中的数据分层
不仅仅局限于 MVC 。将数据在model 这一个层面剖析开，优雅的处理数据 逻辑，缓存，业务，数据库操作的烦恼。 这个思路也适用于 thinkphp，hyperf，imi 等框架。不再简单的 实现 controller->model->view 的处理过程。 简化代码，每一层清晰地定义相应处理的数 ......
elasticsearch 7.8.X 数据类型与使用规范
1 核心数据类型 string 字符串 字符类型说明 text ⽤于全⽂索引，搜索时会自动使用分词器进⾏分词再匹配。字段内容会被分析，在生成倒排索引以前，字符串会被分析器分成一个一个词项 keyword 不分词，搜索时需要匹配完整的值 numberic 数值 整数类型说明 （1byte(字节)=8b ......
elasticsearch 数据认识 与 数据表\文档 的增删改
【Elasticsearch 7.8.1】当前版本 新建 mingduhui 的数据库 \ 检索库 向其中新增表 操作如下 PUT /mingduhui/_mapping/goods { "properties": { "id": { "type": "long", "store": true, } ......
elasticsearch 数据查查询、分词查询
1、普通查询 GET /mingduhui/goods/2 POST /mingduhui/goods/_search { "query": { //查询 "query_string": { //表示使用字符串查询 "default_field": "title", //指定搜索域 "query": ......
app安全扫描工具——ApplicationScanner
这几年国家对于app的安全要求提高了很多，公司每次上线时也需要进行安全测试，web端的有工具有owasp zap，移动端推荐一个好用的检测工具ApplicationScanner 1.这个只能用在linux或者mac，先下载包npm -g install js-beautify 2.新建一个目录，进 ......
[数据结构与算法] 树状数组
链接：树状数组_哔哩哔哩 （只有五分钟，多看几遍，就会了） 模板题：P3374 【模板】树状数组 1 - 洛谷 14.1 作用 求前缀和、区间和（跟前缀和的作用一样）； 元素修改之后能高效更新：（时间复杂度） 前缀和：$O(log \space n)$； 区间和：$O(log \space n)$； ......
MySQL的四种事务隔离级别
MySQL的四种事务隔离级别 本文实验的测试环境：Windows 10+cmd+MySQL5.6.36+InnoDB 一、事务的基本要素（ACID） 1、原子性（Atomicity）：事务开始后所有操作，要么全部做完，要么全部不做，不可能停滞在中间环节。事务执行过程中出错，会回滚到事务开始前的状态， ......