数据库 笔记 数据mysql
R语言主成分、因子分析、聚类对我国城镇私营单位就业人员平均工资数据研究与分析
全文链接:https://tecdat.cn/?p=34517 原文出处:拓端数据部落公众号 分析师:Huarui He 数据显示2019年全国城镇私营单位就业人员年平均工资为53604元,比上年增长8.1%,而2019年全国城镇非私营单位就业人员年平均工资为90501元,名义增长率9.8%,实际上 ......
数据可视化为何能够在众多行业中广泛应用?
数据可视化作为一种强大的工具,在众多行业中得到了广泛的应用,其价值和优势不断被发掘和利用。让我们一起来探讨数据可视化之所以在各个行业中备受青睐的原因吧。 无论是商业、科学、医疗保健、金融还是教育领域,数据可视化都在起到重要作用。它不仅仅是简单地将数据呈现出来,更是帮助我们理解、分析和利用数据的有力工 ......
数据结构---队列
队列(Queue)是一种特殊的线性表,特殊之处在于它只允许在表的前端(front)进行删除操作,而在表的后端(rear)进行插入操作。这种操作方式通常被称为FIFO(First In First Out,先进先出)。 队列中的插入操作也被称为入队(enqueue),而删除操作则被称为出队(deque ......
数据结构---栈
栈(Stack)是一种线性数据结构,它按照后进先出(LIFO, Last In First Out)的原则存储和管理数据。这意味着最后一个被添加到栈中的元素将是第一个被移除的元素。 栈的主要操作包括: 压栈(Push):在栈的顶部添加一个元素。 弹栈(Pop):移除栈顶部的元素。 查看栈顶(Peek ......
MySQL运维3-分库分表策略
一、介绍 单库瓶颈:如果在项目中使用的都是单MySQL服务器,则会随着互联网及移动互联网的发展,应用系统的数据量也是成指数式增长,若采用单数据库进行存储,存在一下性能瓶颈: IO瓶颈:热点数据太多,数据库缓存不足,产生大量磁盘IO,效率低下,请求数据太多,带宽不够,网络IO瓶颈。 CPU瓶颈:排序、 ......
go-zero开发入门之网关往rpc服务传递数据
go-zero 的网关往 rpc 服务传递数据时,可以使用 headers,但需要注意前缀规则,否则会发现数据传递不过去,或者对方取不到数据。 go-zero 的网关对服务的调用使用了第三方库 grpcurl,入口函数为 InvokeRPC: grpcurl.InvokeRPC(r.Context( ......
笔记:Qt开发之多线程的实现(QThread、moveToThread)
目标:了解Qt实现多线程的两种基本方式(QThread、moveToThread),各自的实现方式、使用场景。1,子类化QThread实现方式:继承QThread类,重写run()函数实现多线程class WorkerThread : public QThread { Q_OBJECT public ......
笔记:Qt开发之定制化qDebug()函数
目标:实现qDebug()函数的定制输出,包含文件名、函数名、行数等信息1,通过qSetMessagePattern函数,实现定制化输出int main(int argc, char **argv) { QApplication app(argc, argv); // 改变缺省消息处理程序的输出,信 ......
clickhouse sql优化笔记
1.order by sort_field limit 1 by group_f1, group_f2 sql目的:根据group_f1,group_f2去重并按照sort_field排序保留第一个 当数据量很大时,order by 操作非常慢而且占用内存很大,容易导致oom 优化方案:可以先分组, ......
C++学习笔记八:极限和数学运算
1) <limits>库: 1.1 源文档: https://en.cppreference.com/w/cpp/types/numeric_limits #include <limits> 1.2 库函数: 函数解释: 对于一个浮点数,lowest表示最小的可表示的负数,min表示最小的可表示的接 ......
Quick BI 数据分析 - Alibaba Cloud的文档PDF
下载地址:https://static-aliyun-doc.oss-cn-hangzhou.aliyuncs.com/download%2Fpdf%2F164487%2F%25E6%2595%25B0%25E6%258D%25AE%25E5%2588%2586%25E6%259E%2590_int ......
DDS(Data Distribution Service) 数据分发服务
DDS是一个以数据为中心的中间件协议和API标准,意为用户只关心自己想要的数据,数据通过Topic进行标识,这样发布者根据主题发布数据,订阅者根据自己感兴趣的主题订阅数据。这便是DDS的核心,以数据为中心的发布-订阅模型DCPS(Data-Centric Publish-Subscribe) 如果是 ......
【Python爬虫】爬虫框架Scrapy初使用_爬取4399游戏页面数据
Scrapy简介 Scrapy 是一个用于爬取和提取数据的开源web抓取框架。它提供了一个强大的机制,让开发者可以轻松地创建和管理爬虫程序,以从网站上自动提取结构化的数据。 以下是Scrapy的一些主要特点和优势: 强大灵活的爬取能力:Scrapy具有高度可配置的请求处理和数据提取功能。它可以轻松地 ......
第二节 数据类型
数据类型 Kotlin的基本数据类型与Java、C++基本对应。事实上绝大多数程序语言的基本数据类型都差不多。 在Java中8中基本数据类型不属于类,也就不具备“对象”特征,无法进行面向对象操作。Java的解决方案是提供包装类将基本数据类型进行封装,使之每个包装类对象封装一个基本数据类型数值。而在K ......
【Centos】Centos 7.6 安装 MySQL 8
1 前言 接上节,安装完 PostageSQL,我们继续安装 MySQL,因为 XXL-JOB使用的是 MySQL。 2 安装步骤 2.1 卸载默认 rpm -qa|grep mariadb 用于查看有没有安装mariadb(将mariadb换为mysql即可查看有无安装mysql) rpm -e ......
Mysql count(*)、count(1)、count(主键)、count(普通字段) 性能对比
count(*): 底层会转化为 count(0) 来处理,默认横向扫描聚集索引树,如果有二级索引就扫描二级索引树(因为二级索引树更小,扫描成本低),扫描到一行记录之后,将该记录返回给 Server 层,由于参数是 0,不为 NULL,所以不需要读取记录中的任何字段,直接将 count 变量加 1 ......
.net批量插入到oracle数据库--三种方式对比,亲测
根据上篇的内容,简单测试了三种方式的对比,需要使用的,请自行根据需求优化。。。 1、创建测试表 CREATE TABLE T_TEST ( ID NUMBER(9) not null, NAME NVARCHAR2(30) not null, AGE NUMBER(2), CREATEDATE DA ......
进/线/协程--引自阿秀的学习笔记
进程、线程与协程区别 1、进程是资源分配的基本单位,运行一个可执行程序会创建一个或多个进程,进程就是运行起来的可执行程序 2、线程是资源调度的基本单位,也是程序执行的基本单位,是轻量级的进程。每个进程中都有唯一的主线程,且只能有一个,主线程和进程是相互依存的关系,主线程结束进程也会结束。 3、线程共 ......
2023年的PHP项目部署笔记。什么?还有人用PHP?
前言 这是我第一次用 PHP 的包管理工具 composer 一开始用 docker 进行部署,但一直出问题,最后还是选择直接在服务器上安装 php-fpm 搭配 nginx 的方案了。 PS:docker方式真的搞得心好累,现在回想起来还心有余悸😢 docker方案 先把我的 docker 方案 ......
《构建之法》读书笔记(一)
最近看了《构建之法》这本书,我从书中获取到了许多关于软件工程这一方面的知识。 软件企业=软件+商业模式。对于软件工程以及行业,程序是基本功,但是在算法和数据结构之上,软件工程决定了软件的质量,商业模式,影响了一个软件企业的成败,同时软件从业人员和软件企业的道德操守会极大的影响用户的操作与体验。也就是 ......
[学习笔记]在CentOS7中用Docker方式安装Jenkins
@目录原理:创建Docker网桥网络安装DinD创建镜像构建镜像运行容器 原理: Docker in Docker (以下简称 DinD)可以在 Container 中直接运行一个 Docker Daemon ,然后使用 Container 中的 Docker CLI 工具操作容器。其原理如下图 容 ......
基本数据类型
内容概要 八大基本数据类型 数字类型 整数(int) 浮点数(float) 字符串类型(str) 列表类型(list) 字典类型(dict) dictionary 布尔类型(bool) 元组类型(tuple) 集合类型(set) 今日详细内容 【一】数字类型 【1】整形、浮点型(int/float) ......
mysql in 多个字段
SELECT * FROM your_table WHERE (field1, field2) IN (('value1', 'value2'), ('value3', 'value4'), ('value5', 'value6')); ......
【论文阅读笔记】【OCR-文本识别】 SEED: Semantics Enhanced Encoder-Decoder Framework for Scene Text Recognition
SEED CVPR 2020 读论文思考的问题 论文试图解决什么问题?写作背景是什么? 问题: 如何利用全局的语义信息提高文本识别模型对低质量文本的鲁棒性和识别效果? 背景: 以往的基于 encoder-decoder 的文本识别方法通常基于局部的视觉特征解码出文本,忽略了对单词显式的全局语义信息的 ......
ETLCloud的应用策略——实时数据处理是关键
一、ETLCloud是什么? ETLCloud又称数据集成(DataOps),是RestCloud旗下的一款数据仓库管理工具,通过自动化数据转换和集成来实现企业内部和外部数据的无缝对接,从而帮助企业快速获取准确的数据信息,进而作出正确的业务决策。 ETLCloud的功能分为离线数据集成、实时数据集成 ......
秦疆的Java课程笔记:68 面向对象 什么是继承
继承的本质是对某一批类的抽象,从而实现对现实世界更好的建模。 extands的意思是“扩展”。子类是父类的扩展。 Java中类只有单继承,没有多继承。 继承是类和类之间的一种关系。除此之外,类和类之间的关系还有依赖、组合、聚合等。 继承关系的两个类,一个为子类(派生类),一个为父类(基类)。子类继承 ......
MySQL 查询导出数据字典
查询所有的表名和备注 SELECT TABLE_NAME, TABLE_COMMENTFROM information_schema. TABLESWHERE TABLE_SCHEMA = 'i_wlp_trans'; 查询所有表字段的内容及备注 SELECT TABLE_SCHEMA AS '数据 ......
秦疆的Java课程笔记:67 面向对象 封装详解
该露的露,该藏的藏 程序设计要求“高内聚,低耦合”。高内聚就是类的内部数据数据操作细节自己完成,不允许外部干涉;低耦合是仅暴露少量的方法给外部使用。 封装:数据的隐藏 通常,应禁止直接访问一个对象中数据的实际表示,而应通过操作接口来访问,这称为信息隐藏。 记住这句话就够了:属性私有,get/set。 ......
mysql递归查询
MySQL with Recursive的作用是基于一组初始数据,进行递归查询,返回符合条件的数据集。这种递归查询方式可以应用在很多场景下,比如对于树形结构、层级结构的数据处理,以及对数据进行分类汇总等。 MySQL with Recursive的使用限制? MySQL with Recursive ......