数据处理 字符串 脚本 字符
MySQL中对JSON数据操作(较全)
MySQL对JSON数据操作 链接:[(160条消息) 【MySQL】对JSON数据操作(全网最全)_mysql json_0世界和平0的博客-CSDN博客](https://blog.csdn.net/asd529735325/article/details/107205214) 1. 创建jso ......
数据结构之带头节点的单链表增删改查操作实现
单链表的定义 什么是单链表 单链表是一种链式存取的数据结构,用一组地址任意的存储单元存放线性表中的数据元素。 单链表的各个数据元素在物理上可以是离散存放的,每个结点除了存放数据元素外,还要存储指向下一个节点的指针。而顺序表是连续存放的,每个结点中只存放数据元素。 单链表的优点:不要求大片连续空间,改 ......
centos 安装 MySQL 并同步数据
下载mysql文件: 下载地址:https://dev.mysql.com/downloads/mysql/ #上传到服务器 scp mysql.tar root@192.168.50.147:/home/mysql/ 卸载系统自带mariadb: #查看已经安装的包名:yum list insta ......
docker swarm 部署logstash通过动态扩容消费海量数据
### 背景 > 海量数据需要接入logstash消费到ES、Kafka等, 如并发很高的nginx日志 ### 解决方案 - docker swarm部署logstash集群 - 通过docker config增加pipline、templates ### docker-compose文件 - d ......
Elasticsearch date数据类型
时间和日期类型是我们作为开发每天都会遇到的一种常见数据类型。和Java中有所不同,Elasticsearch 在索引创建之前并不是必须要创建索引的mapping。关系型数据库的思维就是在于写入数据之前,并不强制创建表结构。我们不用事先声明字段名称,字段类型以及长度等属性就可以直接向一个不存在的表中直 ......
JAVA实现多数据源分页
简述下思路: 举例:有A,B两个数据源的数据需要查询展示,优先展示A数据源数据,我使用的数据源是 clickhouse+mysql 1,因为需要优先展示A数据源嘛,那就直接通过条件优先查询A数据源数据 2,然后根据分页情况,判断A数据源数据量是否满足当前分页所需数据量。 有以下三种情况:先获取当前页 ......
同比环比数据可视化
引言 数据分析和可视化在现代商业环境中变得越来越重要。随着数据的迅速增长,我们需要有效的工具来解释和理解这些数据。 数据可视化提供了一种直观的方式,帮助我们从海量数据中提取有意义的见解,以支持业务决策。 同比环比图作为一种常见的数据可视化工具,提供了一种简单而有效的方法来比较不同时间段的数据变化。 ......
python列表数据处理方法小技巧
一、列表去重 比较简单的方法就是用集合set的属性:集合中不能出现重复的元素 例如: a = [1,2,3,4,5,4,3],例如 a1 =list(set(a)) ,则 a1 = [1,2,3,4,5] 如果同时还有个 :b = ['a','b','c','d','e','f','g'] 和 a ......
解密数据背后的故事:数据分析师的职业魅力
数据在当今信息时代中扮演着至关重要的角色,而数据分析师则是解读和发掘数据中隐藏信息的关键人物。作为数据分析师,他们运用统计学、机器学习和数据可视化等技术手段,从海量的数据中提取出有价值的信息和洞察,并将其转化为可供决策和行动的建议。数据分析师既是数据科学家,又是故事讲述者,他们能够通过数据背后的故事 ......
数据结构小记
# 线段树 ### 区间查询 线段树可以维护具有结合律的信息。 ### 区间修改 区间查询 加上修改后应当满足的前提是 1. 我们可以维护一个封闭的集合 $\mathcal{S}$,使得任一操作 $o\in\mathcal{S}$,且 $\mathcal{S}$ 对于复合封闭,即对任意 $u,v\i ......
C++ 异常处理
异常是程序在执行期间产生的问题。C++ 异常是指在程序运行时发生的特殊情况,比如尝试除以零的操作。 异常提供了一种转移程序控制权的方式。C++ 异常处理涉及到三个关键字:try、catch、throw。 throw: 当问题出现时,程序会抛出一个异常。这是通过使用 throw 关键字来完成的。 ca ......
数据结构1.2
# P4681 [THUSC2015]平方运算 ### 简要题意 给定一个序列,区间 ```.map([](int x) { x = x * x % p; });```,区间求和。 ```p``` 给定,为小质数。$N,M\le 105$。 ### 题解 而把一个数看作一个点,向其平方取模连一条边, ......
面试官:一个 SpringBoot 项目能处理多少请求?(小心有坑)
你好呀,我是歪歪。 这篇文章带大家盘一个读者遇到的面试题哈。 根据读者转述,面试官的原问题就是:一个 SpringBoot 项目能同时处理多少请求? 不知道你听到这个问题之后的第一反应是什么。 我大概知道他要问的是哪个方向,但是对于这种只有一句话的面试题,我的第一反应是:会不会有坑? 所以并不会贸然 ......
【C++库函数】stringstream-类型转换&&字符分割
继续填坑٩(•̤̀ᵕ•̤́๑),这次是 `stringstream`的内容,最初是看到它可以把字符串直接输出成int类型,惊了,但是一直不是很懂。在网上查了很多资料,才终于差不多理解。`stringstream` 是C++提供的一个字符串流,和 `cin`,`cout` 输入输出流类似,只不过它不是 ......
数据结构1.3
# [P8969 Dream with Dynamic](https://www.luogu.com.cn/problem/P8969) ### 简要题意 给定一个序列,区间加,区间 ```popcount```,单点求值。 ### 题解 对于一个操作序列 $A$,如果 $A$ 包含了至少一次 `` ......
一文搞懂数据库索引原理
前言 写数据库,我第一时间就想到了MySQL、Oracle、索引、存储过程、查询优化等等。 不知道大家是不是跟我想得一样,我最想写的是索引,为啥呢? 以下这个面试场景,不知道大家熟悉不熟悉: 面试官:数据库有几千万的数据,查询又很慢我们怎么办? 面试者:加索引。 面试官:那索引有哪些数据类型?索引是 ......
Oracle数据字典(各种视图、表)
数据字典是存放整个数据库实例重要信息的一组**表**,这些数据字典大部分都是SYS用户所有。 # 数据字典的构成 Oracle数据字典名称由前缀和后缀组成,使用下画线“_”连接。其代表的含义如下。 - USER_ :记录用户的对象信息。 - ALL_ :记录用户的对象信息及被授权访问的对象信息。 - ......
oracle数据块
# oracle数据块的基本概念 物理磁盘有物理磁盘的block概念 文件系统也有文件系统block概念 对于磁盘block和文件系统block,可以看回原来的笔记:磁盘专题 而oracle也有block概念,实际上就是基于文件系统block下基于自己定义的概念。 oracle在创建表空间、数据文件 ......
Oracle表空间和数据文件
# 表空间:tablespace **表空间就是:**存放数据库表、索引、等等对象的**逻辑空间**。 oracle数据在安装并创建实例后,默认会自动创建多个表空间。 ## ORACL默认表空间 ### SYSTEM表空间 - 存放oracle内部表和数据字典(各种视图、表),如表名、列名、用户名等 ......
DM8达梦数据库版本区别:开发版、标准版、企业版、安全版
DM8达梦数据库版本区别:开发版、标准版、企业版、安全版 达梦2021-01-19 6435 根据不同的应用需求与配置, DM 提供了多种不同的产品系列: DM 开发版 DM 开发版是指用于业务场景开发时所用的数据库,除不支持数据库集群等企业级功能,开发版提供了完整的功能,支持 TB 级数据量,支持 ......
perl学习笔记12_字符串处理
[TOC] 1. substr, rindex, 取出最后一个斜线 之后的所有内容: ```perl #说明: # rindex($a, "/")+1,表示从$a中找出最后一个"/"出现的位置(index); # 位置值加1,表示最后一个"/"出现的位置之后的index; # substr($a, ......
perl学习笔记10_时间处理
处理时间 [TOC] # 1. localtime localtime,将时间戳转换为可读的时间。 如果没有参数,转换为当前时间。 ```perl # 赋值给标量,得到一个适合人读的字符串。 # 返回Mon Oct 28 10:09:15 2013。 my $local = localtime ; ......
selenium滚动加载数据解决方案
有些网站时一直滚动就会加载新数据的,在selenium中解决方法: ```Python def loaddata_by_scroll(self, driver): js = 'return document.body.scrollHeight;' # 获取当前高度 check_height = dr ......
【3.0】Django框架之数据操作初识
# 【一】登录功能实现 ## 【1】form表单默认是post请求 - 添加的数据会默认拼接在url后面 ``` http://127.0.0.1:8000/login/?username=dream&password=521 ``` ## 【2】form表单的action参数 - 不写,向当前所在 ......
Selenium接管已经打开的浏览器并爬取数据
```Python """ P.S:需要接管现有浏览器 ** 使用步骤: 1、打开浏览器,设置好远程调试端口,并扫描登录淘宝。 chrome.exe --remote-debugging-port=9333 --user-data-dir="G:\spider_taobao"** 2、运行程序,自动 ......
Selenium浏览器属性、提取数据
# 浏览器属性 > 在使用selenium过程中,实例化driver对象后,driver对象有一些常用的属性和方法 1. `driver.page_source` 当前标签页浏览器渲染之后的网页源代码。 2. `driver.current_url` 当前标签页的url。 3. `dirver.ti ......
泛微OA节点后附加操作-update数据
### 1. 礼品领用申请流程,到人力资源部备案节点,由人力资源部填写“实际使用数量”,在该节点后减少对应礼品的库存数量。 ![](https://img2023.cnblogs.com/blog/1517467/202307/1517467-20230717111213551-1185941971 ......