数据 持久性 数据备份 分布式
09-基础SQL-DQL(数据查询语言)-聚合函数（count、max、min、avg、sum）
DQL-介绍（常用） DQL英文全称是Data Query Language（数据查询语言），数据查询语言用来查询数据库中表的记录 查询关键字：SELECT DQL-语法 ......
huggingface下载的.arrow数据集读取与使用说明
huggingface下载的.arrow数据集读取与使用说明 from datasets import load_from_disk from datasets import load_dataset dataset_cnn = load_dataset("ccdv/cnn_dailymail", ......
08-基础SQL-DQL(数据查询语言)-条件查询（WHERE）
DQL-介绍（常用） DQL英文全称是Data Query Language（数据查询语言），数据查询语言用来查询数据库中表的记录 查询关键字：SELECT DQL-语法 DQL-条件查询 语法： SELECT 字段列表 FROM 表名 WHERE 条件列表; 条件： LIKE查询（模糊查询） % ......
（数据科学学习手札155）基于martin为在线地图构建字体切片服务
本文示例代码已上传至我的Github仓库https://github.com/CNFeffery/DataScienceStudyNotes 1 简介 大家好我是费老师，在之前的一篇文章（基于martin的高性能矢量切片地图服务构建）中我为大家介绍过martin的安装与使用，它是由maplibre开 ......
使用docker 搭建xtrabackup服务，实现mysql全量和增量备份
根据前面的mysql备份调研得知，mysql的备份重头戏就是xtrabackup，mysqldump只能算开胃菜 本篇就着重讨论下xtrabackup的使用，由于考虑到维持虚拟机环境的整洁，和搭建使用的通用和便利性，这里选择基于docker环境使用 照惯例，学习任何一个工具最佳途径就是研读官方文档， ......
mysql数据库死锁
转载自：https://zhuanlan.zhihu.com/p/506662991?utm_id=0 什么是死锁 说到死锁，还是先来复习下什么是死锁吧。 死锁是指两个或两个以上的进程在执行过程中，由于竞争资源或者由于彼此通信而造成的一种阻塞的现象，若无外力作用，它们都将无法推进下去。此时称系统处于 ......
07-基础SQL-DQL(数据查询语言)-基础查询
DQL-介绍（常用） DQL英文全称是Data Query Language（数据查询语言），数据查询语言用来查询数据库中表的记录 查询关键字：SELECT DQL-语法 DQL-基本查询 查询多个字段 SELECT 字段1, 字段2, 字段3... FROM 表名; SELECT * FROM 表 ......
浏览器标签页切换获取数据
refresh() { /* 浏览器标签页切换会触发"visibilitychange"事件*/ document.addEventListener('visibilitychange', e => { // 切换显示标签 if (document.visibilityState 'visible' ......
python连接数据库到excel 第二回
#使用前建议看一下sqllalchemy和create_engine,主要就是数据库拉数据导入excel #下面是代码部分from sqlalchemy import create_engine ,text #利用sqlalchemy 顺带用create_engine,text 区分大小写 impo ......
06-基础SQL-DML(数据操作语言)
DML介绍 DML英文全称是Data Manipulation Language（数据操作语言），用来对数据库中表的数据记录进行增删改操作 DML-添加数据 给指定字段添加一条数据 INSERT INTO 表名 (字段名1, 字段名2, ...) VALUES (值1, 值2, ...); 给全部字 ......
聊聊分布式 SQL 数据库Doris(三)
详细内容阅读: Apache Doris 分区分桶新功能 与 数据划分. 在此基础上做总结与延伸. 在 Doris 的存储引擎规则: 表的数据是以分区为单位存储的，不指定分区创建时，默认就一个分区. 用户数据首先被划分成若干个分区（Partition），划分的规则通常是按照用户指定的分区列进行范围划 ......
使用docker 搭建xtrabackup服务，实现mysql全量和增量备份
mysql数据库的备份是运维的重中之重，是保障服务灾难恢复的最后一道屏障 在我的构想里，一个完备的mysql高可用体系应该包括高可用架构和一套基础的数据库备份方案 高可用架构：MM+ Keepalived，PXC（Percona XtraDB Cluster）或者GR（Group Replicati ......
请求扩展、蓝图、flask-session、数据库连接池、wtforms、flask-script、信号、flask-cache
请求扩展 #1 before_request:请求来了会走，依次从上往下执行，但是如果其中一个返回了 响应对象 ,后续的就不走了，视图函数也不走而来 #2 after_arequest：请求走了，会从下往上依次执行，它必须返回 响应对象 假设 ： 写了3个before_request 第二个返回了 ......
读取超图数据文件中的图元数量并输出
时不时有统计数据量的需求，本来都是挨个打开数来着，后来发现，其实就是sqlite 3的数据库，干脆写个脚本得了。 <?php // 本代码用于对超图数据文件中各个数据集的数量和类型进行统计 // udb/udd格式中udd是数据文件，udbx直接是数据文件，应该选择这两类文件作为参数,附加到代码命令 ......
为Oracle链接服务器使用分布式事务
1 现象 在SQL Server中创建指向Oracle的链接服务器，SQL语句在事务中向链接服务器插入数据。返回链接服务器无法启动分布式事务的报错。 2 解决 在Windows平台下，SQL Server依赖分布式事务协调器（MSDTC）来使用分布式事务，Oracle Client使用Oracle ......
数据结构——栈，队列，单调栈|队列，二叉树，链表，哈希
栈和队列问题： 循环队列问题: 首先要知道队列的最大大小是多少要多开一个空间才能确定到底是空还是满的比如说，如果是 \((rear+1)\)%\(size\)=\(front\), 那么这个队列就是空的，要至少剩余一个空间，就是要相隔两位此时队列已经满了，不能往里面添加元素了！所以有以下操作 保证队 ......
分布式锁笔记
分布式锁 基于上课和教材（分布式中间件技术实战-java版-钟林森）的笔记 1 概述 因为集群、分布式部署的服务实例一般是部署在不同机器上的，在分布式系统架构下，此种资源共享将不再是传统的线程共享，而是跨JVM进程之间资源的共享了。因此，为了解决这种问题，我们引入了“分布式锁”。 1.1 锁机制 在 ......
数据库迁移报错
The field admin.LogEntry.user was declared with a lazy reference to 'api.user', but app 'api' isn't installed. 解决方法：找到自己的/python3X/lib/site-packages/d ......
05-基础SQL-DDL(数据定义语言)-数据库操作
DDL-数据库操作 1.查询 查询所有数据库 SHOW DATABASES; 查询当前数据库 SELECT DATABASE(); 2.创建 创建一个数据库 CREATE DATABASE [IF NOT EXISTS] 数据库名 [DEFAULT CHARSET 字符集] [COLLATE 排序规 ......
【平台使用】数据同步器
  按关键字提取为结构化文件(Excel)，免安装下载即用，防泄密软件，可离线断网使用 ......
如何做一个优秀的数据分析项目？
数据分析项目规划,数据收集和清洗,探索性数据分析（EDA）,特征工程和模型选择,数据分析结果呈现,优秀的数据分析实践,数据分析报告写作,数据可视化方法 ......
php提前返回数据,后面代码继续执行封装函数
/* 中断并返回数据,后面程序继续执行,避免用户等待(immediate) * 可用于返回值后,继续执行程序,但程序占得所以自由没有释放,一致占用,务必注意,最好给单独脚本执行 * @param string|array $data 字符串或数组,数组将被转换成json字符串 * @param in ......
数据分析方法之一：标签分析法
标签分析法（Tag Analysis Method）是一种常用的数据分析方法，它基于对数据中的标签进行统计和分析，以揭示数据的特征和关联。标签分析法广泛应用于社交媒体数据、商品评论、用户标记等领域，它可以帮助我们了解用户行为、产品特征以及社交关系等方面的信息。 理论基础 标签分析法的核心思想是将数据 ......
数据驱动能源未来：发电厂地区可视化的实用性与优势
随着全球能源消费的不断增长，电力需求也在不断上升。作为能源行业的重要组成部分，现代发电厂扮演着不可替代的角色。而现代发电厂的数据管理和监控系统，则是确保其安全、高效、稳定运行的重要手段。在这个背景下，现代发电厂地区可视化应运而生，成为了电力行业的新趋势。 什么是现代发电厂地区可视化？ 现代发电厂地区 ......
mysql 统计所有表的数据量
在mysql里是可以查询information_schema.tables这张表的，然后获取我们想要的信息： SELECT table_rows,table_name FROM information_schema.tables WHERE TABLE_SCHEMA = 'mysql' an ......