工具 数据mysql shell

使用Excel来整理数据

日常工作中经常会遇到“导数据”的需求,大多数时候,丢过来的Excel数据都是不符合数据库要求的,没办法直接通过程序去导入,即使是按照程序要求的模板,导入过程也可能因为各种格式问题导入失败,而往往失败后的调试跟踪要花大量时间和精力。而导入这项工作很多时候又恰恰只需要做一次就够了,如何能让“导数据”尽可 ......
数据 Excel

关于sap-hana-数据库-在pacemaker集群中迁移主控节点-master节点

环境介绍,hana数据库的两个节点:azphxxxdb01 azphxxxdb02 目前master位于azphxxxdb02,现在需要切换回azphxxxdb01 需要确保 Pacemaker 没有任何失败的操作(通过 pcs 状态检查)、没有任何意外的位置约束(例如迁移测试的遗留内容), 并且 ......
节点 集群 pacemaker sap-hana 数据库

mysql基础

SQL语句 SQL语句分类 SQL分类: 数据定义语言:简称DDL(Data Definition Language),用来定义数据库对象:数据库,表,列等。关键字:create,alter,drop等 数据操作语言:简称DML(Data Manipulation Language),用来对数据库中 ......
基础 mysql

数据库_duckdb_本地访问远程数据_ aws s3

Extensions 扩展 Full Text Search HTTPFS JSON Postgres Scanner SQLite Scanner python3 -c "import duckdb; duckdb.query('INSTALL httpfs;');" Loading an ext ......
数据 数据库 duckdb aws s3

MySQL----日期相关

获取当前日期select curdate();结果: 2023-04-27 获取当前日期为几号select day(curdate())结果:27 在当前日期上加上时间间隔select DATE_ADD(curdate(),interval 2 day) 结果:2023-04-29 一、获取本月第一 ......
日期 MySQL

MySQL

1、回表查询与索引覆盖 聚簇索引:主键索引一般是聚簇索引。聚簇索引的非叶子结点记录的是索引,叶子结点记录了对应的数据行(所有的字段)。 非聚簇索引:叶子结点记录的是普通索引列与主键的对应关系(不记录别的字段)。 如果走了普通索引,但想要 select 走的索引之外的字段,那么在根据非聚簇查完之后,就 ......
MySQL

python 连接数据库

使用pymysql连接数据库 import pymysql conn = pymysql.connect( host="10.00.0.00", port=31379, user="root", password="123456", database="acc_test" ) # 模拟从数据库获取单 ......
数据库 数据 python

从零开始量化交易 - 工具选择与第一个策略

在学习了一定的理论知识之后,需要对其进行模拟练习以加深理解。 量化交易的核心在于如何构建自己的策略,以及对于构建的策略进行验证。就好像写代码一样,首先要配置代码的编写缓解,以及代码的运行测试环境。 因此,首先进行工具或平台的选择,以及编写策略的必要配置。 平台的选择 对于一窍不通的我来说,这一步首先 ......
策略 工具

如何用看板工具做任务管理

​利用Leangoo领歌看板管理工作和任务,可以让团队更高效,也可以一目了然的了解任务进度及问题 1、首先创建一个任务看板 进入Leangoo系统,使用轻量级项目模板创建一个任务看板。 任务看板内包含:列表和任务卡片,列表一般代表任务流程及状态(可自定义任务流程),一张卡片为一个任务 拖动任务卡片到 ......
看板 任务 工具

spring boot jpa MYSQL教程mysql连接的空闲时间超过8小时后 MySQL自动断开该连接

Sun Apr 16 08:15:36 CST 2023There was an unexpected error (type=Internal Server Error, status=500).PreparedStatementCallback; SQL [select userId from ......
空闲 小时 时间 教程 spring

Mysql查询父、子节点

一、概述 相信大家在实际的开发工程中,都会遇到需要依据当前节点,查询出其上级节点或下级节点的需求。下面就我在工作过程中的处理方式记录如下,如有片面之处,欢迎批评指正。 二、示例表结构 初始表数据如图: 查看表结构和初始数据脚本 DROP TABLE IF EXISTS `t_cfg_region`; ......
节点 Mysql

MySQL8 表空间缓解磁盘压力

一 、背景 云上磁盘io饱和,为了缓解MySQL8压力,可以把指定表迁移到指定表空间目录,创建语法如下: CREATE [UNDO] TABLESPACE tablespace_name [ADD DATAFILE 'file_name'] [AUTOEXTEND_SIZE [=] value] [ ......
磁盘 压力 MySQL8 MySQL 空间

jmeter使用之请求体包含多个数据

在使用jmeter做压测时,除了增加并发数,还可能在请求体中增加多个字段相同的list。如图: 如果是几百条可以复制粘贴,但是几千上万条复制粘贴就比较费时费力了。另外可能这些数据并不是完全相同,可能还需要并发执行。 一.数据容器 当请求体是由多个字段相同的list组成时,可以把这些list存放在tx ......
多个 数据 jmeter

数据结构之图

图 定义 无向图、有向图 子图、入度、出度 连通图、强连通图 总结: 连通无向图的最小生成树中,顶点数 = 边数 + 1 强连通有向图的 边数 至少等于 顶点数。 AOV网 AOV网(顶点表示活动的网)顶点表示活动,弧表示活动发生优先关系的有向图。在AOV网中,通过进行拓扑排序可以得到一个有序序列或 ......
数据结构 结构 数据

MySQL - SQL语句增加字段/修改字段/修改类型/修改默认值

1. 添加字段,比如我在数据表中添加一个 age 字段,类型为int(11) ALTER TABLE player ADD COLUMN age int(11); 2. 修改字段名,将 age 字段改成player_age ALTER TABLE player RENAME COLUMN age t ......
字段 语句 类型 MySQL SQL

如何恢复回收站清除的数据

打开注册表,按下Win+R,输入regedit 打开之后,一次打开如下注册表内的文件夹 HEKEY——LOCAL——MACHIME/SOFTWARE/microsoft/WINDOWS/ CURRENTVERSION/EXPLORER/DESKTOP/NAMESPACE 进入这个位置后,在左边空白处 ......
回收站 数据

R语言中数据框除以向量

R语言中数据框除以向量,规则是数据框中的元素按照列依次递增,除数向量循环递增。 001、 a <- c(20, 10, 6, 8) b <- c(2, 4, 12, 8) c <- c(6, 8, 14, 14) dat <- data.frame(a, b, c) dat idx <- c(2, ......
向量 语言 数据

DataX-在Windows上实现postgresql同步数据到mysql

场景 DataX-阿里开源离线同步工具在Windows上实现Sqlserver到Mysql全量同步和增量同步: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/130330353 在上面实现sqlserver到mysql的数据同步之 ......
postgresql Windows 数据 DataX mysql

Linux安装Mysql5.7

前言:还是和以前一样,linux安装软件的目录都是data目录 1.进入data目录,创建mysql目录并进入该目录 cd /data mkdir mysql cd mysql 2.删除默认配置,不推荐rm -rf rm /etc/my.cnfy 3.上传 "mysql-5.7.23-linux-g ......
Mysql5 Linux Mysql

为什么FIFO 第一轮读出数据正确,第二轮读出数据的时候读出的是x?FIFO 读出数据有误

仿真如下所示,第一轮写入1 2 3 4 5 6 7 8 读出来都是对的, 后来写9 10 11...等, 读出来就是x了, 这是为什么呢? 这说明指针在指到FIFO 尽头以后出了什么问题。。。。。 最后发现是这里指针的位宽是3 ,结果定义为了4位,这样的话,当你指针累计到111的时候并没有返回到00 ......
数据 FIFO 时候

电商API接口的发展,淘宝API商品详情数据

淘宝商品详情接口,京东商品详情接口,1688商品详情接口,拼多多商品详情接口,虾皮商品详情接口,lazada商品详情接口 ......
API 接口 详情 商品 数据

轻松存储千亿级数据,知乎基于Doris的DMP系统架构实践

1)提升查询效率 自动探测 SQL 复杂查询条件预先合并成一个派生特征的 bitmap,预测和圈人时对复杂条件 SQL 重写为派生特征。 2)提升导入速度 Spark 直接写 Doris Tablet 文件,并挂载到 FE。 针对大导入场景与 Doris 团队共建,提升写入效... ......
架构 数据 系统 Doris DMP

mysql字段类型json更新

update tbl_test set test_json = JSON_REPLACE( test_json, '$."jsonFieldName"', ( CAST(test_json -> '$."jsonFieldName"' AS SIGNED INTEGER) - 70 * 365 -1 ......
字段 类型 mysql json

Python数据类型

Python语言中有6个标准数据类型。 不可变数据(3 个):Number(数字)、String(字符串)、Tuple(元组); 可变数据(3 个):List(列表)、Dictionary(字典)、Set(集合)。 有序数据:元组,列表 无序数据:集合,字典 数字number 整型int 正或负整数 ......
类型 数据 Python

基于chatGPT的问答机器人开发-qdrant向量数据库的集合功能封装

之前一直再开发基于GPT的问答知识库机器人,主要是靠qdrant的向量搜索,搜索出相关的条目,然后发送给GPT回答 qdrant向量数据库有集合的概念,相当于表,每个集合里面可以创建多个向量数据。 那么针对集合的操作就是下面这样的,集合列表,创建集合,删除集合 集合列表接口: http://127. ......
向量 机器人 机器 chatGPT 功能

Linux安装配置达梦数据库教程

1.安装规范:为方便之后统一运维管理,现规定以下信息: 安装包和密钥存放目录:/boban 安装目录:/home/dmdba/dmdbms 数据目录:/dbdata/dmdata 挂载目录:/mnt 2.数据安装工作: 数据库安装准备工作: 创建组:[root@localhost /]# group ......
数据库 教程 数据 Linux

语义分割数据标注

1,首先安装标注软件。在命令行窗口中输入。 pip install labelme 2,输入labelme。 进入标注软件。 3,点击Open Dir选择图片文件路径 4,点击Create Polygons对图片进行标注 我们需要==标注的对象是船舱口及抓斗==。如下图是我标注好的一张图片。对于船舱 ......
语义 数据

数据结构——并查集

并查集的作用: 可以在近乎O(1)的时间内完成以下两个操作 1、将两个集合合并 2、询问两个元素是否在一个集合中 基本原理: 用“树”的形式来维护每一个集合,树根的编号就是整个集合的编号,每个结点存储它的父结点(如:p[x]表示x的父结点) 问题1:如何判断树根? A:if(p[x]==x),当前x ......
数据结构 结构 数据

龙龙自己MYSQL data 旧数据库 迁移到新数据库的成功经历

龙龙 2023年4月27日 mysql 我为了迁移mydata 里的数据库 采用直接复制 数据库的方法 1.安装mysql 数据库 2.mysqld -instal mysqld --initialize 3. 这个时候数据库安装好了 ,如果采用把旧库里的 直接拷贝过来 启动起来 会认不到表 接下来 ......
数据库 数据 MYSQL data

还不知道怎么 Mock ,用这 6款工具!

以下是几个常用的国外可以mock测试的工具,供参考: MockServer: MockServer 是一个开源的 API mock 测试工具,提供了强大的模拟服务器和 mock 服务功能。MockServer 支持多种语言和格式,包括 Java、.NET、REST、SOAP 等。 WireMock: ......
工具 Mock