数据 持久性 数据备份 分布式
自定义注解实现数据脱敏
说明 以下使用的脱敏方式是使用jackson的JsonSerializer实现的，有些情况可能不支持，不支持可以用三方提供的脱敏工具方法，也可以自己封装脱敏工具方法 自定义注解 import com.fasterxml.jackson.annotation.JacksonAnnotationsIns ......
Navicat连接SQLServer提示：未发现数据源名并且未指定默认驱动程序
问题：Navicat 连接 SQL Server 提示：未发现数据源名并且未指定默认驱动程序 解决方式一：可以直接安装 Navicat 根目录（安装目录）下的 sqlncli.msi （32位）或 sqlncli_x64.msi （64位） 双击开始安装，一直下一步，正常安装完成的话，重启下 Nav ......
一文详解数据仓库的物理细粒度备份恢复
本文分享自华为云社区《DTSE Tech Talk | 第43期：数仓数据可靠保证——物理细粒度备份恢复》，作者：华为云社区精选。 大数据时代，数据对企业的重要性不言而喻，如果发生数据丢失或因为误操作而造成数据丢失，将对企业的经营决策带来不可估量的损失。本期《备份恢复全掌握，数仓数据更安全》的主题直 ......
分布式系统设计
1. 分布式系统组件 消息队列 RocketMq (重要特性: 事务消息, 半事务机制首选方案, 最终一致性, 死信队列, 补偿方案) 2. 分布式系统组件 消息队列 Kafka 3. 高并发系统,提升QPS,提升并发能力利器 Redis集群高可用方案 4. 大型分布式数据库系统选型和研究 TiDB ......
KingbaseESV8R6表空间与数据库，模式，表的关系
自定义表空间的作用 使用多个表空间可以更灵活地执行数据库操作。当数据库具有多个表空间时，您可以： 1、将用户数据与系统表数据分开存储在不同性能的存储上，以减少I/O争用。 2、将一个应用程序的数据与另一个应用程序的数据分开，以防止在必须使表空间脱机时多个应用程序受到影响。 3、将不同表空间的数据文件 ......
人大金仓数据库创建与还原--九五小庞
1.创建用户 CREATE USER pxy CONNECTION LIMIT - 1 PASSWORD '123456'; 2.给用户授权 ALTER USER pxy SUPERUSER; ALTER USER pxy CREATEDB; ALTER USER pxy CREATEROLE; A ......
KingbaseES数据库批量加载数据的最佳方法
前言 本文讨论在KingbaseES数据库服务器中批量加载数据的方法，以及空数据库中的初始数据加载和增量数据加载的最佳做法。 批量加载方法 以下数据加载方法按照从最耗时到最不耗时的顺序排列： 1.运行单记录 INSERT 命令。 2.在每次提交中分批成 100 到 1000 行。可以使用事务块在每次 ......
vue2和vue3使用echarts时无数据，怎么显示暂无数据图片或文字
一开始也经历了用v-if和v-show，v-show的话echarts还会留出暂无数据图片的位置，导致echarts变形，v-if在加载和不加载切换时，dom会获取不到；后来也是在网上找的方法，时间有点长，原文地址就不贴了。 对了，在网上查方法的时候还找到了echarts noDataLoading ......
通过jq读取和修改json数据
我接到了这么一个任务，页面就是非常简单的页面，不需要搭建好的后台，也没什么数据库，在这个条件下，点击“预约”按钮，可以保存点击用户的数量。 要求很明确，要保存，不能刷新或者第二天数量就变了，所以是一定要有文件保存这数据的。 我的参考了网上大部分的内容，发现单纯通过JavaScript是不能修改文件的 ......
【数据库主题文档上传激励活动】已开启！快来上传文档赢取奖励
如果你有数据库主题文档，快来上传吧！本月墨天轮限时发起数据库主题文档上传激励活动，我们准备了多重级别的丰厚墨值奖励，帮助他人更能实现自我成长！点击查看具体规则！ ......
数据结构学习记录（三）
图 一、知识要点 1、图的基本概念 图的定义和术语 图的定义 图（Graph）是由两个集合构成，一个是非空但有限的顶点集合V，另一个是表述顶点之间边的集合E（可能是$\emptyset$）。图可表示为G = (V ,E ). 每条边是一顶点对(v, w)且v，w $\in$ V。通常用|V|表示顶点 ......
KingbaseES数据库-生产环境慢查询性能优化案例
一、背景 在生产环境中，慢查询不仅影响系统、业务的正常处理。同时严重影响用户的使用感受。 二、表相关信息 2.1 表结构及索引： Table "yktcore.t_dtl_ymt" 栏位 | 类型 | 校对规则 | 可空的 | 预设 + + + + sys_sett_date | character ......
循序渐进介绍基于CommunityToolkit.Mvvm 和HandyControl的WPF应用端开发(4) -- 实现DataGrid数据的导入和导出操作
在我们设计软件的很多地方，都看到需要对表格数据进行导入和导出的操作，主要是方便客户进行快速的数据处理和分享的功能，本篇随笔介绍基于WPF实现DataGrid数据的导入和导出操作。 ......
Mybatis Plus 分页查询数据
Mybatis Plus 分页查询数据 一、分页配置 package com.example.demomybatispage.config; import com.baomidou.mybatisplus.annotation.DbType; import com.baomidou.mybatisp ......
KingbaseES数据库使用kdb_database_link扩展常见问题
KingbaseES数据库使用kdb_database_link扩展常见问题 kdb_database_link主要功能是为了满足@link语法的适配，让用户应用的代码能够适用于更宽泛的产品而无需在移植时大量修改。 支持连接管理，在适当的时候关闭连接减少远程数据库的资源开销。 支持远程表（视图、物化 ......
采用ResNet网络+TSNE降维算法对自建图像数据集进行二维可视化显示
起因：某一天下午，我在“玩”的时候，突然接到了老板的电话，说是要对图像做可视化降维。因此，我拿到了一批图像的数据。 数据的特点： 1、数据集的图像分为4类，并且每一种类的图像多少不均衡。 2、数据集图像是一个大文件夹，里面包含4个文件夹，而且里面命名非常不规范。 3、数据集图像大小也不一样。 任务: ......
分布式系统的主键生成方案对比
UUID（通用唯一识别码）是由32个十六进制数组成的无序字符串，通过一定的算法计算出来。为了保证其唯一性，UUID规范定义了包括网卡MAC地址、时间戳、名字空间（Namespace）、随机或伪随机数、时序等元素，以及从这些元素生成UUID的算法。一般来说，算法可以保证任何地方产生的任意一个UUID都... ......
数据解读大师：打造令人信服的数据可视化作品？
零代码, 低代码, BI, 数据中台, 数据引擎, 数据中心,数据分析,数据大屏,报表软件,报表工具,报表开发工具,数据报表,web报表,java报表,B/S报表 ......
vue3 ts setup 监听 pinia 数据的变化，更新页面数据
简述 由于 pinia 导入到vue中的值没有响应性 import useUserStore from './stores/user'; const userStore = useUserStore(); userStore.isvaild;// 没有响应性 那么我们在vue中动态修改某值的想法则需 ......
Ubuntu20.04安装Postgres主从备份
Ubuntu20.04安装Postgres主从备份 一.查看可安装的Postgres包 #列出相关的软件包，这里安装的是14版本 apt list | grep -w postgresql-14 | tail -1 #下载Postgres apt install -y postgresql-14/f ......
Java数据类型及运算符+语句
java: 常量定义 常量是在程序运行过程中其值始终保持不变的量。 Java使用关键字final来定义常量。 常量定义的语法格式 -- final 数据类型 常量名称 = 值 ; 举例 final int NUM = 12; final float PI = 3.14159; final int A ......
C#通过SQLiteDataReader读取GBK(gb2312)格式的SqLite数据库
正常情况下，C#通过SQLiteDataReader读SqLite数据库，不论读写都是采用的uft-8格式编码。 但是我在搞QQ群机器人（Mirai）的时候，遇到了读取以前旧版本机器人数据库的情况。旧片机器人是采用java或者C++程序写的，存取时的编码是GBK（gb2312），然后在原来的程序里面 ......
【小睿的ML之路】Pandas自定义函数（含泰坦尼克号数据分析案例实战）
import pandas as pd titanic_survival = pd.read_csv("titanic_train.csv") # 返回第一百行数据 def hundredth_row(column): hundredth_item = column.loc[99] return h ......
delphi 如何实现将MSSQL的数据缓存到REDIS的例子
以下是一个简单的示例，演示如何使用 DelphiRedisClient（https://github.com/danieleteti/delphiredisclient）将 MSSQL 数据缓存到 Redis 中： ```delphiuses Redis.Client, Redis.NetLib.I ......
ICCV 2023 | 超越SAM！EntitySeg：更少的数据，更高的分割质量！
前言 在本文中，High-Quality Entity Segmentation对分割问题进行了全新的探索。 本文转载自CVer 仅用于学术分享，若侵权请联系删除 欢迎关注公众号CV技术指南，专注于计算机视觉的技术总结、最新技术跟踪、经典论文解读、CV招聘信息。 CV各大方向专栏与各个部署框架最全教 ......
Linux svn进行备份还原
在 Linux 上进行 Subversion (SVN) 的全量备份，可以使用 `svnadmin dump` 命令来生成仓库的完整备份文件。以下是进行全量备份的步骤： 1. 停止 SVN 服务：在备份之前，停止 SVN 服务以确保备份文件的一致性和完整性。具体停止 SVN 服务的方式取决于所使用的 ......
MySQL——分布式锁
锁 锁是一种抽象概念，是一种思想。并发环境下，多个线程会对同一资源争抢，可能导致数据不一致的问题。因此，很多编程语言都引入了锁。 Java中的锁 互斥锁（悲观锁（有锁同步）） 操作系统悲观地认为如果不严格同步线程调用，那么一定会产生异常，互斥锁将会将资源锁定，只供一个线程调用，阻塞其他线程（独占资源 ......
Java数据结构的学习规划
前言 最近在备考软考初级程序员（因为没有把握能够过中级所以暂时先报考初级）所以暂时停下了数据结构学习的进程。但是看到老师布置的新作业决定继续学习！！我想学习数据结构的原因，一部分是因为数据结构是程序设计的基础，学好数据结构和算法可以写出更好的算法。另外如果在以后我觉得自己学习的不错的话，我想去试试参 ......
Docker从零开始部署后端项目和MySQL数据库
预备知识 Docker是什么 Docker镜像是什么 Docker容器是什么 Docker Compose是什么 Docker Compose中的Service是什么 请自行上网查阅以上内容相关资料，否则无法阅读下文 安装Docker Windows 去官网Docker: Accelerated C ......