数据库 数据spring boot

mysql迁移数据到新硬盘

最近生产环境的磁盘占用告急,其中mysql数据占比较多,决定将mysql的数据文件迁移到一块新的磁盘,在此记录下。 1.硬盘初始化 1.查看硬盘信息 lsblk 2.分区 fdisk /dev/vdb 输入 n 按回车新建分区 输入 p 按回车新建主分区 设置分区数量 直接回车 默认1 设置分区起始 ......
硬盘 数据 mysql

数据库系统原理之关系数据库

关系数据库 一、关系数据库概述 进入20世纪80年代后,在商用数据库管理系统中,关系模型逐渐取代早期的网状模型和层次模型,成为主流数据模型。 二、关系数据模型 关系数据结构 关系模型的数据结构只包含单一的数据结构,即关系。 在用户看来,关系模型是把数据库表示为关系的集合,且关系数据库是以二维表格的形 ......
数据库 数据 原理 系统

Python抓取数据如何设置爬虫ip

在写爬虫爬取github数据的时候,国内的ip不是非常稳定,在测试的时候容易down掉,因此需要设置爬虫ip。本片就如何在Python爬虫中设置爬虫ip展开介绍。 也可以爬取外网 爬虫编写 需求 做一个通用爬虫,根据github的搜索关键词进行全部内容爬取。 代码 首先开启爬虫ip,在设置中修改HT ......
爬虫 数据 Python

全网最详细中英文ChatGPT-GPT-4示例文档-从0到1快速入门解析非结构化数据应用——官网推荐的48种最佳应用场景(附python/node.js/curl命令源代码,小白也能学)

ChatGPT可以利用自然语言理解和生成的能力,来处理非结构化数据。非结构化数据是指没有预定义的数据模型,不方便用数据库二维逻辑表来存储和查询的数据。ChatGPT可以将非结构化数据解析成结构化数据,例如表格、图表、列表等,从而方便用户进行分析和决策。例如,ChatGPT可以从一篇文章中提取出关键信... ......
全网 示例 源代码 ChatGPT-GPT 中英

交易系统之数据库弱依赖解决方案

作者:京东科技 杜晓玉 前言 数据库,交易系统中最核心依赖,数据持久化属于最核心服务。 随着互联网的普及,大流量高并发的场景越来越多,7*24的交易系统对高可用要求越来越高,同时在“数据为王”大环境下,交易数据最终通过数据库进行持久化存储,数据库成为整个系统最终重要服务,不能出一点问题,尤其核心P0 ......
解决方案 数据库 方案 数据 系统

数据算法_组合优化_匈牙利算法

###组合优化问题 (Combinatorial optimization problem,COP) 是一类在离散状态下求极值的最优化问题 二分图(Bipartite graph) 匹配是由一组没有公共端点的边构成的集合。 U与V之间的关联视为前一帧与当前帧的同一id目标的检测框的关联 数据关联是多 ......
算法 数据

技术干货 从DBA视角看数据库运维管理平台

GreatSQL社区原创内容未经授权不得随意使用,转载请联系小编并注明来源。 GreatSQL是MySQL的国产分支版本,使用上与MySQL一致。 作者: z 文章来源:GreatSQL社区原创 DBA岗位会被云服务平台取代吗? 前段时间看到网上的一篇文章《你怎么还在招聘DBA?》,引发网友热议。文 ......
干货 视角 数据库 数据 平台

记录一个常犯的错误:直接访问数据结构内部的数组

在xcpc竞赛中,我们通常不会封装用到的数据结构,在这种情况下常常出现直接访问到数据结构内部数组的情况,这种情况因为自己乍一看并不影响算法因此debug时很难找出来 例如树状数组中,初始化应当是从1一直add到n,而非遍历数组初始化。不过这种错误出现的不多,常见的是在循环之前对某个位置特殊处理时。例 ......
数据结构 数组 错误 结构 数据

Spring Cloud 配置中心

Spring Cloud Config 可以将配置文件存储在本地,也可以将配置文件存储在远程Git仓库。需要创建 Config Server , 通过它管理所有配置文件,在本地修改,推送到远程即可。 配置服务: <dependencies> <dependency> <groupId>org.spr ......
Spring Cloud

【数据库】Redis(7)--SpringBoot&SSM&集成Redis

本篇主要简单说明一下基于Springboot+SSM+Redis+Swagger集成项目。 1.具体实现 1.1.在pom.xml整合SSM+Redis+Swagger相关依赖 <dependency> <groupId>org.springframework.boot</groupId> <art ......
Redis SpringBoot amp 数据库 数据

分页查询出现数据重复或丢失,你遇到过吗?

一、问题背景 最近部分销售人员反馈在 APP 上查询自己名下客户订单数据时,当往下拉取数据的时候,列表上经常出现重复的订单数据,经过排查,后端代码是通过如下方式来实现数据的分页查询的。 limit offset, size order by create_time desc 经过细致的分析,这种排序 ......
数据

Springboot 系列 (23) - Springboot+HBase 大数据存储(一)| 安装配置 Apache Hadoop

Apache HBase 是 Apache Hadoop 项目的子项目,是 Hadoop Database 的简称。HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用 HBase 技术可在廉价 PC Server 上搭建起大规模结构化存储集群。HBase 不同于一般的关系数据库 ......
Springboot 数据 Apache Hadoop HBase

Spring Cloud Feign

Feign 是一个声明式、模板简化的 Web Service 客户端,它简化了开发者编写Web服务的操作,开发者可以通过简单的接口和注解来调用HTTP API。 Spring Cloud Feign 整合了Ribbon 和 Hystrix,具有可插拔、基于注解、负载均衡、服务熔断等一系列便捷功能。 ......
Spring Cloud Feign

Spring Boot + Redis 解决重复提交问题,一定用的到

前言 在实际的开发项目中,一个对外暴露的接口往往会面临很多次请求,我们来解释一下幂等的概念:任意多次执行所产生的影响均与一次执行的影响相同。按照这个含义,最终的含义就是 对数据库的影响只能是一次性的,不能重复处理。如何保证其幂等性,通常有以下手段: 1、数据库建立唯一性索引,可以保证最终插入数据库的 ......
Spring 问题 Redis Boot

数据分析基础笔记 - 数据可视化

一、可视化图表类型 趋势、分布、构成、比较和联系 趋势 数据是如何随着时间而发生变化,通过折线图或柱状图进行展示 分布 当关心数据的分布规律时,常会用散点图来展示不同分布特征,通过考察散点图中点的分布情况,来总结数据的分布模式或判断两个数据之间是否存在某种关联 构成 用于表示数据中每个部分占总体的比 ......
数据 数据分析 基础 笔记

spring filter

https://cloud.tencent.com/developer/article/2040511 ......
spring filter

Spring框架

1. 简介 (1)Spring Framework 是其他框架的基础,如 Spring MVC、SpringBoot、Spring Cloud、Spring Data、Spring Security 。 (2)Spring 有两个核心部分 1)IOC:控制反转,指把创建对象过程交给 Spring 进 ......
框架 Spring

Spring Boot 如何防护 XSS + SQL 注入攻击 ?终于懂了!

1. XSS跨站脚本攻击 ① XSS漏洞介绍 跨站脚本攻击XSS是指攻击者往Web页面里插入恶意Script代码,当用户浏览该页之时,嵌入其中Web里面的Script代码会被解析执行,从而达到恶意攻击用户的目的。XSS攻击针对的是用户层面的攻击! ② XSS漏洞分类 存储型XSS: 存储型XSS,持 ......
Spring Boot SQL XSS

Spring Cloud Ribbon负载均衡

Spring Cloud Ribbon 需要结合Spring Cloud Eureka 来使用。 Eureka Server 提供所有可以调用的服务提供者列表,Ribbon基于特定的负载均衡算法从这些服务提供者中选择要调用的具体实例。 ......
Spring Ribbon Cloud

webpack支持mock 数据接口

https://blog.csdn.net/qq_43456687/article/details/122813617 https://segmentfault.com/a/1190000013220134 ......
接口 webpack 数据 mock

SSM整合——表现层数据封装

表现层数据封装 设置统一数据返回结果类 注意:Result类中的字段并不是固定的,可以根据需要自行增减提供若干个构造方法,方便操作 ......
数据 SSM

【informix】数据导入导出操作

informix数据导入导出操作 1.表数据导出 可以采用在dbaccess工具环境直接输入 进入对应数据库:dbaccess database 单表数据导出:(可导出3种不同的格式) unload to fileName.txt select * from tableName unload to ......
informix 数据

spring循环依赖

what 实例化一个完整的bean主要分两步,实例化(调用构造器在堆内存中分配一块内存)和初始化(给属性赋值); ClassA中有ClassB属性,ClassB中有ClassA属性,导致在bean初始化填充属性时,导致循环依赖 when 在bean生成周期的属性填充阶段(populateBean) ......
spring

Spring Cloud Zuul组件 实现服务网关

Zuul 是 Netffix 提供的一个开源的API网关服务器,是客户端和网站后端所有请求的中间层,对外开放一个API,将所有请求导入统一的入口,屏蔽了服务端的具体实现,Zuul可以实现反向代理的功能,在网关内部实现动态路由 身份认证 IP过滤 数据监控等 ......
网关 组件 Spring Cloud Zuul

centos7升级自带的mariadb数据库

#查看版本 [root@guangzhou local]# mysql --version mysql Ver 173)">15.1 Distrib 5.5.64-MariaDB, for Linux (x86_64) using readline 5.1 #查看使用状态 [root@guangzh ......
centos7 mariadb 数据库 数据 centos

控件数据绑定(DataBinding)的妙用

控件数据绑定(DataBinding)的妙用: DataBindings该方法需要以下的参数 要绑定到的控件属性的名称 数据源 数据源中解析为列表或属性的导航路径 数据源可以是:实现 IBindingList 或 ITypedList 的任何类。包括:DataSet、DataTable、DataVi ......
妙用 控件 DataBinding 数据

redis支持的数据类型有哪些

前言 Redis之所以被广泛使用,不只是因为它快,还因为它除了支持最简单的字符串(String)类型外,它还支持好几种数据类型: 哈希(Hash) 列表(List) 集合(Set) 有序集合(Sorted Set) 位图 ( Bitmap ) String String为最简单的类型,一个key对应 ......
类型 数据 redis

【Python】批量提取Fibersim xml文件中的节点网格数据

程序功能: 输入需求: fibersim导出的ply 的xml文件,可以很多个也没问题。但名字要有规律,不然没法循环读写。比如我自己用的就是x1.xml、x2.xml、Y1.xml......的文件名 定义一些需要的变量,看名字都可以知道什么意思 输出: 程序会输出每个xml文件中每个ply对应的n ......
网格 节点 Fibersim 文件 数据

python处理kafka数据

1、程序作用:从多个topic中读取数据--处理数据--写入新的kafkatopic中 pip3 install kafka-python import json from kafka import KafkaProducer from kafka import KafkaConsumer #消费者 ......
数据 python kafka

一统天下 flutter - widget 状态管理: 状态管理 - InheritedWidget(在树上,父共享数据后,任意子可获取此数据)

一统天下 flutter - widget 状态管理: 状态管理 - InheritedWidget(在树上,父共享数据后,任意子可获取此数据) ......