elasticjob-lite集群springboot elasticjob
Elasticsearch专栏 集群分片管理
Elasticsearch 集群分片管理 简介 Elasticsearch 是一个分布式搜索和分析引擎，数据在集群中被分割成多个分片，以实现高性能和可伸缩性。在管理 Elasticsearch 集群时，分片的合理分配和监控是至关重要的。 分片基础知识 主分片（Primary Shard）： 每个索引 ......
Elasticsearch专栏 集群安全认证
Elasticsearch 集群安全认证 简介 Elasticsearch 的安全认证功能用于确保只有经过授权的用户才能访问集群和执行特定操作。这有助于保护集群中的数据和资源。 安全认证组件 1. X-Pack Security 插件 X-Pack 是 Elastic 提供的官方插件，包含了 Ela ......
TDSQL(MySQL版本)集群增加hdfs节点
一、需求：1、在原有集群上面增加3个hdfs节点，替换掉之前的hdfs；2、将替换掉的3台hdfs中2台 变成proxy节点，增加到第一套集群 二、参考文档：腾讯云数据库 TDSQL MySQL版_V10.3.19.x.x_部署指南（注意不要使用其中的nokey.sh脚本） 三、操作步骤：1、启动a ......
mariadb集群切换成mysql5.7集群
mariadb集群安装 yum list | grep galera yum install galera mariadb-server-galera rsync systemctl start mariadb 仓库源查看可以安装的包 添加yum源 [galera] name = Galera ba ......
SpringBoot框架中的DAO层、Entity层、Service层、Controller层
非原创，看了许多篇博客的总结 一般的项目模块中都有DAO、Entity、Service、Controller层。 Entity层是实体层，也就是所谓的model，也称为pojo层，是数据库在项目中的类，该文件包含实体类的属性和对应属性的set、get方法； DAO层=mapper层，现在用Mybat ......
SpringBoot的Controller,Service,Repository层的使用
找回熟悉的Controller，Service Controller哪儿去了？ 对于很多习惯了Spring开发的同学来讲，Controller，Service，DAO 这些套路突然间都没了会有不适感。其实呢，这些东西还在，只不过对于较简单的情景下，这些都变成了系统背后帮你做的事情。这一小节我们就先来 ......
elasticsearch集群red恢复损坏的索引
背景 客户磁盘损坏，修复磁盘后，重启机器，发现elasticsearch启动成功，ES状态正常green，但是历史数据都没有加载进，查看ES存储数据目录，发现数据还在。 解决方案 首先，需要确认indices目录下的lucene 索引正常。需要关闭ES（实际操作索引处于close状态也可以）。 # ......
Kubernetes高可用集群二进制部署v1.28.0版本
一、集群环境准备 1.1 主机规划 主机IP地址 主机名 主机配置 主机角色 软件列表 192.168.198.144 k8s-master1 2C4G master kube-apiserver、kube-controller-manager、kube-scheduler、etcd、kubectl ......
【云计算】在springboot项目在华为云CCE容器中启动日志时间和系统时间不一致
问题背景： 在springboot项目在华为云CCE容器中启动日志时间和系统时间不一致，会快8个小时 解决： 在环境变量中加入TZ=Asia/Shanghai ......
记录Springboot中向企业微信指定人员发送含链接的消息
背景： 从海康智能门禁获取到了进入教室的人脸信息，由此得到一批用户List，等会儿就要实时向这批用户发送消息“***，您已进入**教室，请填写使用情况表<a href="****">”。 过程： 读了微信的开发者文档，摸索着写了测试代码。 在debug时，发现微信传来的是{"errcode":600 ......
Springboot 2.7 open api：swagger | knife4j | spring doc
* [集成 Spring Doc 接口文档和 knife4j | SpringBoot 2.7.2 实战基础 - 掘金](https://juejin.cn/post/7201195677128687674)* [Springboot 2.7 集成 Swagger 增强版接口框架 Knife4j 4 ......
修改Zabbix源码实现监控数据同时写入数据库和ES集群
写在开篇 玩过 Zabbix 的朋友都了解，Zabbix 提供了与 Elasticsearch（ES）的集成，允许用户将历史数据存储在 Elasticsearch 中，而无需使用传统数据库。在高监控负载的生产环境中，这种架构带来了多重好处。首先，它有效减轻了数据库的负担，从而提高了整体性能。其次，通 ......
linux部署springboot应用占用80端口启动失败
在 UNIX 及其派生系统上，低于 1024 的 Internet 端口保留供 root 用户使用。这意味着它们通常由关键系统服务使用，这些服务本身需要root访问权限才能启动。 如果服务由 systemd 运行，以非root用户执行，可以进行以下操作 1，打开unit文件 /etc/systemd ......
rabbitmq 集群docker玩法
属于一个简单测试玩的，rabbitmq 实际最近几年变化还是挺大的（主要是一些新特性，核心amqp 是一致的） 环境准备 测试一个基于raft 选举的rabbitmq 集群队列 docker-compose version: "3" services: mq: build: ./ container ......
Redis 分片集群
1.Redis分片集群 1.1.搭建分片集群 主从和哨兵可以解决高可用、高并发读的问题。但是依然有两个问题没有解决： 海量数据存储问题 高并发写的问题 使用分片集群可以解决上述问题，如图: 分片集群特征： 集群中有多个master，每个master保存不同数据。 每个master都可以有多个slav ......
springboot整合druid及多数据源配置
前言 本篇主要分两部分 ①springboot整合druid的代码配置，以及druid的监控页面演示；②对实际场景中多数据源的配置使用进行讲解。 一、springboot整合druid的演示demo可以用idea快速生成一个可运行的demo工程，具体可以参考如何快速创建springboot项目 主要 ......
SpringBoot的多数据源以及事务解决方案(上篇)
SpringBoot的多数据源以及事务解决方案 背景 一个主库和N个应用库的数据源，并且会同时操作主库和应用库的数据，需要解决以下两个问题： 如何动态管理多个数据源以及切换？ 如何保证多数据源场景下的数据一致性（事务）？ 数据切换原理 通过扩展Spring提供的抽象类AbstractRoutingD ......
Redis - (7) 分片集群
前言 哨兵集群由于自身存在的问题，因此出现了分片集群。 分片集群 （1）集群中有多个master，每个master保存不同的数据。【可以解决数据海亮的问题】 （2）每个master也可以有多个slave节点。 （3）master之间可以互相ping监测彼此的健康状态【即master自己之间实现了哨兵 ......
集群渲染是？渲染农场是？两者与云渲染关联是什么
在数字化浪潮不断推进的当下，渲染技术在多个行业中发挥着至关重要的作用，尤其体现在电影制作、建筑可视化以及电子游戏开发等领域。在众多渲染技术中，集群渲染、渲染农场以及云渲染特别受到业界的重视。本文旨在阐述这些概念的含义以及它们之间的相互联系。 一、集群渲染的概念与应用 集群渲染是借助计算机网络的力量， ......
SpringBoot集成redisson操作redis
1 引入maven 只需引入redisson-spring-boot-starter就可以了，不过这里需要注意springboot与redisson的版本，因为官方推荐redisson版本与springboot版本配合使用。版本不匹配会导致这种问题。 将 Redisson 与 Spring Boot ......
Ubuntu 22.04 部署 ceph quincy 集群和 K8S 1.24.1对接
环境 IP 主机名 172.16.16.77 test1 172.16.16.78 test2 172.16.16.79 test3 ceph版本：quincy 主机系统：ubuntu 22.04 安装集成软件 3台机器上都要执行 vi /etc/hosts # 最后添加 172.16.16.77 ......
Springboot配置openssl生成的证书
js中使用了navigator.mediaDevices.getUserMedia来调用摄像头拍照，必须要求url是localhost或https。所以需要将SSL引入工程。 第一步：安装openssl生成SSL证书 先在http://slproweb.com/products/Win32OpenS ......
SpringBoot系列---【springboot集成phoenix调用hbase】
springboot集成phoenix调用hbase 1.环境 jdk8 hbase-2.1.0 2.新建springboot，添加pom依赖 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org ......
数据高速公路：详解数仓集群通信技术
本文分享自华为云社区《直播回顾 | 数据高速公路—数仓集群通信技术详解》，作者： 胡辣汤。 大数据时代，集群规模越来越大，业务并发越来越高，数据库集群各节点间的通信压力也越来越大。在本期《数据高速公路—数仓集群通信技术详解》的主题直播中，我们邀请到华为云GaussDB(DWS)技术布道师魏登老师，深 ......
springboot项目中application.properties无法变成小树叶问题解决
1.检查我们的resources目录的状态，看看是不是处在普通文件夹的状态，如果是的话，我们需要重新mark一下 右键点击文件夹，选择mark directory as → resources root 此时我们发现配置文件变成了小树叶 2.如果执行了上述方法还是不行的话，可以尝试重新指定配置文件， ......
SpringBoot：优化项目打包大小的方法
https://blog.csdn.net/qq_44973159/article/details/130106544 瘦身SpringBoot：优化项目打包大小的方法1、打jar包的痛点2、瘦身思路3、开始打包4、如何启动项目1、打jar包的痛点现有的应用开发中，不论是单体架构、微服务架构，如果项 ......
springboot的bean以及一些注解@Primary、@Qualifier
1、bean的加载顺序 spring容器载入bean顺序是不确定的，在一定的范围内bean的加载顺序可以控制。 spring容器载入bean虽然顺序不确定，但遵循一定的规则： 1、按照字母顺序加载（同一文件夹下按照字母数序；不同文件夹下，先按照文件夹命名的字母顺序加载） 2、不同的bean声明方式不 ......
记录Springboot项目部署到服务器
搞了一个月，开发了一个缩减版的管理系统，主要功能：对于进入海康门禁的老师，需要填报使用记录。用Springboot开发真的是便捷，专注于业务开发，不关心底层和架构。 第一步：搭建配置服务器 服务器：虚拟机Windows2016Server 64bit，内存32G，磁盘400G Mysql：8.0.3 ......
使用 Sealos 一键部署 Kubernetes 集群
Sealos 是一款以 Kubernetes 为内核的云操作系统发行版，使用户能够像使用个人电脑一样简单地使用云。 与此同时，Sealos 还提供一套强大的工具，可以便利地管理整个 Kubernetes 集群的生命周期。 Sealos 不仅可以一键安装一个单节点的 Kubernetes 开发环境，还 ......
开启安全功能 ES 集群就安全了吗？
背景 经常跟 ES 打交道的朋友都知道，现在主流的 ES 集群安全方案是：RBAC + TLS for Internal + HTTPS 。 作为终端用户一般只需要关心用户名和密码就行了。作为管理和运维 ES 的人员来说，可能希望 ES 能提供密码策略来强制密码强度和密码使用周期。遗憾的是 ES 对 ......