集群docker-compose rocketmq compose

【RocketMQ】顺序消息实现总结

全局有序 在RocketMQ中,如果使消息全局有序,可以为Topic设置一个消息队列,使用一个生产者单线程发送数据,消费者端也使用单线程进行消费,从而保证消息的全局有序,但是这种方式效率低,一般不使用。 局部有序 假设一个Topic分配了两个消息队列,生产者在发送消息的时候,可以对消息设置一个路由I ......
顺序 RocketMQ 消息

在阿里云和腾讯云的轻量应用服务器上搭建Hadoop集群

引入 本文在两台2核2g的云服务器上搭建了Hadoop集群,两台云服务器分别是阿里云(hjm)和腾讯云(gyt),集群部署规划如下: hjm gyt HDFS NameNode\SecondaryNameNode\DataNode DataNode YARN ResourceManager\Node ......
轻量 集群 服务器 Hadoop

RocketMQ

https://blog.csdn.net/weixin_44981707/article/details/124138939 https://zhuanlan.zhihu.com/p/528956421?utm_id=0 ......
RocketMQ

K8s部署Nacos 2.0.3集群模式(外置mysql数据库)

来源:https://www.woniusnail.com/?p=1691 Nacos 具体介绍就不介绍了,详细的官方都有。 本次主要介绍在k8s集群中部署Nacos集群(3节点),数据库使用外置的 mysql ,相比使用官方的在k8s内创建数据库的方案维护更方便,所有nacos配置 全部保存在数据 ......
集群 模式 数据库 数据 Nacos

KingbaseES V8R6 集群运维案例 -- 脚本部署集群后ssh无法连接

案例说明: 在kylin V10环境下,通过脚本方式部署KingbaseES V8R6集群后,发现ssh无法连接主机,通过分析发现在脚本部署过程中会对系统环境进行优化配置,在修改了/etc/ssh/sshd_config中的usePAM=yes后,导致ssh连接不上。 适用版本: KingbaseE ......
集群 脚本 KingbaseES 案例 V8R6

KingbaseES V8R6集群运维案例之---同一主机节点部署多个集群

案例说明: 在同一主机环境,由于生产需要,需要部署两个集群;本案例详细描述了两个集群的部署过程。 注意:同一主机部署多个集群需要先部署securecmdd服务,节点之间通过securecmdd服务通讯。多个集群共享主机的securecmdd服务在节点之间通讯。 适用版本: KingbaseES V8 ......
集群 节点 KingbaseES 多个 案例

KingbaseES V8R6 集群中复制槽非活跃状态的可能原因

背景 此问题环境是一主五备物理集群,其中node1是主节点,node2,3是集群同步节点,node4,5是集群异地异步节点,由于异地和主节点不同网段,网速非常慢。 kdts-plus工具纯迁数据,每分钟3G数据左右,单机迁移到集群主库再同步到备库。 问题现象:node4,5的复制槽active字段非 ......
集群 KingbaseES 状态 原因 V8R6

IDEA一个项目启动多个实例,以集群启动

在微服务开发场景下,服务大多是以集群方式部署的。在本地开发时 有时候会需要以集群的方式启动项目,同时启动多个实例来测试一些相关功能(例如分布式锁),此时不需要打包之后再仍到测试环境去启动多个实例,在IDE中就可以同时启动多个实例。 首先用idea打开项目,不用打开多个idea,因为你会发现同一个项目 ......
集群 实例 多个 项目 IDEA

【RocketMQ】消息的消费总结

消费者从Broker拉取到消息之后,会将消息提交到线程池中进行消费,RocketMQ消息消费是批量进行的,如果一批消息的个数小于预先设置的批量消费大小,直接构建消费请求ConsumeRequest将消费请求提交到线程池处理,否则需要分批构建进行提交。 消息消费 在消息被提交到线程池后进行处理时,会调 ......
RocketMQ 消息

docker-compose: 在容器中添加中文字体

docker-compose 配置 先上 docker-compose.yml 的内容 version: '2' services: mandarin: container_name: mandarin restart: always image: liumapp/add-mandarin-font ......

kubernates的集群安装-kubadm

kubernates的集群安装-kubadm 环境准备工作(CentOS) 准备三台或以上的虚拟机 停用防火墙 sudo systemctl stop firewalld sudo systemctl disable firewalld 修改主机名(命名规则符合 DNS 标准) cat <<EOF ......
集群 kubernates kubadm

记录一次k8s集群升级报错

集群升级报错 failed to upgrade cluster, err: the cluster is already in upgrading, taskID: "upgradeclusterv3-cdd88149e9bb444e38f9857bbaadaad99-1656899231-041 ......
集群 k8s k8 8s

KingbaseES V8R6集群运维案例之---在线扩容节点通讯故障问题

案例说明: KingbaseES V8R6集群节点之间通过ssh或securecmdd工具通讯,默认节点之间通过公钥和私钥方式认证,可以密码通讯;在执行集群节点扩容时,出现以下故障,节点之间仍需要输入密码进行连接 : 适用版本: KingbaseES V8R6 一、问题分析 1、测试节点secure ......
节点 集群 KingbaseES 故障 案例

解决k8s集群中opensearch服务CrashLoopBackOff的问题

1. 前言 我使用的k8s版本是1.23.6,前面安装了Kubesphere可视化组件,然后开始的时候没有启用日志模块,而是在安装Kubesphere后启用日志系统(参考在安装后启用日志系统),安装一切正常,但是安装后验证,就出现opensearch-cluster-master-x和opensea ......

KingbaseES V8R3集群运维案例---failover切换故障分析

案例说明: KingbaseES V8R3集群主库数据库服务重启后,failover切换失败,分析failover失败的具体原因。 适用版本: KingbaseES V8R3 一、集群架构 node13 >主库(primary) node25 >管理备库(standby) node58 >备库(st ......
集群 KingbaseES failover 故障 案例

KingbaseES V8R6集群部署案例之---openEuler系统脚本部署故障

案例说明: 在openEuler系统下通过脚本方式部署KingbaseES V8R6集群,脚本执行过程中,加载vip失败。本次故障问题,主要是因为openEuler系统shell和脚本的不兼容引起。 适用版本: KingbaseES V8R6 系统环境: openEuler-22.03-LTS 一、 ......
集群 脚本 KingbaseES openEuler 故障

KingbaseES V8R3集群运维案例之---流复制异步同步及全同步模式配置

案例说明: 通过案例描述KingbaseES V8R3集群异步、同步及全同步强一致性配置,本案例为一主二备的架构。 适用版本: KingbaseES V8R3 集群架构: 集群复制配置参数说明: 1)sync_flag [kingbase@node101 bin]$ cat ../etc/HAmod ......
集群 KingbaseES 案例 模式 V8R3

KingbaseES V8R3集群运维案例之---主库数据库服务down后failover切换详解

案例说明: 对KingbaseES V8R3集群,主库数据库服务down后,failover切换进行分析,详解其执行切换的过程,本案例可用于对KingbaseES V8R3集群failover故障的分析参考。 适用版本: KingbaseES V8R3 集群架构: node_id | hostnam ......
集群 KingbaseES failover 案例 数据库

KingbaseES V8R6集群运维案例之---sys_monitor.sh start启动动态库错误

案例说明: 在KingbaseES V8R6集群部署了postgis后,执行sys_monitor.sh start启动集群时,出现动态库错误,如下图所示: 适用版本: KingbaseES V8R6 操作系统: Kylin V10 Server 一、问题分析 1、手工执行sys_ctl启动数据库服 ......
集群 sys_monitor KingbaseES 错误 案例

KingbaseES V8R6集群备份恢复案例之---备份初始化“can not find primary node”故障

案例说明: KingbaseES V8R6集群,备库作为repo-path节点,建立类型为‘cluster’模式的备份,在执行sys_backup.sh init时,出现“can not find primary node”故障。故障如下图所示: 适用版本: KingbaseES V8R6 一、集群 ......
备份 集群 KingbaseES 故障 案例

k8s集群pod出现Evicted状态

生产pod出现Evicted状态 其中报错提示 检查原因,发现是磁盘压力导致pod被驱逐,IO匹配不了应用的需求,导致pod被驱逐,更换更高规格的磁盘可以解决此问题 Evicted状态的pod直接删除即可。 ......
集群 状态 Evicted k8s pod

KingbaseES V8R6集群部署案例之---脚本部署节点环境检查故障

KingbaseES V8R6集群部署案例之 脚本部署节点环境检查故障 案例说明: KingbaseES V8R6集群在部署前会对集群节点系统环境进行检测,检测失败后,将中断部署;其中一个检测项,检测节点上是否已经存在数据库服务。如果已经存在数据库服务,则部署将会中断。 适用版本: Kingbase ......
节点 集群 脚本 KingbaseES 故障

KingbaseES V8R6集群案例---一主二备架构单个备库宕机事务影响测试

KingbaseES V8R6集群案例 一主二备架构单个备库宕机事务影响测试 案例说明: 对于KingbaseES V8R6集群,在sync模式下,对于一主一备架构,如果备库宕机时,主库事务commit,会被hang住,在wal_sender_timeout参数(默认60s)超过阈值后,sync转为 ......
集群 单个 KingbaseES 架构 案例

KingbaseES V8R6集群运维案例之---sys_backup.sh init ‘xxxx invalid’故障

KingbaseES V8R6集群运维案例之 sys_backup.sh init ‘xxxx invalid’故障 案例说明 在KingbaseES V8R6集群sys_backup.sh在cluster模式下执行备份初始化,出现 ‘xxxx invalid’故障。 适用版本: KingbaseE ......
集群 KingbaseES sys_backup 故障 案例

kingbaseES V8R3集群运维案例之---集群部署前后ssh端口修改

kingbaseES V8R3集群运维案例之 集群部署前后ssh端口修改 案例说明: kingbaseES V8R3集群部署读写分离的集群是使用ssh的默认端口(22)部署,当改为非默认端口时,在部署中或部署后会因kingbasecluster脚本ssh的连接而失败,现提出以下解决方案。 适用版本: ......
集群 端口 kingbaseES 案例 V8R3

KingbaseES V8R6集群运维案例之---securecmd连接需要密码问题

KingbaseES V8R6集群运维案例之 securecmd连接需要密码问题 案例说明: 在KingbaseES V8R6集群可以使用securecmdd代替sshd实现集群主机节点间的通讯,securecmdd通讯认证采用非对称加密方式(公钥和私钥),客户端连接服务器不需要输入密码认证身份,如 ......
集群 KingbaseES securecmd 案例 密码

KingbaseES集群运维案例之---主备库failover后auto-recovery机制

KingbaseES集群运维案例之 主备库failover后auto-recovery机制 案例说明: KingbaseES集群,在备库数据库服务down后,可以实现节点数据库服务的自动恢复;在集群触发failover的主备切换后,实现原主库自动被recovery为备库,重新加入到集群。对于King ......

KingbaseES V8R6集群运维案例之---sys_hba.conf限制客户端访问数据库

KingbaseES V8R6集群运维案例之 sys_hba.conf限制客户端访问数据库 案例说明: 客户端认证是由一个配置文件(通常名为sys_hba.conf并被存放在数据库集簇目录中)控制(HBA表示基于主机的认证)。 在initdb初始化数据目录时,它会安装一个默认的sys_hba.con ......
集群 KingbaseES 客户端 案例 sys_hba

KingbaseES V8R6集群运维案例之---访问系统表unrecognized token- false故障

KingbaseES V8R6集群运维案例之 访问系统表‘unrecognized token: "false"’故障 案例说明: KingbaseES V8R6集群在升级补丁后,主备库访问系统表出现‘unrecognized token: "false"’故障,如下图所示: 适用版本: Kingb ......
集群 unrecognized KingbaseES 故障 案例

KingbaseES V8R6集群运维案例--cluster模式备份sys_backup.sh init故障

KingbaseES V8R6集群运维案例--cluster模式备份sys_backup.sh init故障 案例说明: 通过脚本方式部署KingbaseES V8R6集群后,在‘cluster’模式备份,执行sys_backup.sh init时,出现“cannot contain // for ......
集群 KingbaseES sys_backup 备份 故障