集群apache doris
docker部署ceph集群
## 1. 创建Ceph专用网络 ``` sudo docker network create --driver bridge --subnet 172.20.0.0/16 ceph-network ``` ## 2. 拉取搭建用镜像 ``` sudo docker pull ceph/daemon ......
redis学习4集群--黑马
# 主从复制 将master中的数据有效的复制到slave中 master + 写数据 + 执行写操作时，将出现变化的数据自动同步到slave + 读数据（可忽略） slave + 读数据 + 写数据（禁止） ## 主从连接(slave连接master) + 方式一：客户端发送命令 slaveof ......
集群、服务、微服务、分布式
先说集群： 可以理解为一批部署了相同服务的机器，这些机器的集合就是集群。 为啥要使用集群部署，因为当一款应用或软件使用人数越来越多，流量越来越大的时候，单台机器的资源已经无法满足使用需求，这时候就要加机器，现在硬件很便宜，集群的数量可以很庞大，他们之前相互配合工作，就能处理大量的用户请求，当然这中间 ......
Linux下Elasticsearch集群搭建
在每台服务器上安装ES，此处略过，如需要请查看过往文章。 集群的搭建主要是修改每个节点的配置文件（elastic search.yml） # 集群名称 cluster.name: veolia-es-cluster # 节点名称 node.name: es02 # 是否作为主节点（每个节点都配置tr ......
Apache Hudi 在袋鼠云数据湖平台的设计与实践
在大数据处理中，[实时数据分析](https://www.dtstack.com/dtengine/easylake?src=szsm)是一个重要的需求。随着数据量的不断增长，对于实时分析的挑战也在不断加大，传统的批处理方式已经不能满足[实时数据处理](https://www.dtstack.com ......
mongo 搭建shard集群
本文基于MongoDB 4.0介绍如何搭建shard集群服务，环境如下表所示： 1、创建相关目录 在三个节点分别创建以下目录： [root@hdp06 ~]# mkdir -p /data/mongo/{config,router,shard} [root@hdp06 ~]# mkdir -p /d ......
在Apache上实现多HTTPS虚拟主机
导读 在apache的环境下该如何配置多HTTPS虚拟主机呢？利用的原理的都是同一个，也就是SNI。基于域名的虚拟主机，即共享同一个IP地址和端口的HTTPS虚拟主机。 SNI 服务器名称指示，是一个TLS的扩展，它使得启用SSL的基于域名的虚拟主机的配置成为可能。打破了每个HTTPS的虚拟主机需要 ......
用java语言通过APACHE-POI实现导入带目录的word文档 ，按标题级别提取 ，插入数据库
最近有一个项目需要将一个word文档中的数据提取到数据库中。就去网上查了好多资料，网上很多都是提取简历那种带表格的，但是我这个项目需要提取带目录的。找了好久，最终实现了（我的这篇博客主要是借鉴用POI实现word读写操作并自动将标题编号_poi word 序号_qq_16601953的博客-CS ......
Redis集群搭建（三组三从）
# Redis集群搭建  ## 1 角色规划 | 角色 | ip | 端口 | | | | | | Master1 ......
hadoop集群搭建后，启动集群后网络畅通，却无法访问web页面的解决办法
# hadoop集群搭建后，启动集群后网络畅通，却无法访问web页面的解决办法 > 问题引入：在学习hadoop搭建完全分布式集群时，已经集群配置了4个核心文件，并且启动所有相关进程，在使用jps命令检查进程，该集群启动完整正常，但是无法访问hdfsweb页面和yarnweb页面，我尝试了ping通 ......
docker部署分布式minio集群文件服务器
1. 环境准备 准备4台服务器，3台服务器做minio集群，一台服务器做minio的nginx 入口服务器 IP 服务 操作系统 192.168.0.165 Minio-Nginx CentOS 7.9 192.168.0.109 Minio-1 CentOS 7.9 192.168.0.114 M ......
rocky Elasticsearch 8.7.1集群 x-spack 安全验证 及 集群内部TLS加密传输 （ca）
目录 简介 环境准备 安装 配置 hostname 解析 安装 systemd 脚本 ca证书 配置 给所有 ES 配置相同的用户密码 启动查看 简介 常规部署 Elasticsearch 集群时，不管是集群之间的数据传输，或者是 Client 访问Elasticsearch 集群时 均不需要相关验 ......
搭建zookeeper集群
注意：zookeeper依赖java环境1.部署的服务器ip地址 172.16.0.151 172.16.0.173 172.16.0.220 2.zookeeper版本 wget https://mirrors.bfsu.edu.cn/apache/zookeeper/zookeeper-3.7. ......
Redis安装,主从复制、哨兵模式、集群
浅浅的记录下Redis安装、主从、哨兵、集群。搭建笔记 一.Redis下载安装 系统环境 redis版本：7.0.11 linux版本：CentOS Linux release 8.2.2004 (Core) 官网下载地址：https://redis.io/download/ 一些安装命令，按照步骤 ......
定位apache慢请求神器—mod_log_slow
导读 apache php站点负载时不时高负载，但是因为上面的站点太多，太难排查到底是哪个站点引起的。nginx php-fpm倒是好查，他有一个slowlog，可以快速的定位到出现故障的php代码位置，使用xdebug来查问题太复杂。写mod_log_slow的灵感来源于mysql的slowlog ......
D:\xxx\maven\apache-maven-3.6.1\repository\org\glassfish\jaxb\jaxb-runtime\2.3.3\jaxb-runtime-2.3.3.jar读取出错\zip error
运行maven项目时，报错说 仓库里某个包读取错误 解决办法：直接到maven远程仓库里搜 该jar包，然后下载对应的版本，直接替换掉本地仓库的即可。 怎么从maven远程仓库下载？ https://mvnrepository.com 搜索要找的依赖，然后 在 Files 点击 jar 即可下载 ......
提升 Apache Hudi Upsert 性能的三个建议
Apache Hudi 社区一直在快速发展，各公司正在寻找方法来利用其强大的功能来有效地摄取和管理大规模数据集。 每周社区都会收到一些常见问题，最常见的问题与 Hudi 如何执行更新插入有关，以确保以低延迟访问最新数据。 # 选择合适的存储表类型 快速更新插入的主要考虑因素之一是选择正确的存储表类型 ......
Apache maven 安装与配置 （Mac）
一、准备文件 Maven 3.5.4 version 下载 https://maven.apache.org/download.cgi 二、安装与配置 （1）安装 将下载好的文件解压到/usr/local目录下，如果找不到/usr/local目录，可以打开苹果访达，按住shift+command+G ......
Apache-maven的安装与配置（IDEA）
https://mbd.baidu.com/ug_share/mbox/4a83aa9e65/share?product=smartapp&tk=8b0406b2ed7c5e71944c9c31062c5007&share_url=https%3A%2F%2Fyebd1h.smartapps.cn% ......
org.apache.jasper.JasperException: /pages/role-list.jsp (行.: [145], 列: [8]) 根据标记文件中的TLD或attribute指令，attribute[items]不接受任何表达式
org.apache.jasper.JasperException: /pages/role-list.jsp (行.: [145], 列: [8]) 根据标记文件中的TLD或attribute指令，attribute[items]不接受任何表达式 web.xml中版本号不兼容产生的问题；解决方法： ......
apache的安装
1.配置网络设置vi 、etc/systconfig/network-scripts/ifcfg-eno16777736 2.拷贝文件位置systemctl restart networkcp /opt/*.repo /etc/yum.repos.d/ 3.安装httpd软件包yum install ......
HIVE跨集群迁移
查看mysql使用端口 ps -ef | grep mysql ss -antp | grep [ps查出来的pid] 停止HIVE写入服务 创建备份路径 mkdir -p /root/hivebackup/ 执行备份数据库命令：(在目标集群执行) mysqldump -uroot -pPasswo ......
关于Kubernetes-k8s集群在任意nodes节点上执行kubectl和kubadm命令的方法
在Kubernetes-k8s集群中，一般只有在master 才能执行 kubectl和kubadm 相关的命令 如果到worker nodes 节点上执行，则会有如下报错： [root@k8s-node1 qq-5201351]# kubectl get nodes,po -A The conne ......
KingbaseES V8R3 集群运维系列 -- failover切换后集群自动恢复
案例说明： KingbaseES V8R3集群默认在触发failover切换后，为保证数据安全，原主库需要通过人工介入后，恢复为新的备库加入到集群。在无人值守的现场环境，需要在触发failover切换后，主库可以自动恢复为新备考加入集群，提升架构的高可用性。 适用版本： KingbaseES V ......
KingbaseES V8R6 集群运维案例--麒麟系统bug导致sys_monitor.sh无法启动集群
案例说明： 麒麟信安操作系统，在部署了KingbaseES V8R6集群后，sys_monitor.sh在启动集群时，启动数据库服务失败，导致集群无法正常启动。后连接现场分析发现，此环境只要通过ssh或sys_securecmd工具远程启动数据库服务都会失败。操作系统版本如下： 适用版本： King ......
KingbaseES V8R3 集群运维系列 -- sync_flag参数配置
案例说明： 在KingbaseES V8R3集群一主二备的架构中，配置了流复制为同步（sync）模式，但是集群启动后，流复制状态中显示备库是async模式（备库和主库数据已经同步），从备库的recovery.log日志也可以看到，备库启动后被复制模式设置为async模式。如下图备库recover ......
KingbaseES V8R6 集群运维案例--备库timeline not contain minimum recovery point故障
案例现象： KingbaseES V8R6集群备库启动后，加入集群失败，sys_log日志信息提示，如下图所示： 适用版本： kingbaseES V8R6 一、问题分析 在timeline对应的history文件中会记录每次timeline切换时所对应的lsn，如下图所示，在sys_wal目录 ......
KingbaseES V8R3集群运维案例之---message length (8) in slot 1 does not match with slot 0(12)故障
案例说明： 在KingbaseES V8R3集群在连接kingbasecluster服务（9999端口）时，出现“message length (8) in slot 1 does not match with slot 0(12)”故障，通过复现，获取故障发生的原因。故障信息如下图所示： 适用版本 ......
PostgreSQL-HA 高可用集群在 Rainbond 上的部署方案
PostgreSQL 是一种流行的开源关系型数据库管理系统。它提供了标准的SQL语言接口用于操作数据库。 repmgr 是一个用于 PostgreSQL 数据库复制管理的开源工具。它提供了自动化的复制管理，包括： 故障检测和自动故障切换：repmgr 可以检测到主服务器故障并自动切换到备用服务器。 ......