集群es

部署repmgr PG14集群<无autofailover>

系统环境 OS: CentOS7 192.168.56.11 node1 192.168.56.12 node2 部署操作流程 1. 系统环境初始化 echo redhat | passwd root --stdin echo -e "192.168.56.11 node1 " >>/etc/hos ......
集群 autofailover repmgr PG 14

2、etcd单机部署和集群部署

上一章我们认识了etcd,简单的介绍了 etcd 的基础概念,但是理解起来还是比较抽象的。这一章我们就一起来部署下 etcd 。这样可以让我们对 etcd 有更加确切的认识。 1、etcd单实例部署 对于平常的学习,其实搭建一个单机节点是够了的。接下来就讲讲怎么搭建单机节点。 本次部署是在 cent ......
集群 单机 etcd

Linux/Ubuntu 搭建mongodb集群(副本集)

1、配置三台虚拟机的ip以及主机名): 192.168.56.101 S1 192.168.56.102 S2 192.168.56.103 S3 创建目录日志文件等: mkdir -p /data/mong/{log,db,key} touch /data/mongo/log/mongodb.lo ......
副本 集群 mongodb Ubuntu Linux

【问题排查篇】一次业务问题对 ES 的 cardinality 原理探究

小编工作中负责业务的一个服务端系统,使用了 Elasticsearch 服务做数据存储,业务运营人员反馈,用户在使用该产品时发现,用户后台统计的订单笔数和导出的订单笔数不一致!对此进行排查并进行总结 ......
问题 cardinality 原理 业务 ES

JavaScript操作数组常用的方法(包含es6)

1. forEach() forEach() 方法可以遍历数组中的每个元素,并对其进行操作,例如: const arr = [1, 2, 3]; arr.forEach(num => console.log(num)); // 输出:1 2 3 2. map() map() 方法可以根据数组中的每个 ......
数组 JavaScript 常用 方法 es6

[Hadoop] 在集群中安装Hadoop

[Hadoop] 在集群中安装Hadoop 类似的教程其实有很多,网上随便一搜就是一大把。这里简单的记录一下本人的安装过程,留给本人或者后人参考。 集群配置 内网互联的三台机器,IP分别为10.0.0.1,10.0.0.2,10.0.0.3。 我们的目标配置是让10.0.0.1做主节点,也就是mas ......
Hadoop 集群

Linux 搭建redis集群(哨兵模式)

环境: 192.168.56.101 192.168.56.102 192.168.56.103 1、在三台服务器上都安装redis 安装步骤:https://www.cnblogs.com/leihongnu/p/14734603.html 2、配置主从 192.168.556.101:配置文件r ......
哨兵 集群 模式 Linux redis

hadoop 3.3.5伪分布式集群部署

hadoop包下载 https://archive.apache.org/dist/hadoop/common/ 安装好jdk并配置环境变量 下载hadoop压缩包并放至 /data/hadoop目录 解压 tar -zxvf hadoop-3.3.5.tar.gz 1配置 1.1在Hadoop安装 ......
分布式 集群 hadoop

filebeat+kafka_logstash+es进行日志分析

filebeat+kafka_logstash+es进行日志分析 目录 一. 将安装包上传至目标服务器(即日志所在的服务器) 二. 解压安装 三. 配置filebeat 1. 配置采集日志到logstash,这种配置适用于日志量较小的场景,Filebeat > logstash,logstash直接 ......

使用kubeadm快速部署k8s集群

使用kubeadm快速部署k8s集群 一、环境准备 操作系统 CentOS7.x-86_x64 硬盘:40G+ | 角色 | IP | | | | | master | 192.168.130.10 | | node | 192.168.130.20 | 二、kubeadm工具介绍 kubeadm是 ......
集群 kubeadm k8s k8 8s

Kafka基础阶段与集群搭建详细教程

Kafka第一天课堂笔记 一.Kafka简介 1.1消息队列 消息队列——用于存放消息的组件 程序员可以将消息放入到队列中,也可以从消息队列中获取消息 很多时候消息队列不是一个永久性的存储,是作为临时存储存在的(设定一个期限:设置消息在MQ中保存10天) 消息队列中间件:消息队列的组件,例如:Kaf ......
集群 阶段 基础 教程 Kafka

easy es 避坑指南

为了让每位用户(尤其是小白)尽量避免踩坑,节省更多时间,特此总结一篇避坑指南,在正式使用EE之前,不妨花三五分钟学习一下,可以帮各位在使用中避免踩坑,从而节省大量时间. 遇到问题尽量先从使用角度是否规范,版本是否兼容去下手,我们已提供的API都是有测试用例覆盖,单测覆盖率高达95%+,并有社区大量用 ......
指南 easy es

elasticsearch集群及kibana安装

系统配置 创建一个用户elastic,不能使用root用户启动 配置该用户环境变量 ,用户home目录 .bash_profile文件 #配置ES_JAVA_HOME使用es自带jdk export ES_JAVA_HOME=/data/es/elasticsearch/jdk #修改最大文件句柄数 ......
集群 elasticsearch kibana

k8s集群部署搭建

一.搭建环境 win11 16G+1t VMware虚机 4G+2G+2G 二.拓扑图 master+2node 三.ip 划分 四.前置条件配置完成,按照文档进行搭建即可,最终实现效果如下图 ......
集群 k8s k8 8s

es基本操作

增 post http://192.168.133.131:9200/shopping/_doc { "title":"小米手机", "category":"小米", "images":"http://www.gulixueyuan.com/xm.jpg", "price":4999 } put h ......
基本操作

Canal1.1.5同步mysql5.7到ES7.10

一、开启mysql的二进制日志 vim /etc/my.cnf log_bin=mysql-bin binlog-format=ROW server_id=1 二、创建索引 要求Mapping中定义的字段名称和类型与待同步数据保持一致 PUT es_test?include_type_name=tr ......
Canal1 mysql5 Canal mysql 1.5

K8S集群管理工具、平台

1 Rancher Rancher中文官网:https://docs.rancher.cn/ 2 KubeSphere 官网:https://kubesphere.com.cn/ 面向云原生应用的 容器混合云 KubeSphere 愿景是打造一个以 Kubernetes 为内核的云原生分布式操作系统 ......
管理工具 集群 工具 平台 K8S

ES全文检索,Neo4J,activiti审批流的知识库管理系统

一、项目介绍 一款全源码,可二开,可基于云部署、私有部署的企业级知识库云平台,一款让企业知识变为实打实的数字财富的系统,应用在需要进行文档整理、分类、归集、检索、分析的场景。 获取方式+q:262086839 为什么建立知识库平台? 助力企业知识资产有效沉淀和利用,避免随文档负责人变动而重复制作,无 ......

k8s-外置ETCD集群部署

如何把ETCD的数据库备份,以及还原的操作方法(待更新中) 地址: Etcd 是一个分布式键值存储系统,Kubernetes使用Etcd进行数据存储,所以先准备一个Etcd数据库,为解决Etcd单点故障,应采用集群方式部署,这里使用3台组建集群,可容忍1台机器故障。为了节省机器,这里把3个ETCD实 ......
集群 ETCD k8s k8 8s

k8s集群-CNI网络插件(Calico 和 Flannel)

1)部署flannel网络(主节点服务器) 在主节点服务器上查看子节点状态为NotReady [root@k8s-master01-15 ~]# kubectl get node NAME STATUS ROLES AGE VERSION k8s-master01-15 NotReady maste ......
集群 插件 Flannel Calico 网络

kubeadm安装-k8s集群(阿里云服务)【转】-实测安装成功

部署Kubeadm遇到的哪些问题,并且如何解决 http://www.shanhubei.com/archives/2581.html k8s集群-CNI网络插件 地址:http://www.shanhubei.com/archives/2582.html 1、初始化服务器设置(三台都要) 环境机器 ......
集群 kubeadm k8s k8 8s

Hadoop运行集群搭建

Hadoop运行集群搭建 虚拟机环境准备 安装虚拟机及基本配置 IP地址192.168.10.100、主机名称hadoop100,内存4G、硬盘50G 测试下虚拟机联网情况 1 [root@hadoop100 ~]# ping www.baidu.com 2 PING www.baidu.com ( ......
集群 Hadoop

CentOS7下搭建LVS_DR集群

环境:CentOS7.9 2009 nginx 1.20.1 1.利用ipvsadm添加虚拟服务 VIP :192.168.137.200:82 -s :负载均衡算法采用加权轮询 -p : 持久化时间20s 2.在虚拟服务中添加真实服务地址 RIP :192.168.137.13:82 192.16 ......
集群 CentOS7 CentOS LVS_DR LVS

分布式kv存储系统之etcd集群管理

leader选举过程是这样的;首先candidate向集群其他候选节点(condidate角色的节点)发送投票信息(Request Vote),默认是投票给自己;各候选节点相互收到另外的节点的投票信息,会对比日志是否比自己的更新,如果比自己的更新,则将自己的选票投给目的候选人,并回复一个包含自己最新... ......
分布式 集群 系统 etcd

Docker-compose 容器集群

一、Docker-compose 简介 Docker-Compose项目是Docker官方的开源项目,负责实现对Docker容器集群的快速编排。 Docker-Compose将所管理的容器分为三层,分别是 工程(project),服务(service)以及容器(container)。Docker-C ......
集群 Docker-compose 容器 compose Docker

云原生第一周--ubuntu2204使用containerd容器和kubeadm工具部署单master k8s集群

1 Kubernetes介绍 Kubernetes 是一个可移植、可扩展的开源平台,用于管理容器化的工作负载和服务,可促进声明式配置和自动化。 Kubernetes 拥有一个庞大且快速增长的生态,其服务、支持和工具的使用范围相当广泛。 Kubernetes它能做什么 服务发现和负载均衡 Kubern ......
集群 容器 containerd kubeadm 工具

云原生第二周--使用kubeasz部署多master的k8s集群

1 k8s集群介绍 1.1 k8s单master架构 [ ] 单master节点的架构,通常只用于测试环境,生产环境绝对不允许;这是因为k8s集群master的节点是单点,一旦master节点宕机,将导致整个集群不可用;其次单master节点apiServer是性能瓶颈;从上图我们就可以看到,mas ......
集群 kubeasz master k8s k8

Kubernetes从入门到精通 集群测试

1 创建一个nginx服务 kubectl create deployment nginx --image=nginx:1.14-alpine 2 暴露端口 kubectl expose deploy nginx --port=80 --target-port=80 --type=NodePort ......
集群 Kubernetes

openGauss单机+主从集群部署_万能场景安装_搭建_适用所有场景_openGauss3.0.0_openGauss课程

一、opengauss 的背景和行业现状 2022 年,七大 openGauss 商业版发布,是基于 openGauss3.0 推出商业发行版 目前海量数据库 Vastbase 表现最佳,一直是 TOP 1 作者认为之所以海量数据库 Vastbase 目前无法被同行超越,和各家研发实力和技术背景有关 ......
openGauss 场景 主从 集群 openGauss3

使用nginx搭建3台Tomcat集群

#配置上游服务器 upstream tomcats { server 192.168.206.129:8080; server 192.168.206.130:8080; server 192.168.206.131:8080; } server { listen 612; server_name ......
集群 Tomcat nginx