Etcd
服务注册etcd
etcd etcd比较多的应用场景是用于服务发现，服务发现(Service Discovery)要解决的是分布式系统中最常见的问题之一，即在同一个分布式集群中的进程或服务如何才能找到对方并建立连接。 从本质上说，服务发现就是要了解集群中是否有进程在监听upd或者tcp端口，并且通过名字就可以进行查找 ......
网关神器traefik的，etcd和https配置例子
traefik v2 https router service etcd 边缘 Edge Gateway 博客园 【前言】 写本文目的： 网上应该没有 traefik v2 配 etcd 的例子。 traefik被我喜爱的原因：跨平台，支持win，linux版同时使用。同时支持监控目录和etcd。 ......
谈一谈如何使用etcd中的事务以及自己的理解
01、谈一谈etcd事务的如何使用以及自己的理解 本文内容来源于自己学习时所做的记录，主要来源于文章最后的参考链接，如有侵权，请联系删除，谢谢！ etcd 是一个 key/value 类型的数据库。既然我们需要存储数据，必然会面临这样一个需求，即希望无论什么样的场景下，一组操作要么同时完成，要么都失 ......
etcd：增加30%的写入性能
etcd：增加30%的写入性能 本文最终的解决方式很简单，就是将现有卷升级为支持更高IOPS的卷，但解决问题的过程值得推荐。 译自：etcd: getting 30% more write/s 我们的团队看管着大约30套自建的Kubernetes集群，最近需要针对etcd集群进行性能分析。 每个et ......
备份还原ETCD
ETCD定期备份 1、查看ETCD状态 ETCDCTL_API=3 /opt/etcd/bin/etcdctl \--cacert=/opt/etcd/ssl/ca.pem \--cert=/opt/etcd/ssl/server.pem \--key=/opt/etcd/ssl/server-ke ......
2、etcd单机部署和集群部署
上一章我们认识了etcd，简单的介绍了 etcd 的基础概念，但是理解起来还是比较抽象的。这一章我们就一起来部署下 etcd 。这样可以让我们对 etcd 有更加确切的认识。 1、etcd单实例部署 对于平常的学习，其实搭建一个单机节点是够了的。接下来就讲讲怎么搭建单机节点。 本次部署是在 cent ......
k8s-外置ETCD集群部署
如何把ETCD的数据库备份，以及还原的操作方法（待更新中） 地址： Etcd 是一个分布式键值存储系统，Kubernetes使用Etcd进行数据存储，所以先准备一个Etcd数据库，为解决Etcd单点故障，应采用集群方式部署，这里使用3台组建集群，可容忍1台机器故障。为了节省机器，这里把3个ETCD实 ......
读取 k8s 存储在 etcd 上的数据
读取 k8s 存储在 etcd 上的数据 Etcd Assistant 是一款 Etcd 可视化管理工具，便捷高效地操作您的 etcd 集群；支持多种键的视图；管理租约、用户、角色和权限。 etcd是一个分布式KV存储系统，在分布式系统中被广泛使用，Kubernetes就是使用了etcd存储持久化数 ......
1、etcd基础介绍
互联网技术发展真的快，层出不穷的新技术。最近项目使用到了etcd，自己之前在部署k8s集群的时候玩过，但是并没有系统的学习。正好趁这个机会，系统性的学习下。文章中的内容有些是来自官方文档，有些是来自网上的资料，有些是自己的思考。如果有不错的地方，请不吝赐教，大家有好的教程，也欢迎评论区留言，学习学习 ......
Etcd选主源码分析
Etcd v3.4.0 Raft角色 Raft集群中节点分为3种状态：领导者Leader、追随者Follower、候选者Candidate。正常情况下，集群中的节点只存在Leader与Follower这2种状态。 Leader：负责日志的同步管理，处理写请求，与Follower保持心跳。Follow ......
分布式kv存储系统之etcd集群管理
leader选举过程是这样的；首先candidate向集群其他候选节点（condidate角色的节点）发送投票信息（Request Vote），默认是投票给自己；各候选节点相互收到另外的节点的投票信息，会对比日志是否比自己的更新，如果比自己的更新，则将自己的选票投给目的候选人，并回复一个包含自己最新... ......
Etcd 可视化管理工具，GUI 客户端。
Etcd Assistant——Etcd 可视化管理工具，GUI 客户端。 下载地址：http://www.redisant.cn/etcd 主要功能： 支持多标签页，同时连接到多个集群 以漂亮的格式显示JSON、XML、MessagePack、十六进制等数据格式 浏览、创建、编辑、删除键 导出和导 ......
使用docker 运行etcd 单实例/集群
一. 介绍 本文描述了如何使用docker搭建etcd集群，github/etcd上有单实例etcd服务的搭建方法，包括linux，mac，docker。 在操作之前你需要安装docker docker-compose 是可选的,如果你不想使用 docker-compose 就跳过他 二. etcd ......
K8s 集群 etcd节点故障解决方案
1 环境说明 k8s版本：v1.20 etcd节点（192.168.0.12）故障： 报错详情： 4月 24 22:47:13 k8s-node2 etcd[9543]: {"level":"warn","ts":"2023-04-24T22:47:13.571+0800","caller":"et ......
k8s etcd 备份还原
先根据etcd找到hostpatch 持久化目录，/var/lib/etcd 进入pod备份： ETCDCTL_API=3 etcdctl snapshot save snap.db \ --endpoints=https://127.0.0.1:2379 \ --cacert=/etc/kuber ......
使用etcd实现Master的选举功能
背景 说起master选举，最开始想到的可能就是zookeeper，但有些场景zookeeper的使用过于繁重和复杂，又由于etcd是基于Raft的分布式K/V存储，强一致性的K/V读写是核心。 所以造就了etcd可以用于master的选举的场景。 原理 etcd clientv3 concurre ......
注册中心对比: zookeeper&&etcd&&consul
1.注册中心概念 注册中心主要有三种角色： 服务提供者（RPC Server）：在启动时，向 Registry 注册自身服务，并向 Registry 定期发送心跳汇报存活状态。 服务消费者（RPC Client）：在启动时，向 Registry 订阅服务，把 Registry 返回的服务节点列表缓存 ......
从 HTTP 到 gRPC：APISIX 中 etcd 操作的迁移之路
罗泽轩，API7.ai 技术专家/技术工程师，Apache APISIX PMC 成员。 原文链接 Apache APISIX 现有基于 HTTP 的 etcd 操作的局限性 etcd 在 2.x 版本的时候，对外暴露的是 HTTP 1 （以下简称 HTTP）的接口。etcd 升级到 3.x 版本后 ......
搭建Etcd集群
docker pull quay.io/coreos/etcd:v3.3.1 docker run -d --name etcd1 quay.io/coreos/etcd:v3.3.1 etcd -name etcd1 -advertise-client-urls http://172.17.0.2 ......
etcd/raft选举源码解读
ETCD-raft笔记 0. 引言 该篇博客基于etcd v3.5.7版本，首先会简单介绍etcd/raft对Raft选举部分的算法优化，然后通过源码分析etcd/raft的选举实现。 1. etcd对于raft选举算法优化措施 该优化措施均在raft博士论文中有讲解 etcd/raft实现的与选举 ......
K8S 高可用外部 etcd运行时 (一) 安装 etcd 集群
K8S 1.20.5 高可用外部 etcd , Docker 容器运行时 (一) 安装 etcd 集群 架构 文中使用到的服务器ip及角色对应如下： IP角色其他软件 172.16.16.180 k8s-master-01 etcd 172.16.16.181 k8s-master-02 etcd ......
K8S 高可用外部 etcd 运行时 (三) 使用Flannel网络
kubectl apply -f kube-flannel.yml kind: Namespace apiVersion: v1 metadata: name: kube-flannel labels: k8s-app: flannel pod-security.kubernetes.io/enfo ......
K8S 高可用外部 etcd , Docker 容器运行时 (三) 加入K8S集群
control-plane上执行 1、# 证如果过期了，可以使用下面命令生成新证书上传，这里会打印出certificate key，后面会用到 kubeadm init phase upload-certs --upload-certs # 你还可以在 【init】期间指定自定义的 --certif ......
ETCD源码阅读（七）
DAY6 ：ETCD的leasing机制 前文说过lease与leasing的区别，今天就来看leasing具体是什么： leasing是指在ETCD中使用lease进行资源分配和管理的过程。当一个client希望使用某个资源时，它可以请求ETCD分配一个lease，并在这个lease的有效期内保持 ......
k8s-外置ETCD集群部署
如何把ETCD的数据库备份，以及还原的操作方法（待更新中） 地址： Etcd 是一个分布式键值存储系统，Kubernetes使用Etcd进行数据存储，所以先准备一个Etcd数据库，为解决Etcd单点故障，应采用集群方式部署，这里使用3台组建集群，可容忍1台机器故障。为了节省机器，这里把3个ETCD实 ......
ETCD源码阅读（六）
DAY5 ：ETCD的Lease机制 Lease 机制简介 除了前面文章中提到的分布式锁，lease机制还广泛应用于服务注册与发现场景，需要与watch机制相配合。本文主要做对Lease部分的源码分析。 一个租约可以关联ETCD集群中的一个或多个key。当租约过期或者被撤销时，关联的key会被自动删 ......
在Linux部署Etcd集群
前言 目前解决分布式系统下数据强一致性的主要算法理论是Paxos和Raft，偏向CAP定理一致性（Consistency）、可用性（Availability）、分区容错性（Partition tolerance）中的CP。 Raft在容错和性能方面和Paxos相当，不同之处在于它将问题分解成相对独立 ......
ETCD使用教程
Set up a cluster On each etcd node, specify the cluster members: TOKEN=token-01 CLUSTER_STATE=new NAME_1=machine-1 NAME_2=machine-2 NAME_3=machine-3 H ......
ETCD源码阅读（五）
DAY4 ：ETCD的WAL WAL(Write-Ahead Logging)是数据库中保证数据持久化的常用技术。每次真正操作数据之前，先往磁盘上追加一条日志。由于日志是追加的(顺序写，而不是随机写)，所以写入性能非常高。 如果在写入日志之前，发生系统崩溃，那么数据肯定是没有写入磁盘的；如果在写入日 ......
etcd心跳超时处理过程
正文不废话 背景原因 日常巡检发现etcd报了心跳超时（大二层，所以可能不在同一交换机下，怀疑网络质量问题） failed to send out heartbeat on time (exceeded the 100ms timeout for .*ms.) 解决方案 调整etcd心跳 排查过程 ......