分布式 原理etcd k8s
多维随机变量及其分布
《二维随机变量》 注意 在分布函数中 P{X<=x 且 Y<=y} 而且有性质： 这个性质在求概率密度的未知数时有用 这个公式结合一下二维前缀和算法就能很好明白了 《二维离散型随机变量》 注意一下分布律的求法，其中的概率记住：X与Y是 且 《二维连续型随机变量》 具体练习看书P65 《高数知识》 到 ......
Hive 如何巧用分布函数percent_rank()剔除极值求均值
场景描述 前期写过一篇关于剔除订单极值求订单均值的案例，之前使用的是 dense_rank 函数对订单金额进行排序后，过滤掉最大值最小值后进行处理，最近工作刚好使用到分布函数percent_rank，想起来应该也可以用到这个场景； percent_rank() 简介 percent_rank() 函 ......
SDUT编译原理：表达式语法分析——递归子程序法
输入样例： i+i*i# 我的题解： #include<bits/stdc++.h> using namespace std; char s[100]; int num,k; void E(); void F(); void G(); void T(); void S(); void E() { i ......
分布式系统——基于Redis的分布式锁的实现
分布式锁的介绍 分布式锁是分布式系统中用于协调多个进程或线程之间并发访问共享资源的一种机制。在分布式系统中，由于各个节点之间的通信存在延迟、故障等问题，可能会导致数据的不一致性。为了保证数据的一致性，需要使用分布式锁来协调各个节点的并发访问。 在分布式系统中，多个节点同时访问共享资源可能会导致以下问 ......
大数据经典论文解读 - 分布式锁 Chubby
Chubby 在谷歌“三驾马车”中3个系统都是单Master系统，这个Master是系统的单点，一旦Master故障集群就无法提供服务。使用Backup Master，通过监控机制进行切换。但是： 如何实现Backup Master和Master完全同步？ 监控程序也是单点，如何确定是Master宕 ......
k8s 资源限制层级
对pod和container的资源设置数值限制，如果值不符合下面设置则启动报错 apiVersion: v1 kind: LimitRange metadata: name: limitrange-magedu namespace: magedu spec: limits: - type: Cont ......
k8s work节点重新获取token
在master节点重新生成token命令，然后在node子节点中执行kubuadm join命令 kubeadm token create --print-join-command 如果网忘了证书的秘钥，可以在master节点执行以下命令 openssl x509 -pubkey -in /etc/ ......
第5章 K8s
5.1 K8s基础 5.1.3 K8s核心特性 K8s的主要特点： 轻量级：下载后即可用； 便携：可部署在公有云、私有云或混合云等任意环境； 可扩展性：采用插件化的设计架构，每个模块都可插拔； K8s的核心功能：自动化的任务管理、对微服务架构体系的支撑以及最大化资源利用； 自动化的任务管理：包括应用 ......
详解 K8S 高可用部署，超详细！
运维，没你想的那么简单！ 一、前言 二、基础环境部署 1）前期准备（所有节点） 2）安装容器 docker（所有节点） 3）配置 k8s yum 源（所有节点） 4）将 sandbox_image 镜像源设置为阿里云 google_containers 镜像源（所有节点） 5）配置 containe ......
Redis添加分布式锁
1.不是高并发的场景 stringRedisTemplate.opsForValue.setIfAbsent("zql","人在代码在",10,TimeUnit.SECONDS);//只加过期限制 2.高并发的场景 如果加锁的过期时间小于业务执行时间，那么需要给每个线程的锁加这个线程的唯一标识，让每 ......
k8s搭建prometheus+grafana监控系统0.11版本离线安装
所需镜像汇总： quay.io/brancz/kube-rbac-proxy:v0.12.0 3b63df468a30 quay.io/prometheus/node-exporter:v1.3.1 1dbe0e931976 k8s.gcr.io/kube-state-metrics/kube-st ......
ceph分布式存储搭建
CEPH分布式存储搭建 本文通过参考臧 雪 园 老师的文档根据实际操作做修改，详细视频链接参考： https://edu.51cto.com/course/15982.html 集群配置信息： 安装的ceph版本： 配置所需源的地址 wget -O /etc/yum.repos.d/CentOS-B ......
小白也能看懂的二维码生成器 API 的技术原理（附Java 接入代码）
写在前面 二维码生成器 API 是一种将文本或 URL 转换为二维码图像的技术。在现代生活中，二维码已经成为了很多人生活中不可或缺的一部分，因为它们可以快速识别、易于存储，并具有可靠性。但是，大多数人并不知道如何生成自己的二维码。 本文将介绍二维码生成器 API 的技术原理、实际应用场景、以及如何使 ......
42、K8S-网络机制之calico、calicoctl
Kubernetes学习目录 1、基础知识 1.1、简介 Calico是一个开源的虚拟化网络方案,用于为云原生应用实现互联及策略控制.相较于 Flannel 来 说,Calico 的优势是对网络策略(network policy),它允许用户动态定义 ACL 规则控制进出容器的数据 报文,实现为 P ......
etcd心跳超时处理过程
正文不废话 背景原因 日常巡检发现etcd报了心跳超时（大二层，所以可能不在同一交换机下，怀疑网络质量问题） failed to send out heartbeat on time (exceeded the 100ms timeout for .*ms.) 解决方案 调整etcd心跳 排查过程 ......
网络原理与网络编程
io模型 有哪些网络io模型？哪些网络操作可以是异步的？ 常见的网络 IO 模型有：同步阻塞 IO，同步非阻塞 IO，多路复用 IO 和异步 IO。 异步网络操作包括：连接请求，数据发送和数据接收。(不确定) select/poll/epoll select/poll与epoll区别 select ......
Synchronized实现原理，你知道多少？
1.synchronized的作用是什么 synchronized也叫作同步锁，解决的是多个线程之间对资源的访问一致性。换句话说，就是保证在同一时刻，被synchronized修饰的方法或代码块只有一个线程在执行，其他线程必须等待，解决并发安全问题。 其可以支持原子性、可见性和有序性。三大特性的说明 ......
ASP.NET Core MVC 请求处理管道原理
ASP.NET Core MVC 和 Razor Pages 应用的完整请求处理管道 Endpoint 包含 MVC 和 Razor Pages ......
redis使用setnx+lua实现分布式锁
在Redis中，使用SETEX命令（对应RedisTemplate的setIfAbsent方法）可以实现一个最简易的分布锁。SETEX命令当key不存在的话，才会设置key的值，如果可以已经存在，就不做任何操作。 为了避免锁无法被释放，就给这个key（也就是锁）设置一个过期时间。 为了保证解锁操作的 ......
微观经济学原理
经济学十大原理 人们如何做出决策 人们面临权衡取舍 某种东西的成本是为了得到它所放弃的东西 理性人考虑边际量 人么会对激励做出反应 人们如何相互影响 贸易可以使每个人的状况都变得更好 市场通常是组织经济活动的一种好方法 政府有时可以改善市场结果 整体经济如何运行 一国的生活水平取决于它生产物品与服务 ......
ES原理和优化
如果希望把 ES 作为大型数据库使用，建议注意两个方面的问题： 1、使用场景方面 我们把 ES 定位为分布式的搜索分析型数据库，并通过实际业务验证，可以非常好的支持下列场景： **全文搜索：**ES 最初的目标场景，非常多的大型互联网公司都在基于 ES 搭建自己的核心搜索，包含 Git 的代码搜索、 ......
Thread原理
1、什么是线程 线程是CPU调度执行的基本单元。 JVM允许在一个程序中同时执行多个线程，在Java中，用java.lang.Thread这个类来表示线程。 线程有优先级，高优先级的线程往往会比低优先级的线程先执行。 守护线程(daemon Thread)，主线程执行完，守护线程跟着结束。 2、Th ......
【原理揭秘】Vite 是怎么兼容老旧浏览器的？你以为仅仅依靠 Babel？
作者：京东科技 孙凯 一、前言 对前端开发者来说，Vite 应该不算陌生了，它是一款基于 nobundle 和 bundleless 思想诞生的前端开发与构建工具，官网对它的概括和期待只有一句话：“下一代的前端工具链”。 Vite 最早的版本由尤雨溪发布于3年前，经历了3年多的发展，Vite 也已逐 ......
第一章 1.2节 Kubeadm安装K8S高可用集群（二）
1.1 查看Token过期时间 执行下面命令查看所有Token： kubectl get secret -n kube-system 找到之前创建的new.yaml文件，进去查看使用的Token： [root@k8s-master01 ~]# cat new.yaml apiVersion: kub ......
Vue2依赖收集原理
我们只会在 Observer 类 和 defineReactive 函数中实例化 dep。在 getter 方法中依赖收集，在 setter 方法中派发更新通知 ......
【Java 并发】【synchronized】【二】synchronized的锁重入、锁消除、锁升级原理？无锁、偏向锁、轻量级锁、自旋、重量级锁
1 前言 这节我们来看看synchronized的锁重入、锁优化、和锁升级的原理。 2 synchronized锁重入 所谓锁重入，就是支持正在持有锁的线程支持再次获取锁，不会出现自己锁死自己的问题。 比如以下的代码： synchronized(this) { synchronized(this){ ......
Diffusion Model 原理解析
Stable Diffusion Model 一. 原理 diffusion整体思路如下: 说明: 整个过程主要分为正向过程和逆向过程.正向过程主要是将图像转化为纯噪声的过程,而逆向过程正好相反,是将纯噪声还原为原图像的过程. 正向过程:对于一张图像$\alpha_0$我们为它添加一个服从标准正态分 ......
Zookeeper Session原理
我们的 Leader 已经选举出来了，那接下来该干什么呢？你或许很快能想到，那就是数据同步。通俗地讲，就是 Leader 选出来了，各自的角色都确定好了，那 Follower 和 Observer 自然要同 Leader 建立连接同步数据，这里就引入了 ZooKeeper 的另一个核心知识：Sess ......