集群zookeeper clickhouse架构
将 .NET Aspire AppHost 部署到 Kubernetes 集群
使用Aspirate可以将Aspire程序部署到Kubernetes 集群 工具安装 dotnet tool install -g aspirate --prerelease 注意：Aspirate 正在开发中，该软件包将作为预览版进行版本控制，--prelease 选项将获得最新的预览版。 容器注 ......
服务器架构的发展
1 背景 商业化处理器都致力于单核处理器的发展，通过在芯片上集成更多数目的晶体管，加快运算速度 (即主频)，从而提升系统性能。 2005年，当主频接近 4GHz 时，Intel 和 AMD 发现，单纯提升主频已无法明显提升系统整体性能。单核处理器利用冗长的运算流水线 (即增加每个始终周期同时执行的运 ......
十一、RabbitMQ集群
一、clustering 1、使用集群的原因 2、搭建步骤 2.1 搭建架构图 2.2 操作步骤 2.3 实战部分操作演示 二、镜像队列 1、使用镜像的原因 2、搭建步骤 2.1 操作步骤 2.2 实战步骤 三、Haproxy+Keepalive实现高可用负载均衡 1、整体架构图 2、Haproxy ......
Spring入门02Spring Framework系统架构
Spring Framework系统架构 Spring Framework系统架构图 Spring Framework课程学习路线 ......
为什么王者荣耀不使用微服务架构？
来源：zhihu.com/question/359630395/answer/954452799 今天，在知乎上看到这样一个问题："为什么游戏公司的server不愿意微服务化？" 背景介绍 最近面试了一家游戏公司（满大间的，有上市） 我问他，公司有没有做微服务架构的打算及考量？ 他很惊讶的说，我没听 ......
clickhouse特性以及适用场景
适用场景 大量数据写入和查询，但是修改比较少。对事务不敏感。偶尔数据丢失不敏感。 很多物联网类的应用场景都是如此。 统计城市的气温，一个城市一千个监测点，一分钟统计一次，一千个城市每分钟产生一百万数据，一天就是十四亿条数据。 统计物流车辆位置信息 统计用户网络行为 这些都有着明显的特点，数据量大，大 ......
微服务架构相关
微服务架构相关 名词解释 熔断 降级 限流 熔断（Circuit Breaking）、降级（Degradation），以及断流（Flow Control）都是在分布式系统中用于提高可用性和稳定性的关键概念，通常与微服务架构和服务间通信有关。以下是它们的解释： 熔断（Circuit Breaking） ......
Redis集群
Redis Sentinel： 什么是 Sentinel？ 有什么用？ Sentinel 如何检测节点是否下线？主观下线与客观下线的区别? Sentinel 是如何实现故障转移的？ 为什么建议部署多个 sentinel 节点（哨兵集群）？ Sentinel 如何选择出新的 master（选举机制）? ......
Zookeeper——分布式一致性协议及Leader选举原理
一、引言 随着业务的增长，单体架构发展为分布式架构，大大提升了业务的处理能力，但同时也带来了很多单体架构不存在的问题，如： 各节点之间网络通信的异常以及因其引起的脑裂问题（网络分区）。 引出“三态”。在单体架构中只会存在“成功”或“失败”两种结果，但是在分布式架构中由于网络异常将会出现“未知”的结果 ......
vSAN集群添加宿主机报错问题处理
背景： 1、新增宿主机到vsan集群，服务器网口只有4个，所以规划vsan和管理关联到标准交换机（vsan的适配器MTU-9000、管理的适配器MTU-1500）--使用两个网口、vmotion和业务vlan关联到分布式交换机 使用两个网口；2、在往vsan集群添加宿主机的时候，新的宿主机HA状态一 ......
大语言模型底层架构丨带你认识Transformer
本文分享自华为云社区《大语言模型底层架构你了解多少？大语言模型底层架构之一Transfomer的介绍和python代码实现》，作者： 码上开花_Lancer 。 语言模型目标是建模自然语言的概率分布，在自然语言处理研究中具有重要的作用，是自然语言处理基础任务之一。大量的研究从n 元语言模型（n-gr ......
BeeGFS部署高可用集群
BeeGFS 高可用集群搭建 参考文档：https://aws.amazon.com/cn/blogs/china/how-to-build-beegfs-on-aws-system/ 目标状态查询 元数据 targets > beegfs-ctl --listtargets --nodetype= ......
docker创建mysql集群
一、创建mysql的节点目录 # 创建第一个节点 mkdir /home/mysql-cluster/node1 cd /home/mysql-cluster/node1 mkdir conf data files log # 创建第二个节点 mkdir /home/mysql-cluster/no ......
1.需求分析和架构设计
需求分析 熟悉产品需求 以架构师的思维分析需求，不能只停留在表面实现需求，要考虑怎么实现能给业务带来增长 全局思维、整体思维、闭环思维，不能只考虑自己，要全局考虑整个团队，要做到有输出、有输入、有结果 浅层需求 分析表面需要实现的功能，如登录、创建作品、编辑、发布、访问作品等 深度需求 通过浅层需求 ......
Kafka集群调优+能力探底
一、前言 我们需要对4个规格的kafka能力进行探底，即其可以承载的最大吞吐；4个规格对应的单节点的配置如下： 标准版： 2C4G 铂金版： 4C8G 专业版： 8C16G 企业版： 16C32G 另外，一般来讲，在同配置下，kafka的读性能是要优于写性能的，写操作时，数据要从网卡拷贝至堆内存，然 ......
StackGres 数据库平台工程，使用 Citus + Patroni 创建生产级高可用分布式 PostgreSQL 分片集群
系列 StackGres, 可私有部署的云原生数据库平台工程 StackGres 数据库平台工程功能介绍与快速上手 StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer) StackGres 1.6 数据库平台工程，集群高可用(Patro ......
直播预约丨《实时湖仓实践五讲》第四讲：实时湖仓架构与技术选型
如今，大规模、高时效、智能化数据处理已是“刚需”，企业需要更强大的数据平台，来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战，湖仓一体方案应运而生。 《实时湖仓实践五讲》是袋鼠云打造的系列直播活动，将围绕实时湖仓的建设趋势和通用问题，邀请奋战于企业数字化一线的核心产品&技术专家 ......
Quartz核心原理之架构及基本元素介绍
Quartz是一个作业调度框架，它可以与J2EE和J2SE应用相结合，也可以单独使用。它能够创建多个甚至数万个jobs这样复杂的程序，jobs可以做成标准的java组件或EJBS。Quartz很容易上手，创建一个任务仅需实现Job接口，该接口只有一个方法void execute(JobExecuti... ......
微服务架构介绍
微服务架构十二要素： 这十二要素可以说是微服务架构的方法论，有了思想，方法论和战术维度，我觉得就可以完整的描绘出一个微服务架构的全景图。然后，我将我理解的微服务架构总结成一句话：微服务架构是 一种去中心化的分布式服务架构，架构拥有服务寻址，故障容错，流量调度，控制访问和可观测性的服务治理能力，从而实 ......
新来个架构师，把Xxl-Job原理讲的炉火纯青
大家好，我是三友~~ 今天来继续探秘系列，扒一扒轻量级的分布式任务调度平台Xxl-Job背后的架构原理 公众号：三友的java日记 核心概念 这里还是老样子，为了保证文章的完整性和连贯性，方便那些没有使用过的小伙伴更加容易接受文章的内容，快速讲一讲Xxl-Job中的概念和使用 如果你已经使用过了，可 ......
4、虚拟机单机、集群的克隆、删除脚本（以初始化好的虚拟机为模板）
摘自：https://blog.51cto.com/mfc001/6408229 虚拟机克隆、删除脚本 [root@ubunt ~]# cat clone.sh #!/bin/bash # #. /etc/init.d/functions （如果是ubuntu，注释此行） Red="\e[1;31m ......
使用Slurm集群进行分布式图计算：对Github网络影响力的系统分析
本文在华为云弹性云服务器集群中部署Slurm作业调度系统，并运行针对Github协作网络影响力分析的分布式图计算应用程序。 ......
聊聊部署在不同K8S集群上的服务如何利用nginx-ingress进行灰度发布
前言 之前有篇文章聊聊如何利用springcloud gateway实现简易版灰度路由,里面的主人公又有一个需求，他们有个服务是没经过网关的，而是直接通过nginx-ingress暴露出去，现在这个服务也想做灰度，他知道在同个集群如何利用nginx-ingress进行灰度发布，但是现在这个服务是部署 ......
.NET CORE架构分层2
在一个项目中同时存在MVC控制器、API接口和Service层是很常见的情况，尤其是在企业级应用中。这种设计通常意味着你的应用需要同时支持页面渲染和API调用，可能是为了服务于不同的客户端，例如浏览器、移动应用或第三方集成。以下是一些建议来设计这样一个系统：### 分层架构1. **Controll ......
.NET CORE架构分层3
前端直接访问API是完全可行的，实际上这种架构模式在现代Web应用程序中非常普遍，尤其是在单页应用（SPA）和基于微服务的系统中。这种模式通常被称为前后端分离架构，在这种架构中，前端和后端通过定义良好的API接口进行通信。### 前后端分离架构的优点：1. **解耦合**：前端和后端的开发可以相互独 ......
公网搭建Kubernetes集群
由于本次软分大作业采用一台华为云服务器和两台阿里云服务器，两者之间内网不互通，无法搭建内网k8s集群，不得已才在公网搭建。 公网搭建会出各种问题，有条件的话还是建议在内网搭建。 一个很详细的教程：https://zhuanlan.zhihu.com/p/627310856 一、服务器配置 主机名 i ......
容器与集群——通过deployment 创建pod以及Java Web应用的容器化发布
## 一、通过deployment 创建pod 1.1 编写yaml文件 1.2 安装pod 创建kubectl create -f dp-nginx.yaml 查看Deployment信息 1.3 查看相关信息 查看pod信息kubecel get pods 查看rs信息 二、Java Web应用 ......
MySQL系列之读写分离架构——Atlas介绍、安装配置、Atlas功能测试、生产用户要求、Atlas基本管理、自动分表、关于读写分离建议
文章目录 1. Atlas介绍2.安装配置3. Atlas功能测试4. 生产用户要求5. Atlas基本管理6. 自动分表7. 关于读写分离建议 1. Atlas介绍 Atlas是由 Qihoo 360, Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。 它是在mysql- ......
ClickHouse(16)ClickHouse日志引擎Log详细解析
日志引擎系列 这些引擎是为了需要写入许多小数据量（少于一百万行）的表的场景而开发的。 这系列的引擎有： StripeLog Log TinyLog 共同属性 引擎： 数据存储在磁盘上。 写入时将数据追加在文件末尾。 不支持突变操作,也就是更新。 不支持索引。 这意味着 `SELECT` 在范围查询时 ......
docker compose 一键部署zookeeper集群
compose.yml 文件 services: zoo1: image: zookeeper:3.8.3 restart: always hostname: zoo1 ports: - 2181:2181 environment: ZOO_MY_ID: 1 ZOO_SERVERS: server. ......