集群zookeeper clickhouse架构

RabbitMQ高可用集群的搭建部署(Centos7)

高可用集群架构 节点域名 操作系统 RabbitMQ版本 Erlang版本 iamdemo.tp-link.com Centos7.9 3.8.28 23.3-2 iamdemo2.tp-link.com Centos7.9 3.8.28 23.3-2 iamdemo3.tp-link.com Ce ......
集群 RabbitMQ Centos7 Centos

.NET CORE架构分层

在.NET Core项目中,分层架构是一种常见的设计模式,它有助于将应用程序划分为独立的区域,每个区域负责处理特定的开发任务。这种方法可以提高代码的可维护性、可测试性和可扩展性。以下是.NET Core项目分层时常见的命名约定:1. **Presentation Layer**(表示层): - `Y ......
架构 CORE NET

redis集群

集群:支持多个master,一个master挂载多个slave cluster自带了sentinel的故障转移机制,内置了高可用的支持,无需再去使用哨兵功能 客户端不再需要连接所有节点,只需连接一个可用节点 槽位slot负责分配各个物理节点,对应的节点来维护节点,插槽,数据之间的关系 集群算法--分 ......
集群 redis

【实用+干货】如何使用Clickhouse搭建百亿级用户画像平台看这一篇就够了

如果你是商家,当你要进行广告投放的时候,假如平台推送的用户都是你潜在的买家,那你就可以花更少的钱,带来更大的收益。这背后有一项技术支撑,那就是用户画像。 ......
干货 画像 Clickhouse 用户 平台

3.计算机硬件和基础架构

现在的计算机和移动设备都遵循冯诺依曼架构 冯诺依曼架构: 输入设备:键盘,鼠标,触屏 (CPU)运算器 + 控制器: 运算器:负责运算 控制器:负责控制语句(顺序,循环,条件) 输出设备:显示屏,打印机 内部存储器:内存条 外部存储器:硬盘,光盘,U盘 CPU与显卡的关系: 处理器CPU(中央处理器 ......
架构 硬件 计算机 基础

大型网络游戏任务系统的架构与设计

在网路游戏中做任务已经成为游戏很重要的一个核心功能和玩法,如何做好一个灵活可扩展的任务系统的架构与设计,今天来给大家分享一些我们的设计经验。接下来我把整个的任务系统分成以下6个模块: (1) 任务配置表设计与管理; (2) 游戏任务的解锁与生成; (3) 任务完成判定; (4) 任务完成后的奖励生成 ......

StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer)

Postgres 配置 PostgreSQL 的配置在 SGPostgresConfig CRD 中指定。如果在创建集群时没有指定自定义配置,StackGres 将创建一个默认配置,您可以在 这里 看到。 https://stackgres.io/doc/latest/reference/crd/s ......

使用 anasible 搭建一个多 master 多 worker 的 k8s 集群

kubernetes + istio 是目前最强大,也是最易于使用的服务网格方案。 要使用kubernetes + istio, 首先要搭建 kubernets 集群。搭建kubernetes 集群的 方式有很多,其中使用anisble自动化搭建kubernetes集群算是最具合适的方案了。 服务器 ......
集群 anasible master worker k8s

基于Docker搭建 Mysql8.0 主从架构

1、创建主从数据库文件夹 mkdir -p /usr/local/mysql/master1/conf mkdir -p /usr/local/mysql/master1/data mkdir -p /usr/local/mysql/slave1/conf mkdir -p /usr/local/m ......
主从 架构 Docker Mysql8 Mysql

Hadoop集群部署后相关WEB界面打不开大概原因

集群部署完毕后,查看相关WEB界面,打不开的原因可能如下: 1、可以先去检查LINUX(CentOS7)机器的防火墙是否关闭,命令如下: systemctl status firewalld.service (查看防火墙状态) (如果显示为关闭状态,则进行下一步; 如果显示尚未关闭,则进行关闭并设定 ......
集群 界面 原因 Hadoop WEB

Redis哨兵、复制、集群的设计原理与区别

本篇主要谈Redis的高可用 谈到Redis服务器的高可用,如何保证备份的机器是原始服务器的完整备份呢? 这时候就需要哨兵和复制 1.哨兵(Sentinel): 可以管理多个Redis服务器,它提供了监控,提醒以及自动的故转移的功能 2.复制(Replication): 则是负责让一个Redis服务 ......
哨兵 集群 原理 Redis

《架构漫谈》阅读笔记

身为软件工程的学生,在上大三以前,我也就是认为软件工程出去了就是编代码,在大一的时候也曾了解过软件架构师这个职业,当时自己只是觉得这个职业非常的高大上。那么现在已经到大三了,大学也马上就结束了,下面让我们来真正地了解一下什么是软件架构师,软件结构式又是如何工作的。 首先来了解一下什么是架构: 1、根 ......
架构 笔记

使用极限网关助力 ES 集群无缝升级、迁移上/下云

在工作中大家可能会遇到以下这些场景: 自建 ES 集群需要平滑迁移到 XX 云; 从 XX 云将 ES 集群迁移到自建机房; ES 集群进行跨版本升级,同时保留回退能力; 这些场景往往都还有个共同的需求:迁移过程要保证业务的最小停机时间。 幸运的是,在这三个场景中,我们都能使用极限网关来帮助我们进行 ......
网关 集群 无缝 极限 ES

redis集群压测报错Error from server: MOVED

## redis集群压测报错Error from server: MOVED ## 故障描述 redis7集群压测报错 ```sh Summary: throughput summary: 31250.00 requests per second latency summary (msec): av ......
集群 server redis Error MOVED

INFINI Labs 产品更新 | 修复 Easysearch 跨集群复制索引同步问题,Gateway 内存异常增长等问题

INFINI Labs 产品又更新啦~,本次更新主要对 Easysearch、Gateway、Console、Agent 等产品功能进行优化和相关 Bug 修复,解决了内存异常增长等问题,以下是详细说明。 INFINI Easysearch v1.6.2 INFINI Easysearch 是一个分 ......
问题 集群 Easysearch 索引 内存

C++聊天集群服务器5

一、服务器异常处理函数 ​ 这部分主要处理服务器异常退出时,用户的在线状态还是online不会改变,因此需要修改。由于是需要对用户进行操作,因此我们在user表的数据操作类添加重置用户状态函数。 ​ 在usermodel.hpp添加后: #ifndef USERMODEL_ #define USER ......
集群 服务器

k8s集群部署nginx服务以及外网访问nginx服务

1、查看k8s进群状态 [root@k8s-master test]# kubectl get node NAME STATUS ROLES AGE VERSION k8s-master Ready master 16d v1.15.1 k8s-node1 Ready <none> 16d v1.1 ......
nginx 集群 k8s k8 8s

软考架构师(14)——面向对象方法

0:基本概念 面向对象方法包括:面向对象分析,面向对象设计,面向对象程序设计 一:统一建模语言(UML) 1:UML结构 UML结构包括UML的基本构造块,支配这些构造块如何放在一起的规则(架构)和一些运用于整个UML的机制 (1)构造块: 事物: UML中的事物也称为建模元素,包括结构事物(str ......
架构 对象 方法

软考架构师(15)——基于构件的开发

一:构件与软件的重用 1:软件重用 软件重用(软件复用)是使用已有的软件产品(如设计、代码、文档等)来开发新的软件系统的过程。 软件重用的形式大体可分为垂直式重用和水平式重用。 水平式重用是重用不同应用领域中的软件元素,例如数据结构、排序算法、人机界面构件等。标准函数库是一种典型的原始的水平式重用机 ......
构件 架构

软考架构师(16)——项目开发管理

一:范围管理计划 1:分类 产品范围 项目范围 2:范围定义 (1)范围边界。范围定义最重要的任务就是详细定义项目的范围边界,范围边界是应该做的工作和不需要进行的工作的分界线。项目小组应该把工作时间和资源放在范围边界之内的工作上。如果相反,把精力和时间放在项目范围边界之外的工作上,那么得到的回报将非 ......
项目开发 架构 项目

软考架构师(6)——系统开发基础知识

一:软件开发方法 1:软件生命周期 软件生存周期,分为8个阶段: 1、可行性研究与计划 2、需求分析 3、概要设计 4、详细设计 5、实现 6、集成测试 7、确认测试 8、使用和维护 2:软件开发模型 1):瀑布模型 瀑布模型也称为生命周期法,是结构化方法中最常用的开发模型。开发如同瀑布,从一个阶段 ......
基础知识 架构 基础 知识 系统

软考架构师(18)——安全性与保密性

一:信息系统安全 信息安全是一个很广泛的概念,涉及到计算机和网络系统的各个方面。从总体上来讲,信息安全有5个基本要素: (1)机密性:确保信息不暴露给未授权的实体或进程。 (2)完整性:只有得到允许的人才能够修改数据,并能够判别数据是否已被篡改。 (3)可用性:得到授权的实体在需要时可访问数据。 ( ......
保密性 架构 安全性

软考架构师(5)——数据通信与计算机网络

一:网络架构 1:基本理论 网络协议三要素:语法,语义,同步 总时延 = 传输时延 + 传播时延 + 处理时延 + 排队时延 2:层次架构 网络互连模型(OSI/RM七层模型): 物理层(比特bit):RJ45、CLOCK、IEEE802.3 (中继器又转发器[原理信号再生],集线器,不能隔离冲突域 ......
数据通信 计算机网络 架构 数据

软考架构师(12)——嵌入式相关

一:嵌入式系统概论 嵌入式系统的特点包括: (1)系统专用性强。(2)软、硬件依赖性强。(3)系统实时性强。(4)处理器专用。(5)多种技术紧密结合。 (6)系统透明性。(7)系统资源受限。 实时系统的概念 实时系统可以看成对外部事件及时响应的系统。现实世界中,并非所有的嵌入式系统都具有实时特性,所 ......
嵌入式 架构

基于AI的架构优化:创新数据集构造法提升Feature envy坏味道检测与重构准确率

以Feature envy架构坏味道为例,利用一系列启发式规则和一个基于决策树的分类器,实现了一种基于真实数据的高质量重构数据集构造方法,并利用此方法构建的数据集将Feature envy架构坏味道的检测与重构准确率提升到业界SOTA水平。 ......
准确率 架构 味道 Feature 数据

软考架构师(7)——信息系统基础

一:信息系统基础 1:信息 不确定性的减少,系统有序程度的度量 信息论:单位bit, 熵: 信息的基本特征: 客观性,普遍性,无限性,动态性,依附性,变换性,传递性,层次性,系统性,转换性,及时性,安全性 2:信息系统 系统是指由多个元素有机地结合在一起,执行特定的功能以达到特定目标的集合体; 信息 ......
架构 基础 系统 信息

hadoop高可用集群集成hive

hive和hadoop的关系 从上图可以看出实际上外界是通过thrift server这个节点和hadoop的hdfs以及rm进行交互的,中间为driver 因此当我修改完hadoop集群为高可用的时候,hive也需要重新配置环境以下是我hive的全新配置 <configuration> <!-- ......
集群 hadoop hive

软考架构师(2)——操作系统基础知识(上)

一:操作系统引论 1:操作系统的目标和作用 操作系统的主要功能也正是针对四类资源进行有效的管理,及处理机管理,存储器管理,文件管理。设备管理。 用户可通过以下三种方式使用计算机:一命令方式,二系统调用方式,三图形窗口方式 联机命令接口(交互式命令接口):适用于分时或实时操作系统,cmd中的各种命令就 ......
基础知识 架构 基础 知识 系统

软考架构师(1)——计算机组成与体系结构

一:计算机系统概述 1:计算机发展历程 2:结构 (1)冯诺依曼机:由运算器,控制器,存储器,输入,输出五部分组成,以运算器为中心 (2)计算机层次结构:应用程序-高级语言-汇编语言-操作系统-指令集架构层-微代码层-硬件逻辑层 3:分类 单指令单数据流:冯诺依曼体系结构 单指令多数据流:向量处理器 ......
体系结构 架构 体系 结构 计算机

“碳”出新路!天翼云紫金架构给产业发展一点“颜色”!

由广州开发区管委会、黄埔区政府主办、上海浦东新区格物科创金融研究院协办的“2023粤港澳大湾区绿色计算产业大会”,于2023年11月28日在广州市黄埔区知识城国际会展中心隆重举行。大会主题围绕“绿色计算·驱动未来”进行讨论,向来自全球的与会嘉宾分享、交流了当前数字经济领域前沿的算力技术、人工智能技术... ......
产业发展 架构 颜色 产业