saas架构 整体 中小

18 16 | 高可用架构的十种武器:怎么度量系统的可用性?

你好,我是李智慧。 互联网应用是面向一般大众的应用系统,他们可能会随时需要使用应用,那么应用就必须要保持随时可用,即所谓的$small 7times24$小时可用。但是互联网应用又可能会遇到硬件故障、软件故障、黑客攻击等等各种不可用的场景。 业界通常用多少个9来说明互联网应用的可用性。比如说淘宝的可 ......
可用性 架构 武器 系统 18

【IT老齐016】MySQL高可用MHA架构方案

【IT老齐016】MySQL高可用MHA架构方案 MHA是日本程序员yoshinorim开发的MySQL高可用方案 采用Perl语言开发 MHA是最成熟MySQL高可用方案 场景:主服务器挂了,从服务器不会切换到主服务器,从而引出高可用MHA方案 。 MHA故障发现与转移 故障发现 启动:前置检查 ......
架构 方案 MySQL 016 MHA

3 12 | 高性能架构的三板斧:分析系统性能问题从哪里入手?

你好,我是李智慧。 我们在讨论高性能架构之前,需要先聊聊什么叫高性能,以及如何量化地测试系统的性能。在02讲中,我们讨论了一些和并发相关的指标。事实上,并发数正是系统性能的核心指标之一,因为高并发会引起系统资源短缺,来不及处理用户请求,就会导致系统性能下降。 除了系统并发数,一般说来,和系统性能相关 ......
三板 三板斧 高性能 架构 性能

2 01 | 软件建模与文档:架构师怎样绘制系统架构蓝图?

你好,我是李智慧。 我在开篇词中说过,我们课程中的一系列软件架构设计是用设计文档的形式呈现的。所以,在拆解一个个案例之前,我们先来了解一些关于软件设计文档的基础知识,这样你在学习后面的具体案例时,就能更加清楚地理解文档是基于什么方式来组织的了。 首先,请你设想这样一个场景:如果公司安排你做架构师,要 ......
架构 蓝图 文档 系统 软件

HiveServer2的架构

HiveServer2的架构 Hive 核心服务HiveServer2(HS2)的前世今生,最后提供代码实例 ......
HiveServer2 HiveServer 架构

李智慧 · 高并发架构实战课课程大纲

1 开篇词 | “附身”大厂架构师,身临其境设计高并发系统 2 01 | 软件建模与文档:架构师怎样绘制系统架构蓝图? 3 02 | 高并发架构设计方法:面对高并发,怎么对症下药? 5 04 | 网页爬虫设计:如何下载千亿级网页? 6 05 | 网盘系统设计:万亿 GB 网盘如何实现秒传与限速? 7 ......
大纲 架构 实战 智慧 课程

3 02 | 高并发架构设计方法:面对高并发,怎么对症下药?

你好,我是李智慧。 我们知道,“高并发”是现在系统架构设计的核心关键词。一个架构师如果设计、开发的系统不支持高并发,那简直不好意思跟同行讨论。但事实上,在架构设计领域,高并发的历史非常短暂,这一架构特性是随着互联网,特别是移动互联网的发展才逐渐变得重要起来的。 现在有很多大型互联网应用系统,其用户是 ......
对症下药 架构 方法 02

1 开篇词 | “附身”大厂架构师,身临其境设计高并发系统

你好,我是李智慧,目前担任同程旅行交通首席架构师。我曾在阿里巴巴和英特尔担任架构师,主要从事高并发系统架构和大数据相关产品的开发。我参与过alibaba.com和Apache Spark的架构设计与开发,也曾作为CTO领导团队经历了日订单从零到一百万的高并发技术挑战。 说来我也是你的老朋友了,因为我 ......
身临其境 开篇 架构 系统

一条SQL如何被MySQL架构中的各个组件操作执行的?

摘要:一条SQL如何被MySQL架构中的各个组件操作执行的,执行器做了什么?存储引擎做了什么?表关联查询是怎么在存储引擎和执行器被分步执行的?本文带你探探究竟! 本文分享自华为云社区《一条SQL如何被MySQL架构中的各个组件操作执行的?》,作者:砖业洋__。 1. 单表查询SQL在MySQL架构中 ......
架构 组件 MySQL SQL

vivo积分任务体系的架构演进-平台产品系列05

积分体系作为一种常见营销工具,几乎是每一家企业会员营销的必备功能之一,在生活中随处可见,随着vivo互联网业务发展,vivo积分体系的能力也随之得到飞速提升,本篇主要介绍vivo积分任务体系的系统建设历程。 ......
产品系列 架构 积分 体系 任务

”彭彭编程笔记“博客已升级为”彭彭架构笔记“公众号

”彭彭编程笔记“博客已升级为”彭彭架构笔记“公众号,请在微信公众号中搜索”彭彭架构笔记“或扫描下面的二维码,感谢你的关注。我将持续为你分享高质量原创技术文章。 ......
笔记 架构 公众 博客

1-系统架构

1. 系统架构包括什么形式? C/S架构 B/S架构 2. C/S架构? Client / Server(客户端 / 服务器) C/S架构的软件或者说系统有哪些呢? QQ(先去腾讯官网下载一个QQ软件,几十MB,然后把这个客户端软件安装上去,然后输入QQ号以及密码,登录之后,就可以和你的朋友聊天了, ......
架构 系统

24 操作系统的网络架构

传统的网络架构: 三层:核心层、汇聚层、接入层; 核心层:高速转发、为多个汇聚层提供连通性,同时为整个网络提供灵活的L3路由网络; 汇聚层:提供防火墙、SSL卸载、入侵检测、网络分析等; 接入层:ToR交换机,与服务器物理连接; 经典的IP网络是逐跳转发数据的,转发数据时,每台路由器都要根据包头的目 ......
架构 系统 网络 24

开源+实时+数据即服务的架构——唐建法受邀出席2023数据技术嘉年华【干货回顾】

依据现代数据栈的定义,Tapdata 是一个专注于数据集成和数据准备的现代数据栈工具,主要承担数据的采集、集成、准备和服务模块,其核心价值体现在数据集成上:将企业的数据进行联通,为新的数据业务提供新鲜的数据。 ......
数据 干货 嘉年华 架构 实时

软件开发、设计、架构的其他原则

LOD:迪米特法则(Law of Demeter) CRP:合成复用原则(Composite Reuse Principle) DRY:不要重复你自己原则 (Don’t Repeat Yourself Principle) KISS:KISS原则 (Keep It Simple and Stupid ......
架构 软件开发 原则 软件

一文搞懂 x64 IA-64 AMD64 Inte64 IA-32e 架构之间的关系

想要搞清楚 x64、IA64、AMD64 指令集之间的关系,就要先了解 Intel 和 AMD 这两家公司在生产处理器上的发展历史。 x86 处理器 1978年 Intel 生产了它的第一款 16bit 处理器8086,之后几款处理器名字也都以86结尾,包括80186,80286, 80386,80 ......
64 架构 之间 IA Inte

CS520 计算机架构

CS520 Computer ArchitectureProject 4 – Spring 2023Due date: 5/8/20231. RULES(1) You are allowed to work in a group of up to two students per group, wh ......
架构 计算机 520 CS

17、架构师面试题系列之Maven面试专题及答案(18题)

架构师面试题之Maven专题篇 一、Maven有哪些优点和缺点 优点如下:1.简化了项目依赖管理:2.易于上手,对于新手可能一个"mvn clean package"命令就可能满足他的工作3.便于与持续集成工具(jenkins)整合4.便于项目升级,无论是项目本身升级还是项目使用的依赖升级。5.有助 ......
架构 答案 专题 Maven

SPQA:基于AI的架构

人工智能将在未来几个月和几年内做很多有趣的事情,这要归功于GPT之后的爆炸。但最重要的变化之一是更换我们现有的软件。 我们曾经使我们的业务适应软件的局限性。在这个模型中,软件将适应我们开展业务的方式。 基于人工智能的应用程序将与我们今天拥有的应用程序完全不同。新架构将是一个更加优雅的基于GPT的四组 ......
架构 SPQA

三层架构

1.导入jar 包(mysql、spring、junit、druid、spirng-jdbc) <dependency> <groupId>org.springframework</groupId> <artifactId>spring-context</artifactId> <version>5 ......
架构

Keepalived+Nginx架构配置

Keepalived介绍 keepalived是一个类似于layer3, 4, 5 交换机制的软件,也就是我们平时说的第3层、第4层和第5层交换。Keepalived的作用是检测web服务器的状态,如果有一台web服务器死机,或 工作出现故障,Keepalived将检测到,并将有故障的web服务器从 ......
Keepalived 架构 Nginx

RocketMQ(三):架构设计

官网地址:RocketMQ官网架构设计地址。 一、技术架构 1.1、RocketMQ整体技术架构图 1.2、技术架构的组成 RocketMQ从技术架构上分为四部分,分别为Producer(生产者)、Consumer(消费者)、BrokerServer(服务实例)、NameServer(Topic路由 ......
架构 RocketMQ

浅谈复杂业务系统的架构设计

复杂系统的架构设计不是一蹴而就的,合适的才是正确的。希望本文能够对您在进行复杂系统设计时有一定的参考意义。 ......
架构 业务 系统

Game Engine Architecture(游戏引擎架构)

推荐序1 最初拿到《GameEngineArchitecture》一书的英文版,是编辑侠少邮寄给我的打印版。他建议我接下翻译此书的合同。当时我正在杭州带领一个团队开发3D游戏引擎,我和我的同事都对这本书的内容颇有兴趣,两大本打印的英文书立刻在同事间传开。可惜那段时间个人精力顾及不来,把近千页的英文读 ......
Architecture 架构 引擎 Engine Game

软件开发、设计、架构的五大原则

唯一不变的就是变化本身。 我们经常讲的系统、子系统、模块、组件、类、函数就是从逻辑上将软件一步步分解为更细微的部分,即逻辑单元, 分而治之, 复杂问题拆解为若干简单问题, 逐个解决。 逻辑单元内部、外部的交互会产生依赖,从而产生了内聚、耦合概念。内聚主要描述逻辑单元内部,耦合主要描述逻辑单元之间的关 ......
架构 软件开发 原则 软件

软件开发、设计、架构的五大原则

唯一不变的就是变化本身。 我们经常讲的系统、子系统、模块、组件、类、函数就是从逻辑上将软件一步步分解为更细微的部分,即逻辑单元, 分而治之, 复杂问题拆解为若干简单问题, 逐个解决。 逻辑单元内部、外部的交互会产生依赖,从而产生了内聚、耦合概念。内聚主要描述逻辑单元内部,耦合主要描述逻辑单元之间的关 ......
架构 软件开发 原则 软件

整体二分学习笔记

整体二分 引入 对于一堆询问,如果每个单独的询问都可以二分解决的话,时间复杂度为 $O(NM\log N)$,但实际上每次二分都会有一些残留信息被我们扔掉,如果我们将所有询问一起二分,就可以最大时间的减小复杂度。 讲解 经典例题:区间第k大 给定一个序列 a 和一个整数 S,有 2 种操作: 1. ......
整体 笔记

轻松存储千亿级数据,知乎基于Doris的DMP系统架构实践

1)提升查询效率 自动探测 SQL 复杂查询条件预先合并成一个派生特征的 bitmap,预测和圈人时对复杂条件 SQL 重写为派生特征。 2)提升导入速度 Spark 直接写 Doris Tablet 文件,并挂载到 FE。 针对大导入场景与 Doris 团队共建,提升写入效... ......
架构 数据 系统 Doris DMP

火山引擎 DataLeap 下 Notebook 系列文章三:架构升级详解

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 当使用 Notebook 的项目日渐增加时,火山引擎 DataLeap 研发团队发现运行中的 PaaS 服务实在太多了,之前的架构有如下缺点: 部署麻烦。全量升级 JupyterLab 较为痛苦。尽管有升级脚本,但 ......
火山 架构 DataLeap Notebook 引擎