定理 分布式linux cap

《Java架构师的第一性原理》30分布式计算之分布式算法

极客时间 韩健 121.分布式协议与算法实战 00 开篇词 | 想成为分布式高手?那就先把协议和算法烂熟于心吧 为什么要单独讲分布式协议和算法呢? 在我看来,它其实就是决定分布式系统如何运行的核心规则和关键步骤。 如果一个人想真正搞懂分布式技术,开发出一个分布式系统,最先需要掌握的就是这部分知识。 ......
分布式 第一性 算法 架构 原理

《Java架构师的第一性原理》32分布式计算之分布式锁(Redis、Zookeeper)

1 这才是真正的分布式锁 技术领域,我觉得了解来龙去脉,了解本质原理,比用什么工具实现更重要: (1)进程多线程如何互斥? (2)一个手机上两个APP访问一个文件如何互斥? (3)分布式环境下多个服务访问一个资源如何互斥? 归根结底,是利用一个互斥才能访问的公共资源来实现分布式锁,具体这个公共资源是 ......
分布式 第一性 架构 Zookeeper 原理

《Java架构师的第一性原理》32分布式计算之分布式缓存第3篇LevelDB

互联网业务,绝大部分场景,会使用缓存服务。 但有时候,确实会使用到进程内存缓存/数据库,这个时候,LevelDB就能派上用场了。啥是LevelDB?LevelDB是Google开发的,一个速度非常块的KV存储库(storage library),它支持字符串的key与字符串的value,并且这种映射 ......
分布式 第一性 缓存 架构 原理

《Java架构师的第一性原理》32分布式计算之分布式缓存第1篇如何使用Redis搭建玩家排行榜

今天我们用 Redis 搭建一个玩家的排行榜,假设一个服务器存储了 10 万名玩家的数据,我们想给这个区(这台服务器)上的玩家做个全区的排名,该如何用 Redis 实现呢? 不妨一起来思考下面几个问题: MySQL 是如何实现玩家排行榜的?有哪些难题需要解决? 如何用 Redis 模拟 10 万名玩 ......
分布式 第一性 缓存 架构 原理

《Java架构师的第一性原理》31分布式计算之微服务RPC(Dubbo)

1 互联网架构,究竟为啥要做服务化 互联网架构,究竟为啥要做服务化? 2 微服务架构,多“微”才合适? 微服务架构,多“微”才合适? 3 离不开的微服务架构,脱不开的RPC细节 离不开的微服务架构,脱不开的RPC细节 3.1 服务化解决的问题 1)服务化需要解决的问题: 一套序列化、反序列化、网络框 ......
第一性 分布式 架构 原理 Dubbo

linux 安装 redis

一、通用方式 要在Linux上安装Redis,可以按照以下步骤进行操作: 1. 打开终端,使用以下命令下载Redis的压缩包: wget http://download.redis.io/releases/redis-x.x.x.tar.gz 注意将 "x.x.x" 替换为你想要下载的Redis版本 ......
linux redis

linux系统下ps -aux和ps -ef | BSD & SystemV

* [linux系统下ps -aux和ps -ef命令参数的作用及区别详解-腾讯云开发者社区-腾讯云](https://cloud.tencent.com/developer/article/1357618)* [linux ps命令 格式 进程状态 各字段含义 简介\_ps各列含义-CSDN博客] ......
SystemV 系统 linux aux BSD

一文聊透 Linux 缺页异常的处理 —— 图解 Page Faults

本文基于内核 5.4 版本源码讨论 在前面两篇介绍 mmap 的文章中,笔者分别从原理角度以及源码实现角度带着大家深入到内核世界深度揭秘了 mmap 内存映射的本质。从整个 mmap 映射的过程可以看出,内核只是在进程的虚拟地址空间中寻找出一段空闲的虚拟内存区域 vma 然后分配给本次映射而已。 v ......
Faults Linux Page

一套分布式IM即时通讯系统的技术选型和架构设计

为了更好的理解分布式IM即时通讯系统的设计,我站在架构师的角度,在充分了解系统需求、业务流程和技术流程后,从全局视角为系统设定方案目标,对技术方案进行选型,对系统进行总体架构设计和分层架构设计,并梳理清楚发送消息的交互链路、单聊和群聊的交互链路。希望对你有帮助。 ......
通讯系统 分布式 架构 通讯 系统

Linux环境离线安装Docker&Docker镜像部署

引子 相信很多同学在项目上线的时候都会遇到没有网络的情况。一般而言,我们都会想到使用Docker 镜像部署,让我们看看搜索引擎给出来Docker的优势吧(如下图)。那么,问题来了,本身部署环境都没有网络,怎么离线安装Docker呢?怎么使用Docker镜像部署项目?OK,让我们开始吧。 一、Cent ......
Docker 镜像 环境 Linux amp

windows和linux的双系统时间同步问题

两个系统的时间会同步网上的时间然后更新到bios主板,所以刚安装的双系统电脑进入ubantu会导致时间比windows的时间快8个小时,这是由两个系统的时间计算方法不同引起的。 解决方法,(在uabntu内,此时时间快8小时) 1、sudo apt-get update 更新一下否则可能找不到下面的 ......
windows 时间 问题 系统 linux

java基础之“获取系统类型,区分Windows和Linux系统”

一、获取系统类型,区分Windows和Linux系统 // 判断是否是windows系统 System.getProperties().getProperty("os.name").contains("Windows") 二、案例 @Test public void testWindows() { ......
系统 Windows 类型 基础 Linux

vmware虚拟机 linux 本地yum源,网卡配置ens33,防火墙selinux

1、挂载镜像文件,CentOS-7-x86_64-DVD-1804.iso,并且要处于连接状态 #光盘挂载至/mntmount /dev/sr0 /mnt #备份yum源文件cd /etc/yum.repos.d/mkdir -p ./bakmv CentOS* ./bak #编缉本地源vim lo ......
网卡 防火墙 selinux vmware linux

Linux-04ssh

ssh登录 作用 在开发时,通常会用Terminal通过ssh登录到每个服务器里,打开服务器终端,以进行开发,通常来说,一个服务器会给出如下的几个信息: host IP password 登录服务器 基本格式:ssh user@hostname user:用户名 hostname:IP地址/域名 如 ......
Linux ssh 04

Linux服务器快速安装Redis-6.0

最近开始体验FastGPT开源知识库问答系统,用他们试着开发调试一些小助手。这中间需要使用到Redis,就在自己服务器上进行了安装,特此记录下。 环境说明:阿里云ECS,2核8G,X86架构,CentOS 7.9操作系统。 选择版本 1.打开Redis官网下载页面,可以选择需要的版本下载。我这里选择 ......
服务器 Linux Redis 6.0

CAP 8.0 版本发布通告 - CAP 7岁生日快乐!

前言 今天,我们很高兴宣布 CAP 发布 8.0 版本正式版,从 2016 年 12 月 14 日CAP立项到 2023 年 12 月14 日发布 8.0 版本刚好满 7 年,祝 CAP 7 岁生日快乐,巧的是这一天也是我生日,真是意想不到啊! 那就做一个 Overview 吧,在这7年间,我们一共 ......
CAP 通告 版本 生日 8.0

Linux开发环境搭建

一、初始化环境脚本 1、Docker安装 # 更新yum yum -y update # 安装Docker yum install -y docker # 阿里云加速器配置(网址内有操作说明) # https://cr.console.aliyun.com/cn-hangzhou/instances ......
环境 Linux

从分布式计算的角度看pytorch和TensorFlow哪个更优?

背景: pytorch框架是一个从学术圈出来的框架,因此pytorch并不原生支持分布式计算,而且在大模型火爆的今年以外好像在深度学习领域使用分布式计算的场景确实不多,所以pytorch并不原生支持分布式计算的事情好像也并无大碍,而且pytorch可以通过安装第三方库的方式实现同步形式的分布式计算。 ......
分布式 TensorFlow 角度 pytorch

分布式缓存

单点redis的问题 数据丢失问题:Redis是内存存储,服务重启可能会丢失数据。解决:数据持久化 并发能力问题:单节点并发能力不足。解决:主从集群,读写分离。 故障恢复:需要自动的故障恢复手段。解决:Redis哨兵,实现健康检测和自动恢复。 存储能力问题:单节点Redis难以满足海量数据存储。解决 ......
分布式 缓存

Linux课堂知识总结8

一.文件查找工具locate和find 1.locate locate依靠查询系统上预建的文件索引数据库来查询某个文件,按名字来查找,速度很快 2.find 实时查找工具,通过遍历指定路径完成文件查找 which Linux which命令用于查找文件。 which指令会在环境变量$PATH设置的目 ......
课堂 知识 Linux

Linux课堂知识总结

这是学习Linux的第八节课,老师跟我们讲述了Linux的RPM包管理操作。 一、RPM包管理的用途; 1、可以安装、删除、升级和管理软件;当然也支持在线安装和升级软件;2、通过RPM包管理能知道软件包包含哪些文件,也能知道系统中的某个文件属于哪个软件包;3、可以在查询系统中的软件包是否安装以及其版 ......
课堂 知识 Linux

linux安装jdk和mysql

一、jdk安装 1、yum -y list java* 查看所有jdk版本 2、yum install -y java-1.8.0-openjdk.i686 安装指定jdk,yum会使用标准方式进行下载并安装 二、mysql安装 1、wget http://dev.mysql.com/get/mys ......
linux mysql jdk

linux-04

压缩和解压类 gzip 文件 gunzip 文件.gz zip压缩文件 -r 递归压缩,即压缩目录 unzip解压 -d <目录> 指定解压后文件的存放目录 zip -r myhome.zip /home unzip -d /opt/tmp /home/myhome.zip tar 压缩多个文件 t ......
linux 04

VMware 下的 Linux 系统的空间清理和压缩

问题描述 若虚拟磁盘以逐渐填充扩大的方式运行时,虚拟磁盘文件的体积就会逐渐变大,在 Windows 系虚拟机上,可以在 VMware 上右键选择清理磁盘,然后再回收物理磁盘空间,但在 Linux 系虚拟机上就得在虚拟机中执行清理。 解决方法 首先确认你虚拟机里面装了 vmtools (open-vm ......
VMware 系统 Linux 空间

Docker Alpine Linux 安装 Python3

参考文档:Docker Alpine Linux 安装 Pytho1、Dockerfile Dockerfile 文件一般包含基础镜像信息、维护者信息、镜像操作指令和容器启动时执行指令,’#’ 为 Dockerfile 中的注释。 参考文件::Docker 构建自定义镜像和Dockerfile文件 ......
Python3 Docker Alpine Python Linux

redis分布锁

1.什么是redis分布式锁 Redis分布式锁是一种利用Redis实现的锁机制,用于在分布式系统中保护共享资源的访问。它利用Redis的原子性操作和过期时间设置来实现互斥访问。 在分布式环境中,多个进程或线程可能同时访问共享资源,如果没有合适的机制来保护共享资源,就会导致数据不一致或竞争条件的发生 ......
redis

ceph分布式存储的学习:

支持的存储类型:对象存储、块存储、文件系统存储 ceph版本 ......
分布式 ceph

Linux 进程探查

想监测Linux进程,需要熟悉 ps 命令的用法。 Linux系统中使用的GNU ps 命令支持3种不同类型的命令行参数:  Unix风格的参数,前面加单破折线;  BSD风格的参数,前面不加破折线;  GNU风格的长参数,前面加双破折线。 1. Unix风格的参数 Unix风格的参数是从贝 ......
进程 Linux

Linux的链接文件

如需要在Linux系统上维护同一文件的两份或多份副本,除了保存多份单独的物理文件副本之外,还可以采用保存一份物理文件副本和多个虚拟副本的方法。这种虚拟的副本就称为链接。链接是目录中指向文件真实位置的占位符。在Linux中有两种不同类型的文件链接:  符号链接  硬链接 符号链接就是一个实实在在的 ......
链接 文件 Linux

P5091 【模版】扩展欧拉定理

求 \(a^b \bmod m, b\le 10^{200000}\)。 首先引入三种可以通过取模缩小幂指数的方法。 费马小定理:当 \(a,p\in \mathbb{Z},\space p\) 为质数且 \(p\nmid a\) 时,\(a^{p-1}\equiv 1(\bmod\space p) ......
定理 模版 P5091 5091
共13000篇  :18/434页 首页上一页18下一页尾页