定理 分布式linux cap

Linux系统目录结构

## Linux系统目录结构 几乎所有的计算机操作系统都是使用目录结构组织文件。具体来说就是在一个目录中存放子目录和文件,而在子目录中又会进一步存放子目录和文件,以此类推形成一个树状的文件结构,由于其结构很像一棵树的分支,所以该结构又被称为目录树。 ### Linux与windows目录结构对比 w ......
结构 目录 系统 Linux

Linux系统中DNS

1.什么是DNS DNS是域名系统(DomainNameSystem)的缩写。DNS是域名系统的缩写,该系统用于命名组织到域层次结构中的计算机和网络服务。域名是由圆点分开一串单词或缩写组成的,每一个域名都对应一个唯一的IP地址,在Internet上域名与IP地址之间是一对应的,DNS就是进行域名解析 ......
系统 Linux DNS

Linux6

查看权限控制信息 1. 认知权限信息 通过ls -l可以以列表形式查看内容,并显示权限细节 序号1,表示文件、文件夹的权限控制信息 序号2,表示文件、文件夹所属用户 序号3,表示文件、文件及所属用户组 权限细节共分为10个槽位 举例:drwxr-xr-x ,表示: 这是一个文件夹,首字母d表示 所属 ......
Linux6 Linux

Redis 之分布式锁的实现

## 引言 分布式锁大家应该不陌生,在很多大厂面试的时候,面试官们都很喜欢问这个问题。 我们在系统中修改已有数据时,需要先读取,然后进行修改保存,此时很容易遇到并发问题。由于修改和保存不是原子操作,在并发场景下,部分对数据的操作可能会丢失。在单服务器系统我们常用本地锁来避免并发带来的问题,然而,当服 ......
分布式 Redis

linux内核移植步骤「建议收藏」

【说明:本文转载自如下地址】https://cloud.tencent.com/developer/article/2107681?areaSource=102001.3&traceId=I-X1VzDQ2XOPORi2lXiHa 大家好,又见面了,我是你们的朋友全栈君。 2016.6.8 经过一个 ......
内核 步骤 建议 linux

在分布式nvidia cuda-pytorch中同时使用MPI和NCCL会造成死锁——分布式pytorch的backend不能同时使用MPI和NCCL

参考原文: https://docs.nvidia.com/deeplearning/nccl/user-guide/docs/mpi.html#inter-gpu-communication-with-cuda-aware-mpi 说实话,我不太认为有人在使用分布式pytorch的时候会同时开两个 ......
分布式 同时 pytorch NCCL cuda-pytorch

读发布!设计与部署稳定的分布式系统(第2版)笔记28_控制层上

![](https://img2023.cnblogs.com/blog/3076680/202308/3076680-20230804111644939-2134490730.png) # 1. 控制层囊括所有在后台运行的成功处理生产负载的软件和服务 ## 1.1. 处理用户生产数据的那些软件,就 ......
分布式 笔记 系统 28

Linux文本三剑客(二)——awk

1、awk 1.1 认识awk awk是一种编程语言,用于在linux/unix下对文本和数据进行处理。数据可以来自标准输入(stdin)、一个或多个文件,或其它命令的输出。它支持用户自定义函数和动态正则表达式等先进功能,是linux/unix下的一个强大编程工具。它在命令行中使用,但更多是作为脚本 ......
三剑客 文本 Linux awk

Linux文本三剑客(一)——grep和sed

前言:awk、grep、sed是linux操作文本的三大利器,合称文本三剑客,也是必须掌握的linux命令之一。三者的功能都是处理文本,但侧重点各不相同,其中属awk功能最强大,但也最复杂。grep更适合单纯的查找或匹配文本,sed更适合编辑匹配到的文本,awk更适合格式化文本,对文本进行较复杂格式 ......
三剑客 文本 Linux grep sed

linux学习:ssh 服务

# SSH 介绍 简单的来说,SSH 是 Secure SHell protocol 的简写 (安全的壳程序协议),它可以透过数据封包加密技术,将等待传输的封包加密后再传输到网络上, 因此,数据讯息当然就比较安全啰!这个 SSH 可以用来取代较不安全的 finger, R Shell (rcp, r ......
linux ssh

【技术积累】Linux中的命令行【理论篇】【四】

博客推行版本更新,成果积累制度,已经写过的博客还会再次更新,不断地琢磨,高质量高数量都是要追求的,工匠精神是学习必不可少的精神。因此,大家有何建议欢迎在评论区踊跃发言,你们的支持是我最大的动力,你们敢投,我就敢肝 ......
命令 理论 Linux 技术

Hadoop完全分布式集群安装

# Hadoop完全分布式集群安装 >使用版本: hadoop-3.2.0 ## 安装VMware 看一下这张图,图里面表示是三个节点,左边这一个是主节点,右边的两个是从节点,hadoop集群是支持主从架构的。 不同节点上面启动的进程默认是不一样的。 ![](https://img2023.cnbl ......
分布式 集群 Hadoop

Linux下apt与dpkg的详解

`apt`是一个包管理工具,用于管理Debian和Ubuntu等基于Debian的Linux发行版中的软件包。它是`"Advanced Packaging Tool"`的缩写,允许用户在系统的软件仓库中搜索、安装、更新和删除软件包。apt能够自动解决依赖关系,确保安装的软件包所需要的其他软件包也会被 ......
Linux dpkg apt

Linux信号

https://www.51cto.com/article/675743.html 异步和同步的区别: 同步可以理解成串行执行,每个任务执行有先后顺序; 异步则是并行执行,你做你的事,我干我的事情,相互独立 信号是异步的,一个进程不必通过任何操作来等待信号的到达。事实上,进程也不知道信号到底什么时候 ......
信号 Linux

分布式概念

分布式业务系统,就是把原来用 Java 开发的一个大块系统,给拆分成多个子系统,多个子系统之间互相调用,形成一个大系统的整体。 ![](https://img2023.cnblogs.com/blog/2211217/202308/2211217-20230805180037629-11082654 ......
分布式 概念

Linux 常用的磁盘命令

【Linux】与磁盘相关的常用命令(自用) 感谢地心引力 已于 2023-07-01 15:33:50 修改 4415 收藏分类专栏: Ubuntu Linux 文章标签: linux 运维 服务器版权 Ubuntu Linux专栏收录该内容38 篇文章0 订阅订阅专栏本文将详细介绍以下几个常用的命 ......
磁盘 命令 常用 Linux

Linux 守护进程 、inetd超级服务器

守护进程 通常源于系统初始化脚本启动。它们于控制台脱离关联。 启动方式: 系统启动阶段由系统初始化脚本启动,通常位于 /etc /etc/rc 目录,启动一开始有root权限 由inetd启动 cron 按规则定期启动 at 命令指定于某个时刻执行,通常由cron启动它们 shell 通过 nohu ......
进程 服务器 Linux inetd

linux select函数详解

转载:linux select函数详解 - AlanTu - 博客园 (cnblogs.com) 在Linux中,我们可以使用select函数实现I/O端口的复用,传递给 select函数的参数会告诉内核: •我们所关心的文件描述符 •对每个描述符,我们所关心的状态。(我们是要想从一个文件描述符中读 ......
函数 select linux

Linux系统下将java程序开机自启

# Linux系统下将java程序开机自启 在Linux环境下,可以通过将Java程序配置为系统服务(systemd服务)来实现开机自启动。使用systemd可以很方便地管理和控制后台服务,包括Java程序。以下是一个简单的步骤来配置Java程序为systemd服务: ## 1. 编写启动脚本 创建 ......
程序 系统 Linux java

linux---设置允许流量转发

# linux 设置允许流量转发 临时生效: ```r # 方法1(必须使用root账户) echo 1 > /proc/sys/net/ipv4/ip_forward # 方法1变种(有sudo权限即可) echo 1 | sudo tee /proc/sys/net/ipv4/ip_forwar ......
流量 linux

随笔(二十六)『SpringBoot + Vue 简单部署到Linux』

### 1、安装docker #### 1.1、卸载系统之前的 docker ``` sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ docker-late ......
SpringBoot 随笔 Linux Vue

Linux git mirror站点

1. 由于kernel的[官网站点](https://git.kernel.org/)和[Github镜像](https://github.com/torvalds/linux)下载都很慢,于是想到找一下国内镜像站点。 2. kernel.org有个[Git mirror available in ......
站点 mirror Linux git

Linux命令

nc nc -help:查看nc命令支持的参数 nc -lk ip(机器的ip地址或者映射) port(端口号):在此ip机器上启动监听服务,服务端 nv ip(要通信的机器) port(要通信的机器开启的端口号):与此ip机器建立通信连接,客户端 ......
命令 Linux

IPv6 - linux网络编程

IPv6 网络编程 假设双栈服务器有一个IPv4地址、和一个IPv6地址: IPv6 服务器启动后创建一个IPv6的监听套接字,假设绑定通配地址 客户端调用 connect,发送要给 IPv4 SYN 给服务端 服务端接收 IPv4 SYN 设置一个标识指示本连接使用IPv4映射的IPv6地址,然后 ......
网络编程 linux 网络 IPv6 IPv

Linux5

vi编辑器 1. vi\vim编辑器 vi\vim是Linux中最经典的文本编辑器,vim是vi的加强版,兼容vi的所有指令 vi\vim编辑器的三种工作模式: 命令模式:命令模式下,所敲的按键编辑器都理解为命令,以命令驱动执行不同的功能。此模型下,不能自由进行文本编辑。 输入模式:也就是编辑模式、 ......
Linux5 Linux

欧拉函数&欧拉定理

# 欧拉函数 **互质**:对于 $\forall a, b \in \mathbb{N} $, 若 $a, b$ 的最大公因数为 $1$ , 则称 $a, b$ 互质。 **欧拉函数**:即 $ \varphi (N)$, 表示从 $1$ 到 $N$ 中与 $N$ 互质的数的个数。 在**算术基本 ......
定理 函数 amp

linux解压iso(挂载到一个目录下)

挂载命令 mount -t iso9660 -o loop CentOS-7-x86_64-Minimal-2009.iso /opt/os 卸载命令 umount /opt/os ......
目录 linux iso

Linux 网络编程常用辅助函数

最大地址结构 struct sockaddr_storage; // 足够大,能够支持任何套接字地址结构 从套接字获取信息 // 获取本地连接的地址 extern int getsockname (int __fd, __SOCKADDR_ARG __addr, socklen_t *__restr ......
网络编程 函数 常用 Linux 网络

Linux环境编程day04--信号产生与处理

#### 信号管理 ##### 基本概念 1、中断 当进程接收到消息后中止当前正在进行进程,转而去执行其它任务,等其它任务执行结束后再返回刚刚中止的位置,可以继续往下运行 这种执行模式称为中断 中断分为硬件中断、软件中断,硬件中断是由硬件设备引发的、软件中断是执行了中断指令引发 2、信号 信号是一种 ......
信号 环境 Linux day 04

Linux环境编程day03--文件管理

分别使用标准IO和系统IO写入一百万个整数到文件,测试谁的时间更短?为什么? 结论:在同等数据的写入下,使用标准IO要比直接使用系统IO更快 原因:标准IO有缓冲区机制,在执行fwrite写文件时,数据不是直接调用系统IO写入磁盘,而是先存放在内存的缓冲区中,直到缓冲区满后才会调用一次系统IO全部写 ......
环境 文件 Linux day 03