纪实 单机greatsql mgr
单机10万TCP连接测试记录
转自：https://www.cnblogs.com/fuhua/p/16904864.html 单机10万TCP连接测试记录 目录 前言 准备工作 安装DotNet6环境 服务端代码 客户端代码 编译 测试记录 失败尝试1(Linux可用端口范围限制) 解决Linux端口范围限制 查看端口范围 修 ......
图文结合丨Prometheus+Grafana+GreatSQL性能监控系统搭建指南(上)
一、环境介绍 本文环境，以及本文所采用数据库为GreatSQL 8.0.32-24 $ cat /etc/system-release Red Hat Enterprise Linux Server release 7.9 (Maipo) $ uname -a Linux gip 3.10.0-11 ......
Docker 安装 Redis 单机&集群总结
前言 Redis 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于 内存 、 分布式 、可选持久性的键值对( Key-Value )存储数据库 redis版本：redis:6.2.13 作者：易墨 安装单机版 安装源：DockerHub 默认配置文件：配置文件示例 6. ......
使用nomad管理集群-1 单机部署
背景 由于白嫖+购买了很多vps，管理起来有点困难，只能一个个ssh上去看，同时有的命令要反复敲好几遍，因此需要有一个集群管理的工具。 其次因为工作需要经常和k8s，docker等打交道，于是打算使用类似的工具来管理vps。 首先考虑的自然就是k8s，作为云原生的老大哥，相关的生态和文档自然是巨好， ......
Docker单机编排工具
目录Docker 单机编排工具Docker-Compose 介绍版本号对应安装指定版本的 Docker-composeDocker-compose 模板Docker-compose 部署 zabbix 实战Docker run 语法Docker-composeDockercompose 管理命令Do ......
Centos安装磐维单机版
一、系统环境优化 安装依赖 yum -y install libaio-devel flex bison ncurses-devel glibc-devel patch redhat-lsb-core readline-devel python3 expect bzip2 libnsl ncurse ......
GreatSQL一个关于主从复制的限制描述与规避
一、背景 分享一个在项目运维中遇到的一个主从复制限制的一个坑，项目的架构为主集群+灾备集群，每个集群为一主两从模式。主集群到灾备集群的同步为主从复制的方式，根据业务需求灾备集群需要忽略系统库跟某些配置表，所以才会触发此限制，而这个限制如果我们之前没有遇到过，那么排查起来也是相对不易的。 二、限制描述 ......
单机容器编排
单机容器编排 最后我们来讲解一下Docker-Compose，它能够对我们的容器进行编排。比如现在我们要在一台主机上部署很多种类型的服务，包括数据库、消息队列、SpringBoot应用程序若干，或是想要搭建一个MySQL集群，这时我们就需要创建多个容器来完成来，但是我们希望能够实现一键部署，这时该怎 ......
windows环境下单机运行pyspark
首先在windows系统中安装pyspark，具体过程可以参考以下两个地址 https://mp.weixin.qq.com/s/Bt6qrE3sGUSCm_BaA33C6A https://edu.hellobi.com/course/282/play/lesson/6501 安装好之后，在cmd ......
harbor 单机部署
安装 docker 19.03.15 # 添加docker阿里云的源 yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo 安装 docker-compose cu ......
FSICO-BACOS单机四节点到Webase平台搭建简洁步骤
bash build_chain.sh -l 127.0.0.1:4 -p 30300,20200,8545 其中-l指定ip列表， -p表示p2p,.. .. 端口号，生成的四个节点端口号为30300 ~ 30303 安装ubuntu依赖 sudo apt install -y openssl c ......
Kubernetes部署MySQL5.7单机---NFS存储
实验目的： 将MySQL5.7使用nfs持久化存储部署到Kubernetes集群中 复制 nfs存储地址： nfs.myit.icu 复制 nfs存储配置： 临时测试 100G 安装nfs yum install -y nfs-utils rpcbind 创建nfs存储目录 [root@nfs ~] ......
MGR新节点RECOVERING状态的分析与解决：caching_sha2_password验证插件的影响
起因 在GreatSQL社区上有一位用户提出了“手工构建MGR碰到的次节点一直处于recovering状态”，经过排查后，发现了是因为新密码验证插件caching_sha2_password导致的从节点一直无法连接主节点，帖子地址：(https://greatsql.cn/thread-420-2- ......
Apache DolphinScheduler 如何实现自动化打包+单机/集群部署？
Apache DolphinScheduler 是一款开源的分布式任务调度系统，旨在帮助用户实现复杂任务的自动化调度和管理。DolphinScheduler 支持多种任务类型，可以在单机或集群环境下运行。下面将介绍如何实现 DolphinScheduler 的自动化打包和单机/集群部署。 自动化打包 ......
kubernetes部署mongoDB 单机版 自定义配置文件、密码、日志路径等
来源：https://aijishu.com/a/1060000000097166 官方镜像地址： https://hub.docker.com/_/mong... docker版的mongo移除了默认的/etc/mongo.conf, 修改了db数据存储路径为 /data/db. 创建config ......
openGauss单机版安装
机器： hostnamectl set-hostname node1 编译安装python3 yum install -y libaio-devel gcc gcc-c++ zlib-devel expect bzip2 [root@node1 ~]# mkdir -p /opt/software/ ......
Linux rocketmq单机测试部署
一.环境说明对于 RocketMQ 4.3.0版本，官方要求环境如下，其中 Git 用于从 GitHub 获取源码，没有安装也没关系，可以直接下载推荐的流程是：Linux 系统上安装 Git 工具 、Maven、Java JDKGit 工具用于直接从 GitHub 获取 RocketMQ 项目源码下 ......
MySQL MGR集群部署运维常用脚本
Linux系统-部署-运维系列导航 安装、初始化操作汇总 #初始化、重置mysql rm -rf /data/mysql/ ; mkdir -p /data/mysql/data /data/mysql/log ; chown -R mysql:mysql /data/mysql/ ; chmod ......
keepalived实现MySQL MGR高可用（keepalived 2.2.7 + mysql 5.7.35）
Linux系统-部署-运维系列导航 一、架构介绍 MySQL MGR实现了MySQL服务的高可用、高扩展、高可靠，但在客户端只能同时连接一台服务实例，在master切换后，客户端无法感知并自动切换，所以需要搭配keepalived实现MySQL MGR集群在客户端的高可用。 二、架构搭建 架构设计 ......
MySQL MGR集群搭建（CentOS7 + MySQL 5.7.35）
Linux系统-部署-运维系列导航 一、MGR架构的介绍 1、简介 MGR（MySQL Group Replication）是MySQL5.7.17版本引进来的一个数据库高可用架构，解决了传统异步复制和半同步复制的缺陷（主从数据一致性的问题），MGR依靠分布式一致性协议PAXOS，实现了主从数据库的 ......
部署和使用单机版 FastDFS 分布式文件系统
我们工作中经常会有上传和下载文件的需求，早些年代我们一般会将上传的文件保存在网站所在的服务器上，但是现在一般网站都是负载均衡多服务器部署，因此必须要有独立的文件服务器才行。早些年代，如果有一台独立的文件服务器，一般会搭建 NFS 共享服务，给多个网站服务器之间使用。如果有多台文件服务器的话，各个服务 ......
新建rocketmq环境-单机版
1.下载版本 2.解压 unzip 3.配置环境变量 export ROCKETMQ_HOME=/opt/software/rocketmq-all-4.9.1-bin-release export PATH=$PATH:$ROCKETMQ_HOME/bin 4.nameserver服务的创建 修改 ......
prometheus远程永久存储方案VictoriaMetrics 部署单机版
1、单机版下载地址： https://github.com/VictoriaMetrics/VictoriaMetrics 注：集群版选择cluster版本 2、下载解压得到二进制文件 tar -xf victoria-metrics-linux-amd64-v1.93.1.tar.gz 3、配置服 ......
随笔（三十一）『ELK 单机部署』
### 1、环境准备 #### 1.1、修改最大文件打开数量 ``` vim /etc/security/limits.conf # 修改的内容 * soft nofile 65536 * hard nofile 65536 * soft nproc 2048 * hard nproc 4096 ` ......
Linux部署Consul单机和集群
Linux部署Consul单机和集群 一、Consul简介 Consul是由HashiCorp基于Go语言开发的支持多数据中心的分布式高可用服务发布和注册软件, 采用Raft算法保持服务的一致性, 且支持健康检查，Consul和Eureka的侵入式服务中心不同的是, Consul是以独立的软件形式运 ......
MySQL Shell 8.0.32 for GreatSQL编译安装
- 0.写在前面 - 1.准备工作 - 1.1 准备Docker环境 - 1.2 下载源码包 - 1.3 修改MySQL Shell源码包 - 1.4 编译相关软件包 - 2.准备编译MySQL Shell - 2.1 编译MySQL 8.0.32 - 2.2 编译MySQL Shell 8.0.3 ......
GPU单机多卡训练
多卡训练的主要思想是将训练数据分成多个批次或样本，在每个GPU上分别处理这些数据，然后将各个GPU计算得到的梯度进行聚合，最终更新模型参数。这样可以显著加快训练过程，特别是对于大规模的深度学习模型。 多卡训练需要考虑到数据划分、梯度聚合和模型参数同步等问题，以确保各个GPU上的计算结果能够正确地协同 ......
PyTorch多卡分布式训练DDP单机多卡
PyTorch多卡分布式训练：DistributedDataParallel (DDP) 简要分析 前言 因为课题组发的卡还没有下来，先向导师问了实验室的两张卡借用。之前都是单卡训练模型，正好在这个机会实践以下单机多卡训练模型的方法。关于 DDP 网上有很多资料，但都比较零碎（有些博客的代码甚至没办 ......
doris单机安装部署
[原文出处](https://zhuanlan.zhihu.com/p/635673029) # doris单机安装部署 ### 下载Doris >环境要求 Linux系统：Centos7.x或Ubantu16.04及以上版本 Java运行环境: JDK8 `java -version` ![](h ......