单体 集群docker-compose compose
使用docker-compose同时启动MySQL和Redis
#### 环境查看  #### 安装docker和docker-compose ``` apt -y i ......
02-Hadoop集群搭建
# 1. 集群配置 ## 1.1 集群部署规划 - 资源上有抢夺冲突的，尽量不要部署在一起； - 工作上需要互相配合的，尽量部署在一起。 | \ | Hadoop102 | Hadoop103 | Hadoop104 | | :--: | : : | : : | : : | | HDFS | Nam ......
lettuce+redisTemplate实现redis单击和集群的整合
## lettuce+redisTemplate实现redis单击和集群的整合 Springboot 整合redis是非常方便的，大致包含如下四部分 - pom start相关jar的引入 - properties/yaml 基础配置信息 - config bean的init - bean的注入及使 ......
银行麒麟系统离线部署clickhouse三节点集群
在国产化环境下部署clickhouse集群，个人建议先查看cpu的内核信息，可能有的人会说， 去银河麒麟的官网查看适配的版本信息，实践证明，官网的未必就是真的正确 好比银河麒麟的官网是这样介绍的 我在安装的过程中，就会报不支持的二进制文件的错误，所以这里不建议安装官网推荐的版本，毕竟是在国产化的环境 ......
Eureka在集群中随机ip的配置注意点
```yml eureka: client: enabled: true fetch-registry: true registry-fetch-interval-seconds: 5 service-url: defaultZone: http://59.195.19.240:31101/eure ......
分布式与集群的概念以及Linux操作系统的概述
# 分布式--多台机器，且每台机器上部署不同组件 # 集群--多台机器，且每台机器上部署相同组件 而对于**大数据的存储**而言，单机存储有瓶颈，多台机器进行分布式存储； 对于大数据的计算，单机计算能力有限，多台机器进行分布式计算； # Linux操作系统 确实是没想到想要使用Hadoop还需要重新 ......
jmeter分布式集群压测--jmeter控制机怎么配置压测机的ip
当系统的负载级别比较高，一台压力机不足于提供足够的压力时，可以采用jmeter分布式集群压测，说人话就是，采用多个压力机来合作产生足够的压力； 但是多个压力机，也得需要一个leader，这个就是控制机； 一、配置 那控制机上的jmeter如何配置呢？ 在jmeter的安装目录的bin目录下，打开jm ......
composer install时，出现Your requirements could not be resolved to an installable set of packages.
在执行composer install时遇到错误Your requirements could not be resolved to an installable set of packages.。原因是不匹配composer.json文件中要求的版本,错误代码如下。 查看的资料说是php版本不符, ......
通过 docker-compose 快速部署 Apache Ambari 保姆级教程
[TOC] ## 一、概述 `Apache Ambari` **是 Hortonworks 贡献给Apache开源社区的顶级项目，它是一个基于web的工具，用于安装、配置、管理和监视 Hadoop 集群。** Ambari 目前已支持大多数 Hadoop 组件，包括 HDFS、MapReduce、H ......
CentOS7.9 k8s集群环境搭建
# 环境搭建 本次环境搭建需要安装三台Centos服务器（一主二从），k8s采用1.25.4版本 # 主机安装 安装虚拟机过程中注意下面选项的设置： - 操作系统环境：CPU（2C） 内存（4G） 硬盘（50G） - 语言选择：English - 软件选择：基础设施服务器 - 分区选择：自动分区 - ......
集群版fastFDS安装配置
>在单机版的基础上搭建集群版 ###一、主机规划 | 主机名 | IP地址 | 操作系统 | 配置 | | | | | | | kht111 | 192.168.2.111 | Centos7.8 基础设施服务器 | 2颗CPU 2G内存 50G硬盘 | | kht112 | 192.168.2.1 ......
redis单机、主从、哨兵、集群以及redisson分布式锁
# 1.搭建集群 Linux系统的Redis各版本下载路径：https://download.redis.io/releases/，建议下载5.0以上的版本，下载后进行解压安装 （1）单机版 安装环境 ``` yum install gcc-c++ -y ``` 关闭防火墙 ``` systemct ......
Centos7 yum部署单机kubernetes集群
# kubernetes有多种部署方式，目前主流的方式有kubeadm、minikube、二进制包 - minikube：一个用于快速搭建单节点kubernetes的工具 - kubeadm：一个用于快速搭建kubernetes集群的工具 - 二进制包 ：从官网下载每个组件的二进制包，依次去安装，此 ......
单体服务，微服务服务的演变 & 各自优缺点
单体服务，微服务服务的演变&各自优缺点 一.单体服务 web-->service-->infrastructure-->mysql web-->service-->redis web-->service-->rabbitMQ 优点： 随着服务的演变 1.1> 单体服务 ● 优点： 1> 架构简单，清 ......
cenos 搭建k8s集群
1、准备环境 #开放防火墙端口或关闭防火墙 systemctl stop firewalld #关闭selinux setenforce 0 或者 永久修改 sed -i 's/enforcing/disabled/' /etc/selinux/config #关闭swa swapoff -a #三 ......
Kubernetes 1.27.2集群安装
# 基础环境 系统Ubuntu 22.04.2 | 主机名称 | IP | | | | | k8s-master | 192.168.198.141 | | k8s-node01 | 192.168.198.142 | | k8s-node02 | 192.168.198.143 | 1. 设置k8 ......
修改ASM实例参数，导致GI集群无法启动
0、有一套预生产环境，准备在上线之前先进行数据库参数修改。结果在修改ASM内存参数时，忘记reset memory_max_target参数，导致GI集群无法启动。将整个故障记录下来。 1、修改ASM实例参数 alter system set processes=1000 scope=spfile ......
rocketmq集群配置简介
RocketMQ天生对集群的支持非常好，它有以下一些模式： （1）单Master 优点：除了配置简单没什么优点 缺点：不可靠，该机器重启或者宕机，将要导致整个服务不可用 （2）多Master 优点：配置简单，性能最高 缺点：可能会有少量消息丢失（配置相关），单台机器重启或宕机期间，该机器下未被消费的 ......
docker compose启动目录
目的 对于使用docker compose启动的容器， 我们可以使用命令诊断其启动的目录。 方法 song@song-VirtualBox:~$ docker psCONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES6d4e4431d09d go ......
生产K8S 集群优化
1、内核参数调化fs.file-max=1000000# max-file 表示系统级别的能够打开的文件句柄的数量， 一般如果遇到文件句柄达到上限时，会碰到# "Too many open files"或者Socket/File: Can’t open so many files等错误。# 配置ar ......
集群变更备忘录
HDP yum 变更 之前搭的镜像虚拟机不想启动了,但是yum命令会报错,把之前配置的文件删了 ``` mkdir /etc/yum.repos.d.bak cd /etc/yum.repos.d mv ambari-hdp-51.repo ambari.repo HDF.repo HDP.repo ......
ceph集群部署（自用）
<准备工作> 一、 配置主机名 A、配置主机节点Ceph1节点： hostnamectl --static set-hostname ceph1其余节点以此类推。 B、修改域名解析文件： vim /etc/hosts在各个集群和客户端节点的“/etc/hosts”中添加如下内容： 192.168.5 ......
k8s集群根据进程PID获取Pod名称
# 简单说明 在实际的应用场景中，我们如果看到某个进程资源或服务异常，需要根据这个进程排查到底是哪个服务的Pod，这里我们介绍一种根据PID快速寻找Pod名称的方法。 # 实际操作 ## 查看进程PID 这里我们以GPU任务为例说明，可以看到占用显卡的任务PID为8241 ``` [root@cen ......
docker-compose构建kratos微服务项目运行失败，提示：runtime/cgo: pthread_create failed: Operation not permitted
这个问题网上解决方案较少， 我们这边问题定位是docker-compose.yaml配置问题 在配置文件中新增配置如下： privileged: true 设置容器的权限为root 最后解决 ......
Redis集群公网访问
背景 因业务需求，应用程序需要跨机房从公网地址访问Redis集群，但是无法正常访问。因为程序通过公网IP加端口访问到Redis集群，然后Redis返回集群信息（就是 cluster nodes命令的返回），程序再根据返回的集群信息去读写Redis集群。而当前集群监听在主机内网地址上，并且是通过内网地 ......
浅谈 thinkphp composer 扩展包加载原理
# 浅谈 thinkphp composer 扩展包加载原理 ## 本文将介绍 ThinkPHP 中 Composer 扩展包的加载原理，帮助读者更好地理解和应用该功能。 ## 前言 如题，今天感觉好久没有更新博客了。最近迷上了物联网开发。一直在研究stm32、51这些东西。想起来前几天群里面有人问 ......
一篇就让小白入门K8S，使用Minikube来搭建本地的单节点K8S集群
# 开篇 Kubernetes（通常简称为K8s）是一个开源的容器编排平台，它为应用程序的部署、扩展和管理提供了强大的工具和功能。在本文中，我们将通过一个实战案例，引导您进入Kubernetes的世界，了解其基本概念和架构，并帮助您安装和配置一个简单的Kubernetes集群。 # Kubernet ......
之江实验室： 如何基于 JuiceFS 为超异构算力集群构建存储层 ？
> 今天，高性能计算结合人工智能技术正在推动科研创新。例如通过破解水稻基因密码推动作物育种从“试验选优”向“计算选优”发展，在医药领域快速分析分子与蛋白之间的相互作用，发现潜在的能够有效干预疾病发生的药物分子。 之江实验室就是上述科研创新的推动者，实验室由浙江省政府主导、浙江大学等院校支持、企业参与 ......
docker-compose部署django+nginx+minio
总体文件结构 docker-compose.yml文件 version: "3" # volumes: # 自定义数据卷 networks: # 自定义网络(默认桥接) web_network: driver: bridge services: web: build: ./serve ports: ......
安装elasticsearch集群开启认证
``` ## 节点： 172.30.1.101 172.30.1.131 172.30.1.102 ## 下载rpm wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.12.0-x86_64.rpm # ......