集群zookeeper docker hadoop
VMware搭建集群环境
集群地址分配 名称 IP 子网掩码 网关 DNS flink01 192.168.22.211 255.255.255.0 192.168.22.2 114.114.114.114 flink02 192.168.22.212 255.255.255.0 192.168.22.2 114.114.1 ......
Redis 哨兵集群搭建并使用 RedisTemplate 实现读写分离
上篇博客介绍的 Redis 主从集群搭建，有一个缺点就是 master 和 slave 的角色是固定的，不会发生变化。一旦 master 节点宕机，那么集群就只能提供读服务，无法提供写服务。本篇博客介绍 Redis 哨兵集群的搭建，可以监控 Redis 集群的 master 和 slave 节点，最 ......
docker 启动报错 library initialization failed - unable to allocate file descriptor table - out of memory
docker 启动报错 library initialization failed - unable to allocate file descriptor table - out of memory 1.报错日志 library initialization failed - unable to ......
Linux Zookeeper在Docker 安装与简单通信
一、在本地计算机上安装Docker 1.安装Docker （安装最新的Docker版本） yum install docker-ce docker-ce-cli containerd.io docker-bulidx-plugin docker-compose-plugin 2.查看Docker版本 ......
TDSQL集群扩容DB节点
具体步骤见百度云盘：https://pan.baidu.com/s/1zMrjhckI2I4O1G1RzC09uQ 提取码：h5mm。本文档适用于TDSQL(MYSQL版)和TDSQL(PG版)。内容如下： 一、以下步骤在新增机器上面执行：1、检查audit服务（Mysql版本特有）：systemc ......
使用Docker和Nginx部署单页面应用
使用Docker和Nginx部署单页面应用 一、简介 1.背景 Docker 是一个容器引擎，它使用 Linux 内核功能（如命名空间和控制组）在操作系统之上创建容器 Docker Compose是一个命令行工具，可以简化容器镜像的构建以及容器的运行，将命令行的选项翻译成配置文件 Nginx是一个高 ......
docker-compose gitlab
version: '3'services: gitlab: image: 'yrzr/gitlab-ce-arm64v8:latest' restart: unless-stopped hostname: 'test.gitlab.com' environment: TZ: 'Asia/Shangh ......
随笔-开发-创建一个python开发环境(docker)
docker-compose.yml version: "3" services: python-dev-env: image: python:3.6.15-slim-buster restart: always container_name: py3-dev-env network_mode: h ......
短视频app开发，集群容错策略的代码分析
短视频app开发，集群容错策略的代码分析 1 Failover Failover故障转移策略作为默认策略，当短视频app开发中的消费发生异常时通过负载均衡策略再选择一个生产者节点进行调用，直到达到重试次数。即使业务代码没有显示重试，也有可能多次执行消费逻辑从而造成重复数据： public class ......
Docker不装C盘
Docker默认安装在C盘，这未来随着docker使用必定会导致C盘空间吃紧。所以本文提前进行空间布局，将docker默认安装路径软链接到D盘。软链接D盘Docker默认安装路径为C:\Program Files\Docker。使用管理员权限打开命令终端mklink /j "C:\Program F ......
淘宝镜像出现问题. docker.安装运行。
由于centos8 在2022年停止服务，后继版本为8-steam。在使用阿里云的 centos8 的 yum 时报错。 解决方案 1、进入配置文件内，删除所有的.repo文件（也可以备份） 1 2 3 4 5 #进入配置文件夹 cd /etc/yum.repos.d/ #删除旧的配置文件 rm * ......
YARN集群中应用程序的执行流程
Hello，各位“极客”好，上一篇文章中介绍了YARN集群架构的基本内容，那么，在YARN集群中应用程序的执行流程是怎样的呢？这个问题很重要，就要好好说道说道了...... 客户端提交应用程序（可以是MapReduce程序、Spark程序等）到ResourceManager。 ResourceMan ......
freeswitch on debian docker
概述 freeswitch是一款简单好用的VOIP开源软交换平台。 因为centos系统期限的原因，尝试在debian的docker上使用fs。 环境 docker engine：Version 24.0.6 debian docker：bullseye 11.8 freeswitch：v1.10. ......
基于Docker安装Elasticsearch + Kibana
基于Docker安装Elasticsearch + Kibana 前提是先安装好Docker的环境 Docker创建网络 Docker创建一个网络专门连接Elasticsearch和Kibana docker network create es-net Docker安装Elasticsearch 拉 ......
k8s集群搭建-2
一、前面做过k8s的集群搭建主要是1.24版本一下的，1.24版本后"弃用docker"改用CRI了。所以这里就之前的集群安装做一下补充。 老版集群地址：https://www.cnblogs.com/ll409546297/p/16718681.html 二、k8s版本选择：docker-ce:2 ......
SAP-DB-服务器组-003-pacemaker集群-在AWS平台里-创建及配置-SAPHanaTopology资源及SAPHana及VIP
关于基础环境的安装，还是可以参考笔者另一篇文章，APP的部分 《SAP-APP-服务器组-001-pacemaker集群的基础环境的安装部署》 https://www.cnblogs.com/5201351/p/17899446.html 1、DB需要多安装 resource-agents-sap- ......
Zookeeper-快速入门、服务搭建、集群搭建教程
官网：https://zookeeper.apache.org/ zookeeper常用用途： 集群管理，zookeeper作为注册中心，管理服务提供方的ip地址端口号url信息，并在服务消费方请求需要时发送给服务消费方。 配置中心（不过一般用阿波罗apollo或者阿里的Nacos来做） 多个app ......
ceph集群搭建详细教程（ceph-deploy）
ceph-deploy比较适合生产环境，不是用cephadm搭建。相对麻烦一些，但是并不难，细节把握好就行，只是命令多一些而已。 实验环境 服务器主机 public网段IP（对外服务） cluster网段IP（集群通信） 角色 deploy 192.168.2.120 用于部署集群、管理集群 cep ......
搭建ceph集群
本文完全拷贝出处：https://www.cnblogs.com/qiuhom-1874/ 前文我们了解了Ceph的基础架构和相关组件的介绍，回顾请参考https://www.cnblogs.com/qiuhom-1874/p/16720234.html；今天我们来部署一个ceph集群； 部署工具介 ......
DataSophon更换zookeeper版本
DataSophon更换zookeeper版本 平台默认集成的zookeeper版本为：zookeeper-3.5.10.tar.gz 更换为：zookeeper-3.8.0.tar.gz 下载地址：https://archive.apache.org/dist/zookeeper/zookeepe ......
docker easyconnect
https://github.com/JacZhoulang/docker-easyconnect docker run --device /dev/net/tun --cap-add NET_ADMIN -ti -e PASSWORD=xxxx -v $HOME/.ecdata:/root -p ......
DOCKER 多段构建
DOCKER 多段构建 Docker 多段构建（Multi-Stage Build）是一种优化 Docker 镜像大小和构建过程的方法。它允许你在一个 Dockerfile 中定义多个构建阶段，每个阶段都可以有自己的基础镜像、依赖和构建步骤。这样，你可以在最终的镜像中只包含运行时所需的组件，而不包含 ......
在centos7云主机上docker方式安装halo2.11,数据库使用mysql5.7
1.提前安装好docker和docker-compose 2.在~目录下新建halo目录并进入 mkdir ~/halo && cd ~/halo 3.在halo目录新建 docker-compose.yml文件 vi docker-compose.yml 我这里使用的是外部的mysql,文件内容 ......
在centos7上安装docker
官方文档 https://docs.docker.com/engine/install/centos/ 1.查看centos系统版本,本篇文章是在 centos7 上安装docker,注意系统版本 cat /etc/redhat-release 回显 CentOS Linux release 7.9 ......
YARN集群架构
玩Hadoop的不知道YARN？这简直是天大的笑话！之前介绍Hadoop核心组件的时候（详见《Hadoop的“前世今生”》那篇博文）就曾提到过“YARN是实现了集群资源管理以及作业调度的框架”，那么本文就对YARN集群架构做进一步的介绍。 YARN集群总体上是经典的Master/Slave架构，主要 ......
Docker常用命令记录.......
Docker基本命令 查看本地镜像 docker images 搜索镜像 docker search tomcat 拉取镜像 docker pull tomcat:版本号 #默认是latest 删除镜像 docker rmi IMAGE ID 查看所有实例(正在运行 + 未运行) docker ps ......
centos系统安装docker和docker 使用
基于centos系统安装docker,可以让你的开发更加专注 下载阿里云的docker 镜像 wget -O /etc/yum.repos.d/docker-ce.repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.rep ......
kafka启动闪退（zookeeper timeout）的解决办法
1.情景展示 在关闭kafka后，再次运行经常会出现闪退的情况。 2.具体分析 经过截屏发现：原来是kafka连接zookeeper超时，导致kafka启动失败。 kafka.zookeeper.ZooKeeperClientTimeoutException: Timed out waiting f ......
【Docker】关于挂载修改&迁移问题
如果进行容器挂载迁移，新挂载的目录会导致之前容器内的数据丢失，接下来给大家整理思路 之前是没有进行数据挂载的，也就是默认路径 #先查看一下默认路径 docker inspect 【容器名】 #Mounts这里有详细的挂载信息，可以看到最开始的默认路径是home/lib/docker/volumes/ ......
Hive和Spark生产集群搭建
1.环境准备 1.1 版本选择 序号 bigdata-001 bigdata-002 bigdata-003 bigdata-004 bigdata-005 MySQL-8.0.31 mysql Datax Datax Datax Datax Datax Datax Spark-3.3.1 Spar ......