集群zookeeper docker hadoop

部署基于etcd的coredns集群

前言 现需要为公司搭建私有DNS,私有服务器都使用私有DNS的地址,便于访问内部自定义的域名。采用CoreDNS + ETCD方案部署,coredns和etcd都以三实例运行,etcd为集群模式,使用nginx做coredns的udp负载均衡,避免单机性能问题。另使用prometheus监控core ......
集群 coredns etcd

java——Zookeeper学习——zk概览转载

一、ZooKeeper简介 ZooKeeper是一个分布式协调服务,提供了诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知和分布式锁等分布式基础服务。 1.1、数据结构 ZooKeeper采用znode的树状层级结构来存储信息,znode节点可能包含数据也可能没有数据,znode存储数据格式 ......
概览 Zookeeper java

docker挂载volume的用户权限问题,理解docker容器的uid

docker挂载volume的用户权限问题,理解docker容器的uid 在刚开始使用docker volume挂载数据卷的时候,经常出现没有权限的问题。这里通过遇到的问题来理解docker容器用户uid的使用,以及了解容器内外uid的映射关系。 遇到的问题 本地有一个node的项目需要编译,采用d ......
docker 容器 权限 用户 volume

docker 部署 1

先打包本地idea 项目 上传到 linux 服务器 任意目录 并创建一个叫Dockerfile 文件 创建镜像 docker build -t mydemo . 启动镜像 映射端口 访问 ip:4200/hello ......
docker

docker-compose 进阶篇

一、概述 docker-compose 项目是docker官方的开源项目, 负责实现对docker容器集群的快速编排,来轻松高效的管理容器,定义运行多个容器。 docker-compose将所管理的容器分为三层, 分别是工程(project),服务(service)以及容器(containner) ......
docker-compose compose docker

gralde-plugin->docker-compose的使用

在java web项目中,本地开发经常会需要在本地使用docker启动数据库等之类的服务。gradle提供了一个插件,允许通过gradle task启动docker的容器。在这里我们介绍的一个gralde插件com.avast.gradle.docker-compose 简单使用 引入插件 plug ......

zookeeper集群搭建

1. zookeeper介绍 ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。 ZooKeeper ......
集群 zookeeper

Docker学习

Docker为什么出现? 一款产品: 开发--上线两套环境! 应用环境,应用配置! 开发 运维。问题:我在我的电脑上可以运行!版本更新,导致服务不可用!对于运维来说,考验就十分大? 环境配置是十分的麻烦,每一个机器都要部署环境(集群Redis、ES、Hadoop....)!费时费力。 发布一个项目i ......
Docker

Nacos集群部署

一、集群部署说明 因此开源的时候推荐用户把所有服务列表放到一个vip下面,然后挂到一个域名下面 http://ip1:port/openAPI 直连ip模式,机器挂则需要修改ip才可以使用。 http://SLB:port/openAPI 挂载SLB模式(内网SLB,不可暴露到公网,以免带来安全风险 ......
集群 Nacos

在CentOS上安装Docker引擎

1,先决条件 #### 1-1操作系统要求 1-2 卸载旧版本 2,安装方法 2-1使用存储库安装 设置存储库 安装 Docker 引擎 本文永久更新地址: 官方地址:https://docs.docker.com/engine/install/centos/ 1,先决条件 #### 1-1操作系统 ......
引擎 CentOS Docker

在docker上安装MySQL和Redis

1. 通过docker命令下载mysql5.7镜像 mysql5.7前期准备 2. 通过docker命令下载mysql8.0镜像 mysql8.0前期准备 3. 通过docker命令下载redis镜像 redis前期准备 本文永久更新地址: 1. 通过docker命令下载mysql5.7镜像 mys ......
docker MySQL Redis

RabbitMQ集群搭建

1.将上一部分的搭建的rabbitmq环境的虚拟机克隆三份(详细可以参考https://www.cnblogs.com/chongchongstyle/p/17234277.html) 2.修改克隆的机器ip为134、135、136 修改ip可参考 https://www.cnblogs.com/c ......
集群 RabbitMQ

Docker安装Nacos

1、拉取镜像 docker pull nacos/nacos-server 2、挂载目录,用于映射到容器,目录按自己的情况创建 #新建目录 (根据实际情况创建) mkdir -p /home/nacos/logs/ mkdir -p /home/nacos/conf/ 3、mysql新建nacos的 ......
Docker Nacos

window11下Jenkins+Docker 实现一键自动化部署项目!步骤齐全,少走坑路(原创原创)

1.安装jdk 这个就不写了,自行百度,我这边装了两个版本的,jenkins要求11或17,所以装的jdk11,环境发布用的是jdk8 2.安装docker 官方地址:https://dockerdocs.cn/docker-for-windows/install/index.html 参考地址:h ......
步骤 Jenkins 项目 window Docker

mycat配置数据库集群

mycat配置数据库集群 所有的集群配置,都必须配置多主多从模式,即多个master节点相互之间配置主从,如,master1和slave1为第一组主从,master2和slave2为第二组主从,master1和master2互为对方的主从。 如下配置方式为两个主从模型,两个writeHost互为主从 ......
集群 数据库 数据 mycat

m1 docker mysql8/arm64v8 解决 `only_full_group_by` 问题

m1 docker mysql8/arm64v8 解决 only_full_group_by 问题 问题原因 MySql从5.7版本开始默认开启only_full_group_by规则,规则核心原则如下,没有遵循原则的sql会被认为是不合法的sql order by后面的列必须是在select后面存 ......

docker常用知识记录

安装docker(以contos8为例) # 卸载老版本 yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ docker-latest-logrotate \ dock ......
常用 知识 docker

docker 根据dockerfile创建镜像

原文传送:传送门 DockerFile dockerfile 时用来构建docker 镜像的文件,命令参数脚本 构建步骤: 编写dockerfile文件 docker build构建成镜像 docker run docker push 发布镜像 docker hub 阿里云仓库 from #基础镜像 ......
dockerfile 镜像 docker

查看 docker-for-mac的 runtiime

使用容器命名空间 docker run -it --rm --privileged --pid=host justincormack/nsenter1 进入容器 uanme -a # Linux docker-desktop 5.15.49-linuxkit #1 SMP PREEMPT Tue S ......
docker-for-mac runtiime docker for mac

docker-compose.yml 参数详解

version: '3.8' # Docker Compose 文件版本号 services: # 定义应用程序中的服务,每个服务对应一个容器 web: # 定义一个名为 web 的服务 image: nginx:latest # 指定该服务使用的 Docker 镜像名称 build: . # 指定 ......
docker-compose 参数 compose docker yml

docker-compose restart 策略

restart 策略用于控制容器在退出后的行为。 on-failure 是指在容器退出时,当其退出状态码不为0(即失败)时,自动重启该容器。具体来说,它会重启那些在容器退出时返回非0状态码的容器。如果容器在退出时返回状态码0,则不会自动重启该容器。 no:容器退出时不重启容器; always:容器退 ......
docker-compose 策略 compose restart docker

Docker - dockerfile as 关键字

在 Dockerfile 中使用 AS(或 as)关键字可以创建一个多阶段构建(multi-stage build)。 多阶段构建是一种将应用程序的构建过程分解为多个阶段(stage)的技术,每个阶段使用不同的基础镜像和指令来完成特定的任务。 在多阶段构建中,可以使用 AS 关键字指定构建阶段的名称 ......
dockerfile 关键字 关键 Docker as

Ubuntu 通过 docker 部署禅道

# 拉取镜像 docker pull easysoft/zentao:latest # 运行容器(简单配置) docker run --name zentao -p 8080:80 -e MYSQL_ROOT_PASSWORD=88888888 -d zentao # 运行容器(复杂配置) dock ......
Ubuntu docker

docker的应用原理

什么是 Docker 及镜像(Image)、容器(Container)、仓库(Repository)基本概念 时代Java 2023-03-24 07:40 发表于北京 ↑ 点击上面 “时代Java”关注我们,关注新技术,学习新知识! Docker 是什么? Docker 是一个开源的应用容器引擎, ......
原理 docker

kafka集群原理及部署

#官方地址 https://kafka.apache.org/ #概述 Kakfa起初是由LinkedIn公司开发的一个分布式的消息系统,后成为Apache的一部分,它使用Scala编写,以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm ......
集群 原理 kafka

AM33X将本机Linux系统打包成docker镜像

基于现有开发板上运行带有docker feature 将正在运行系统打包成docker image 对系统进行压缩 /proc、/sys、/run、/dev这几个目录都是系统启动时自动生成的,虽然也属于文件系统一部分,但是他们每次开机都会有变化,所以打包的时候就应该忽略它们 tar 完成系统压缩包 ......
镜像 docker 系统 Linux 33X

java中获取路径 -docker文件路径挂载到磁盘

继签名章文档后,发现一个问题,服务器获取路径问题又三种: 第一种使用httpRequest: String realPath = request.getSession().getServletContext().getRealPath(""); 第二种实用类加载: URL resour = this ......
路径 磁盘 文件 docker java

Docker 开始清退开源组织,不付费就删除所有私镜像怎么看

如果说 Docker 这是虚伪的话,这个虚伪谈不上吧。 DockerHub 的设计上本身的流量成本,存储成本就比其他仓库要大得多。 一个Mave 的 Jar 才多大,一个 Docker 的镜像有多大? 一些项目每个部署个好几次很正常,每次部署 Docker 镜像都要重新生成和推送到 Docker 上 ......
镜像 Docker

Docker CLI docker config rm 常用命令

Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中,然后发布到任何流行的 Linux或Windows操作系统的机器上,也可以实现虚拟化。Docker是内核虚拟化,不使用Hypervisor是不完全虚拟化,依赖内核的特性实现资源隔离。本文主要介绍Docke ......
命令 常用 Docker docker config

天梯赛练习题 L3-003 社交集群 (简单并查集)

https://pintia.cn/problem-sets/994805046380707840/exam/problems/994805053141925888 题目大意: 当你在社交网络平台注册时,一般总是被要求填写你的个人兴趣爱好,以便找到具有相同兴趣爱好的潜在的朋友。一个“社交集群”是指部 ......
天梯 练习题 集群 社交 003