集群zookeeper docker hadoop

Docker 镜像加速

sudo gedit /etc/docker/daemon.json # 刚安装完 docker 可能需要先创建 docker 目录 { "registry-mirrors":["https://f3lu6ju1.mirror.aliyuncs.com"] # 网上找的别人的 } sudo syst ......
镜像 Docker

docker ubuntu 无auth.log文件解决

背景`` 需要在docker中的ubuntu测试ssh暴力破解的相关日志分析,发现docker pull ubuntu中无,auth.log文件,但是在ubuntu20.04官方系统中是有这个文件的。 auth.log存储来自可插拔认证模块(PAM)的日志,包括成功的登录,失败的登录尝试和认证方式 ......
文件 docker ubuntu auth log

K8S学习笔记之卸载K8S集群

阅读目录 0x00 概述 0x01 操作 0x00 概述 有时候需要卸载已安装在本机的K8S服务和服务,本文卸载的K8S面向使用kubeadm或者二进制方法安装的,不涉及使用rpm包安装的集群; 主要使用kubeadm reset和删除指定文件的方法,卸载K8S集群。 0x01 操作 首先清理运行到 ......
集群 K8S 笔记 K8 8S

Hadoop 学习

关于Hadoop Hadoop崩溃集群重启 先停掉进程,sbin/stop-yarn.sh sbin/stop-dfs.sh。然后删除每个集群上datanode的信息。默认在/tmp。如果配置了该目录,就去指定目录删除。data目录和log目录,最后执行格式化namenode format,再重启H ......
Hadoop

使用Docker安装并启动nginx

1. 在 Docker 镜像仓库查找 nginx 镜像 dockerhub 镜像仓库 或者通过命令 docker search nginx 在宿主机终端查找 2. 拉取 nginx 镜像 # 拉取 nginx 镜像 docker pull nginx # 不加版本号默认下载 latest 版本,即 ......
Docker nginx

用树莓派docker玩openwebrx笔记(未成功)

树莓派映像:https://dietpi.com 安装docker:apt install docker 创建启动脚本:/root/start_openwebrx_docker.sh #!/bin/bash docker run --device /dev/bus/usb -p 8073:8073 ......
树莓 openwebrx 笔记 docker

java——spring boot集成kafka——集群分区消费策略

图中Kafka集群有两个broker,每个broker中有多个partition。 ⼀个partition只能被⼀个消费组⾥的某⼀个消费者消费,从⽽保证消费顺序。 Kafka只在partition的范围内保证消息消费的局部顺序性,不能在同⼀个topic中的多个partition中保证总的消费顺序性。 ......
集群 策略 spring kafka java

docker 安装pgadmin4

docker run -p 5433:80 \ -e "PGADMIN_DEFAULT_EMAIL=登录账户" \ -e "PGADMIN_DEFAULT_PASSWORD=密码" \ -d dpage/pgadmin4 ......
pgadmin4 pgadmin docker

创建镜像发布到镜像仓库【不依赖docker环境】

image 工具背景 如今,docker镜像常用于工具的分发,demo的演示,第一步就是得创建docker镜像。一般入门都会安装docker,然后用dockerFile来创建镜像,除此以外你还想过有更高效的方式吗? image Google开发的jib不依赖docker环境也能创建docker或者O ......
镜像 仓库 环境 docker

docker 安装与启动

Docker 是一个开源的应用容器引擎,基于 Go 语言 并遵从 Apache2.0 协议开源。 Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。 容器是完全使用沙箱机制,相互之间不会有任何接口(类似 iPh ......
docker

docker-安装Oracle11g

获取镜像 在线 docker pull oracleinanutshell/oracle-xe-11g 离线 tar包下载:链接: https://pan.baidu.com/s/1bRp6mSqYtMwIel1172NinA 提取码: 62in #导入镜像docker load < /root/o ......
docker Oracle 11g 11

hadoop 第二期

Hive 启动hive 使用命令`hive` ==输入命令之后要有一个 ; 结尾!!!!!!!== DDL命令 1.创建数据表 create table lxl( num int, name string, gender string ) row formate delimited fields t ......
hadoop

docker镜像体积优化,拉取最小化jre镜像并构建nodejs环境

镜像体积优化 优化前构建镜像体积:1.2GB 优化后构建镜像体积:621.63 MB 优化前 Dockerfile FROM centos:centos7 WORKDIR /mydocker/jdk #创建一个存放jdk的路径 RUN mkdir /mydocker/jdk/jdk11 #将jdk压 ......
镜像 体积 环境 docker nodejs

万字长文带你入门docker

1 Docker dockerfiler 镜像构建 Compose是在单机进行容器编排 Horbor 镜像仓库 Docker swarm 在多机进行容器编排 Docker Compose缺点是不能在分布式多机器上使用 Docker swarm缺点是不能同时编排多个服务, Docker Stack,可 ......
长文 docker

Redis主从集群切换数据丢失问题如何应对?

数据丢失的情况 异步复制同步丢失 集群产生脑裂数据丢失 异步复制丢失 对于Redis主节点与从节点之间的数据复制,是异步复制的,当客户端发送写请求给master节点的时候,客户端会返回OK,然后同步到各个slave节点中。 如果此时master还没来得及同步给slave节点时发生宕机,那么maste ......
主从 集群 数据 问题 Redis

docker安装OP

docker pull xuanaimai/onecloud:21-03-05复制代码开启网卡混杂模式ip link set eth0 promisc on复制代码 创建网络docker network create -d macvlan --subnet=192.168.102.0/24 --ga ......
docker

安装 Docker 程序

安装 Docker 程序apt update && apt install docker.io 内置青龙面板的安装脚本install-qinglong.sh 内置了容器管理面板的安装脚本install-portainer.sh 内置了特斯拉监控程序的安装脚本install-teslamate1.sh ......
程序 Docker

docker常用命令

docker images 列出已安装的镜像docker ps 列出正在运行的容器docker ps -a 列出所有容器,包括未运行docker stop xxx 停止 xxx 容器docker rm xxx 删除 xxx 容器docker rmi mrdoc 删除 xxx 镜像 systemctl ......
命令 常用 docker

安装docker可视化管理工具 Portainer

可视化管理工具 Portainer 2023/1/13 17:17 拉取汉化版镜像docker pull 6053537/portainer-ce 创建数据卷docker volume create portainer_data 创建‎‏容器docker run -d--name portainer ......
管理工具 Portainer 工具 docker

docker容器更新

docker run -d--name watchtower-v /var/run/docker.sock:/var/run/docker.sockcontainrrr/watchtower 第二种命令 docker run -d \ --name watchtower \ --restart un ......
容器 docker

docker部署es与kibana

1. 搜索版本docker search elasticsearch 2. 拉取镜像docker pull elasticsearch:7.10.1 3. 创建目录mkdir -p /docker/elasticsearch/{logs,conf,data,plugins}# cd /docker/ ......
docker kibana

docker-compose部署elk并设置账户密码

docker-compose部署elk并设置账户密码系列 最近因为在搭建微服务环境所以要用到elk首先介绍一下什么是elk,以及负责的功能模块(部署的过程比较坎坷我尽量把遇到的坑,以及如何排查问题的方式顺便介绍一下) ELK是Elasticsearch、Logstash、Kibana三大开源框架首字 ......
docker-compose 账户 密码 compose docker

wsl 中 docker-compose 搭建 kafka 集群出现的外部访问错误

在 wsl 中用 docker-compose 搭建了一台 zookeeper + 三台 broker 的 kafka 集群,使用的镜像是 bitnami/kafka,在按照镜像文档运行容器后,发现运行在宿主机里的客户端程序无法正确的推送/消费消息,研究后发现镜像文档只适用于客户端程序和 kafka ......
集群 docker-compose 错误 compose docker

kubernetes failed to create kubelet: misconfiguration: kubelet cgroup driver: "cgroupfs" is different from docker cgroup driver: "systemd"

错误原因 kubernetes 的文件驱动与 docker 不一致,导致镜像无法启动。 docker info 可以看到驱动方式 Cgroup Driver: systemd。 解决方案 统一资源管理,一致使用 systemd 或者 cgroupfs。 在 Linux 上,控制组(CGroup)用于 ......
quot kubelet cgroup driver misconfiguration

Zookeeper快速使用与详解

一、Zookeeper简介 1.概念 Zookeeper是一个开源的分布式协调服务,用于管理大型集群中的资源、配置信息和命名服务等;也是一个高性能的、可靠的、分布式的、开放源代码的协调服务。Zookeeper主要解决分布式应用中的一些数据管理问题,如配置管理、名字服务、集群管理、分布式锁等。 2.核 ......
Zookeeper

centos7安装Docker(转)

原文:https://cloud.tencent.com/developer/article/1701451 1、安装前必读 在安装 Docker 之前,先说一下配置,我这里是Centos7 Linux 内核:官方建议 3.10 以上,3.8以上貌似也可。 注意:本文的命令使用的是 root 用户登 ......
centos7 centos Docker

docker 必会基础知识

Docker知识汇总 docker安装 安装地址 windows:https://desktop.docker.com/win/stable/amd64/Docker%20Desktop%20Installer.exe?utm_source=docker&utm_medium=webreferral ......
基础知识 基础 知识 docker

Rancher 系列文章-在腾讯云的 K3S 上安装高可用 Rancher 集群

开篇 📜 引言: 三人行必有我师焉 知识共享,天下为公 《K3s 系列文章》 《Rancher 系列文章》 方案 在腾讯云的 K3S 上安装 Rancher 方案目标 高可用 3 台 master 的 k3s 集群 高可用模式的 rancher 数据备份 rancher 数据备份到 腾讯云对象存储 ......
Rancher 集群 文章 K3S K3

docker启动出现Job for docker.service failed because the control process exited error code问题

只需要修改docker.server文件即可: 执行以下命令: vim vim /lib/systemd/system/docker.service 然后将ExecStart=/usr/bin/dockerd -H fd:// 改成ExecStart=/usr/bin/dockerd -H fd:/ ......
docker because control service process