集群zookeeper docker hadoop
探索 Linux Namespace：Docker 隔离的神奇背后
在 深入理解 Docker 核心原理：Namespace、Cgroups 和 Rootfs 一文中我们分析了 Docker 是由三大核心技术实现的。 今天就一起分析 Docker 三大核心技术之一的 Linux Namespace。 后续文章会演示如何从零实现一个简易的 Docker，这里先简单了解 ......
数据高速公路：详解数仓集群通信技术
本文分享自华为云社区《直播回顾 | 数据高速公路—数仓集群通信技术详解》，作者： 胡辣汤。 大数据时代，集群规模越来越大，业务并发越来越高，数据库集群各节点间的通信压力也越来越大。在本期《数据高速公路—数仓集群通信技术详解》的主题直播中，我们邀请到华为云GaussDB(DWS)技术布道师魏登老师，深 ......
Docker 入门系列（7）- Dockerfile 使用（FROM、RUN、CMD、EXPOSE、ENV、ADD、COPY、ENTRYPOINT、VOLUME、WORKDIR）
https://blog.csdn.net/wohu1104/article/details/85227644 ———————————————————————————————————————————————————————————————— Dockerfile 是一个文本格式的配置文件，用户可以使 ......
中间件 ZK分布式专题与Dubbo微服务入门 2-3 zookeeper文件夹主要目录介绍
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12690 1 重点关注 1.1 最常用的目录 bin 执行启动关闭zookeeper命令 conifg 进行配置文件配置 recipes 案例代码 docs 文档参考 2 课程内容 2.1 zo ......
中间件 ZK分布式专题与Dubbo微服务入门 2-2 zookeeper下载、安装
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12686 1 重点关注 1.1 zookeeper的安装 下载zookeeper 在以下链接下载3.4.11 http://archive.apache.org/dist/zookeeper/ ......
docker镜像代理
dockerhub根镜像代理 官方命令：docker pull nginx:latest 代理命令：docker pull dockerproxy.com/library/nginx:latest dockerhub常规镜像代理 官方命令：docker pull stilleshan/frpc:la ......
Docker搭建轻量个人文件分享服务-文件传输自由
title: Docker搭建轻量个人文件分享服务-文件传输自由 tags: [Docker,文件分享,下载,分享,网盘,Pingvin Share,NAS] 新版原文: https://query.carlzeng.top:3/appsearch?q=Docker搭建轻量个人文件分享服务-文件传输 ......
Hadoop理论知识
1、Hadoop是什么？ Hadoop是一个由Apache基金会所研发的分布式系统基础架构。主要解决海量数据存储和海量数据的分析计算问题。 2、Hadoop的特点？ （1）高可靠性：Hadoop底层维护多个数据副本，所以即使Hadoop某个计算元素或存储出现故障，也不会导致数据的丢失。 （2）高扩展 ......
docker部署redis程序数据库
############单节点redis mkdir -p /opt/redis/conf touch /opt/redis/conf/redis.conf ###启动redis容器 docker run -d --name redis -p 6379:6379 \ > -v /opt/redis/ ......
【Amadeus原创】使用docker部署最新6.2版Zabbix Server端
一、安装docker，参见本博客docker安装文档。 二、启动空的mysql -e MYSQL_DATABASE="zabbix" \ -e MYSQL_USER="zabbix" \ -e MYSQL_PASSWORD="zabbix_pwd1234" \ -e MYSQL_ROOT_PASSW ......
docker的基本命令使用
docker image/images docker image与images 的区别在于docker images可以直接使用，docker image不可以直接使用,看例子 [root@docker ~]# docker images # 这是直接使用docker images REPOSITO ......
docker进程无法启动
docker进程无法启动，可能是因为上次没有停止docker，直接关机造成的，我也不确定。 试了很多方法都不行，最后用如下方法解决，卸载重装docker 问题的关键是要将docker卸载干净 sudo apt-get purge -y docker-ce docker-ce-cli docker.i ......
Docker安装 配置
Docker的技术原理： 1. Linux 命名空间（Namespaces） 进程命名空间：使得每个容器拥有独立的进程空间，互相隔离，不受其他容器影响。 网络命名空间：提供独立的网络栈，每个容器有自己的网络接口、IP地址，实现网络隔离。 文件系统命名空间：每个容器拥有自己的文件系统视图，使得容器间文 ......
docker构建机器学习计算环境并做无网络迁移
1.docker安装 很多系统自带docker，可以跳过 2.拉取镜像 docker pull nvcr.io/nvidia/pytorch:22.12-py3 保证有足够磁盘空间，有些镜像要几十G，不然系统会出问题，看我另一篇博文 3.配置 创建一个名字为xxx的容器，运行镜像yyy docker ......
docker-compose安装fastdfs
docker-compose安装fastdfs 编写配置文件docker-compose.yml version: '3' services: tracker: image: delron/fastdfs container_name: tracker restart: always ports: ......
redis容器docker-compose启动正常，但配置文件无法生效
问题描述 docker-compose.yml文件中进行了redis.conf配置文件的映射，并且进去容器也能找到该映射文件，但修改这个配置文件里的内容却始终无法生效！！！ 远程连接上redis服务器，使用CONFIG get 命令读取配置，却一直显示没有配置文件：redis (error) ERR ......
Hadoop Map/Reduce
Map/Reduce框架运转在<key, value> 键值对上，也就是说， 框架把作业的输入看为是一组<key, value> 键值对，同样也产出一组 <key, value> 键值对做为作业的输出，这两组键值对的类型可能不同。 框架需要对key和value的类(classes)进行序列化操作， ......
docker部署ELK日志系统
第一步：部署ES docker pull elasticsearch:7.17.0 创建ES目录与配置文件 mkdir -p /opt/es/config mkdir -p /opt/es/data echo "http.host: 0.0.0.0" >>/opt/es/config/elastic ......
docker安装mysql8.0
docker run -d \-p 63306:3306 \--restart=always \-e MYSQL_ROOT_PASSWORD=root \-v /home/tools/mysql/conf/my.cnf:/etc/mysql/my.cnf:rw \-v /home/tools/mys ......
在windows上安装 docker容器的过程
本文为第一次记录,有遗漏问题,欢迎交流,主要用于记录,方便以后操作 先找到了微软官网教程 https://learn.microsoft.com/zh-cn/virtualization/windowscontainers/quick-start/set-up-environment?tabs=do ......
使用 Sealos 一键部署 Kubernetes 集群
Sealos 是一款以 Kubernetes 为内核的云操作系统发行版，使用户能够像使用个人电脑一样简单地使用云。 与此同时，Sealos 还提供一套强大的工具，可以便利地管理整个 Kubernetes 集群的生命周期。 Sealos 不仅可以一键安装一个单节点的 Kubernetes 开发环境，还 ......
开启安全功能 ES 集群就安全了吗？
背景 经常跟 ES 打交道的朋友都知道，现在主流的 ES 集群安全方案是：RBAC + TLS for Internal + HTTPS 。 作为终端用户一般只需要关心用户名和密码就行了。作为管理和运维 ES 的人员来说，可能希望 ES 能提供密码策略来强制密码强度和密码使用周期。遗憾的是 ES 对 ......
建设本地私有集群kubesphere+kubernetes高可用集群服务器
一、资源需求主机名 cpu(vCPUs) 内存(GB) 磁盘 ipk8s-master01 8 32 40G+500G 192.168.1.180k8s-master02 8 32 40G+500G 192.168.1.53k8s-master03 8 32 40G+500G 192.168.1.1 ......
OpenEuler22.03安装最新版本Docker
一、环境及问题 操作系统环境如下： 操作系统：OpenEuler 22.03 LTS 安装方式：最小化安装 在操作系统安装完毕如果直接采用dnf或者yum方式安装docker: sudo dnf install docker-ce docker-ce-cli containerd.io 报如下错误： ......
群晖Docker部署本地WPS Office文档编辑器并实现远程访问
wps-office是一个在Linux服务器上部署WPS Office的镜像。它基于WPS Office的Linux版本，通过Docker容器化的方式提供了一个完整的WPS Office环境，使得用户可以在Linux服务器上轻松地使用WPS Office进行文档处理、表格制作和幻灯片演示等操作。 C ......
Docker部署MySQL8.X
1、拉取MySQL镜像 docker pull mysql ps：这是拉取最新的mysqL版本（当前是8.0.27版本），若是要拉取指定版本，则可以在后面加上版本号（如：docker pull mysql:8.0.27） 2、查看镜像 docker images 3、创建存储MySQL数据信息的目录 ......
fastJson全版本Docker漏洞环境
fastJson全版本Docker漏洞环境(涵盖1.2.47/1.2.68/1.2.80等版本)，主要包括JNDI注入、waf绕过、文件读写、反序列化、利用链探测绕过、不出网利用等。设定场景为黑盒测试，从黑盒的角度覆盖FastJson深入利用全过程，部分环境需要给到jar包反编译分析。Docker环 ......
基于docker在win11运行pyspider
在win11中使用pyspider安装出现问题，发生多个报错 发现官网有用docker安装的方式 直接通过docker # mysql docker run --name mysql -d -v /data/mysql:/var/lib/mysql -e MYSQL_ALLOW_EMPTY_PASS ......
使用Python库清理Docker不用的Volume
有一句老话叫：书到用时方恨少。 其实电脑的内存空间也是非常宝贵，特别是MacOS下的docker可以分配的空间更是寸土寸金。 在21年的时候我也遇到过类似的问题，当时的经历记录在这篇博客：https://www.cnblogs.com/freephp/p/14864570.html 然而在长时间的d ......
如何清理Docker不用的Volume
有一句老话叫：书到用时方恨少。 其实电脑的内存空间也是非常宝贵，特别是MacOS下的docker可以分配的空间更是寸土寸金。 在21年的时候我也遇到过类似的问题，当时的经历记录在这篇博客：https://www.cnblogs.com/freephp/p/14864570.html 然而在长时间的d ......