集群centos7 hadoop centos
【K8S系列】快速初始化⼀个最⼩集群
序言 走得最慢的人，只要不丧失目标，也比漫无目的地徘徊的人走得快。 文章标记颜色说明： 黄色：重要标题 红色：用来标记结论 绿色：用来标记一级重要 蓝色：用来标记二级重要 希望这篇文章能让你不仅有一定的收获，而且可以愉快的学习，如果有什么建议，都可以留言和我交流 写在前面 k8s作为⼀个相对⽐较复杂 ......
k8s集群Node节点管理：节点信息查看及节点label标签管理
k8s集群Node节点管理：节点信息查看及节点label标签管理 Kubernetes集群Node管理 一、查看集群信息 [root@k8s-master1 ~]# kubectl cluster-info Kubernetes control plane is running at https:/ ......
开源大数据集群部署（二）集群基础环境实施准备
作者：櫰木 环境准备 本次使用到的二进制软件包目录为：系统初始化前提是操作系统已完成安装、各个主机之间网络互通，系统常用命令已安装，本默认这些前提条件已具备，不在阐述。 1 主机环境初始化 安装centos系统完成后需要对主机进行初始化配置和验证工作，在所有主机上（hd1.dtstack.com-h ......
Centos7对外开放端口
命令集合：（1）查看对外开放的端口状态查询已开放的端口 netstat -anp查询指定端口是否已开 firewall-cmd --query-port=666/tcp提示 yes，表示开启；no表示未开启。（2）查看防火墙状态 查看防火墙状态 systemctl status firewalld ......
TiDB 多集群告警监控-初章-监控融合、自动告警处理
author:longzhuquan 背景 随着公司XC改造步伐的前进，越来越多的业务选择 TiDB，由于各个业务之间需要物理隔离，避免不了的 TiDB 集群数量越来越多。虽然每套 TiDB 集群均有两个详细的监控 Dashboard、Grafana，但对于运维来说几十套集群的监控、告警、巡检均需消 ......
hadoop和spark
Spark和Hadoop是大数据处理领域两个重要的开源框架，它们之间既有紧密的联系也有显著的区别。 联系： 生态兼容：Spark可以无缝运行在Hadoop之上，利用Hadoop Distributed File System (HDFS) 进行数据存储，并且可以通过YARN（Yet Another ......
移动护理系统-ZooKeeper单机和集群方式安装部署
1.1 zookeeper安装 1.下载地址 http://mirror.bit.edu.cn/apache/zookeeper/ 选择版本，我选择的是 注意：下载新版本的时候需要下载带bin的，因为有时候会报错错误: 找不到或无法加载主类 org.apache.zookeeper.server.q ......
CentOs安装Nvm,Node
Centos7系统 镜像链接如下： https://mirrors.aliyun.com/centos/7.9.2009/isos/x86_64/CentOS-7-x86_64-Everything-2009.iso?spm=a2c6h.25603864.0.0.18de6aeaLWNeIw 1： ......
中间件 ZK分布式专题与Dubbo微服务入门 5-1 集群的一些基本概念
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12714 1 重点关注 1.1 ACL命令行 getAcl:获取某个节点的acl权眼信息setAcl:设置某个节点的acl权限信息addauth:输入认证授权信息，注册时输入明文察码(登录 但是 ......
CentOS 7.9完全卸载mysql
检查 rpm 包 rpm -qa |grep -i mysql # 运行结果 mysql-community-libs-5.7.37-1.el7.x86_64 mysql57-community-release-el7-10.noarch mysql-community-server-5.7.37- ......
CentOS 7 安装 alien
alien 实现deb与rpm相互转换 # yum install epel-release # rpm --import http://li.nux.ro/download/nux/RPM-GPG-KEY-nux.ro # rpm -Uvh http://li.nux.ro/download/nu ......
将netcore打包好的程序，部署到CentOS系统中
进入开发好的程序目录，执行打包命令，生成auth目录，并将打包好的目录上传到CentOS的home目录 dotnet publish -o auth 执行运行命令 dotnet Howdy.Net6API.AuthenticationCenter.dll 使用postman进行测试 注：此种方式，适 ......
Hadoop之mapreduce参数大全-5
101.指定任务启动过程中允许的最大跳过尝试次数 mapreduce.task.skip.start.attempts 是 Hadoop MapReduce 框架中的一个配置属性，用于指定任务启动过程中允许的最大跳过尝试次数。 在 MapReduce 作业中，如果某个任务（Map 任务或 Reduc ......
Hadoop之mapreduce参数大全-6
126.指定 Map 任务运行的节点标签表达式 mapreduce.map.node-label-expression 是 Hadoop MapReduce 框架中的一个配置属性，用于指定 Map 任务运行的节点标签表达式。节点标签是在 Hadoop 集群中为节点分配的用户定义的标签，可用于将 Ma ......
大数据 - 安装部署 Apache开源大数据集群
Step1：前期准备 虚拟机软件：VMware workstation 16 pro 网盘链接：https://pan.baidu.com/s/1Yd0JUqiM-N6rpQbO0RjG_w --来自百度网盘超级会员V2的分享 集群信息如下 主机名 IP 操作系统 node01 192.168.24 ......
k8s-1.28.2集群小版本升级到1.28.5
环境：https://www.cnblogs.com/yangmeichong/p/17956335 # 流程：先升级master，再升级node # 1.备份组件(etcd这里先不备份了) # 先升级master3 # 1.腾空节点，驱逐master # 1.1 节点设置为维护状态 [root@m ......
freeswitch on centos docker
概述 freeswitch是一款简单好用的VOIP开源软交换平台。 centos7 docker上编译安装fs的流程记录。 环境 docker engine：Version 24.0.6 centos docker：7 freeswitch：v1.6.19 centos准备 docker hub拉取 ......
安装Linux-CentOS7.9操作系统虚拟机环境（适用于学习、测试环境）
1.前期环境准备 1.1.创建安装目录 具体名称以及路径根据自己的实际情况在个人pc或者其他的设备上进行创建。 1.2准备虚拟机操作系统iso镜像文件 阿里云开源镜像站地址 https://developer.aliyun.com/mirror/ 清华大学开源镜像站地址 https://mirror ......
centos 磁盘扩容
lvextend -l +100%FREE /dev/centos/root #扩展逻辑分区至分区组最大可用空间 xfs_growfs #逻辑分区扩容 resize2fs #逻辑分区扩容 partprobe #fdisk分区建完 lsblk不显示 lsblk #查看磁盘情况 fdisk -l #查看 ......
面试题：Hadoop的基于进程的计算和Spark基于线程方式优缺点？
Hadoop中的MR中每个map/reduce task都是一个java进程方式运行，好处在于进程之间是互相独立的，每个task独享进程资源，没 有互相干扰，监控方便，但是问题在于task之间不方便共享数据，执行效率比较低。比如多个map task读取不同数据源文件需要将数据源加 载到每个map t ......
开源大数据集群部署（一）集群实施规划
作者：櫰木 本次集群规划信息 本次实际生产业务体量存在巨大差异，但集群规划内容相同，因此建议实际生产环境按照按照一定比例扩展即可。 主机操作系统要求 软件信息 参数 配置 8C16G 操作系统版本 CentOS Linux release 7.8.2003 (Core) java版本 java ve ......
K8S集群搭建
K8S各节点环境准备 1 虚拟机操作系统环境准备 参考链接: https://kubernetes.io/zh/docs/setup/production-environment/tools/kubeadm/install-kubeadm/ 2 关闭swap分区 2.1临时关闭 swapoff -a ......
k8s集群证书过期怎么办
记录一次集群更新证书过程，因为集群证书已经更新了，以下只记录操作过程了。 参考：https://blog.csdn.net/Harry_z666/article/details/128015175 1、集群情况 版本：v1.23.6 部署方式：kubeadm部署 由于使用kubeadm部署，证书有效 ......
CentOS停更 替代版系统
龙蜥操作系统(Anolis OS) 是 OpenAnolis 龙蜥社区发行的开源Linux发行版，支持多计算架构，提供稳定、高性能、安全、可靠的操作系统支持 https://openanolis.cn/download Rocky Linux是一个开源的企业级操作系统，旨在与 Red Hat Ent ......
k8s集群搭建1.22.x (centos)
版本 1.22.xx 版本兼容 集群搭建指导 https://www.cnblogs.com/Sunzz/p/15184167.html 【1.18】 https://blog.csdn.net/qq_34629877/article/details/120234616 【1.22】 升级cento ......
在CentOS环境下编译GreatSQL RPM包
本文介绍如何在CentOS环境下编译GreatSQL RPM包。 运行环境是docker中的CentOS 8 x86_64： $ docker -v Docker version 20.10.10, build b485636 $ docker run -itd --hostname c8 --na ......
创建单机 PolarDB-X 集群
https://doc.polardbx.com/quickstart/topics/quickstart-pxd-cluster.html #安装 docker curl -fsSL https://get.docker.com -o get-docker.sh sh get-docker.sh ......
centos安装mysql8，银河麒麟安装mysql8，arm(aarch)架构，rpm包，完全离线安装
作者主页：https://www.cnblogs.com/milkbox/ 参考： 软件包下载： https://rpmfind.net/linux/rpm2html/search.php MySQL :: Download MySQL Community Server 主要教程：十二、MySQL8 ......
基于centos 7 x86_64 安装playwright框架
一. python 3 安装 playwright 要求python版本必须是在3.8及以上,推荐安装3.8~3.9的版本，可以很大一部分工作量，因为python 10(包括10)不在支持tls/ssl ,在安装时必须自己单独安装openssl进行代替，而升级openssl需要先升级gcc g++ ......
Elasticsearch分片大小设定和集群容量规划
本文以 Elasticsearch 7.9.2 为准。 分片大小 日志类：单个分片不超过 50G 搜索类：单个分片不超过 20G 先估算总数据量，再根据分片大小，确定分片数。 容量规划 容量规划时要考虑的因素： 机器的软硬件配置 单个文档的尺寸，文档总数，索引大小，分片个数，副本个数 文档写入方式（ ......