集群rocketmq进程 多个
大数据HDFS集群相关概念
一、Zookeeper服务 端口 描述 配置路径 2181 主要使用端口，对cline端提供服务。连接方式jdbc:hive2://ip:2181 conf/zoo.cfg中clientPort 2183 选举leader使用 conf/zoo.cfg中server.x=2182:2183 2182 ......
vue3 watch 多个值
1 watch([() => baTable.form.items!.userType, () => baTable.form.items!.totalUsage, () => baTable.form.items!.payCurr], (newValue, oldValue) => { 2 // ......
docker 安装 RocketMQ
安装 rocketmq 拉取 rocketmq 镜像 docker pull apache/rocketmq 运行 namesrv docker run -d \ --name rmqnamesrv \ --privileged=true \ -p 9876:9876 \ -v /tool/rock ......
k3d创建k3s集群
安装go wget https://golang.google.cn/dl/go1.21.3.linux-amd64.tar.gz tar zxvf go1.15.3.linux-amd64.tar.gz mv go /usr/local/ vim /etc/profile在最结尾添加 export ......
聊聊多个节点实例数据同步如何触发
前言 之前写过一篇文章聊聊在集群环境中本地缓存如何进行同步，今天聊的话题看着和那篇文章有点雷同，不过我们今天重点会放在方法论上，也不会拘泥于具体实现。在聊这个话题之前，大家可以思考一下，如果要实现多个实例数据同步触发，大家会怎么做？脑海里，是会浮现，我可以用消息队列或者定时器来实现？这种已经具象化的 ......
分布式集群与多线程高并发
后台数据的处理语言有很多，Java 是对前端采集的数据的一种比较常见的开发语言。互联网移动客户端的用户量特别大，大量的数据处理需求应运而生。可移动嵌入式设备的表现形式 很多，如 PC 端，手机移动端，智能手表，Google 眼镜等。Server2client 的互联网开发模式比较常见，有一种新的数据 ......
基于docker容器，搭建hadoop+spark+hive+hbase+Zookeeper Scala集群
1.安装Docker和Docker Compose 2.下载镜像 docker pull bde2020/hadoop-base:2.0.0-hadoop3.2.1-java8 docker pull bde2020/hadoop-namenode:2.0.0-hadoop3.2.1-java8 d ......
ETCD集群key超出200w给etcd压力太大，导致集群调度器延迟
背景： 业务在做测试的时候，突然集群不可用了，无法做出变更了，找到我们平台侧，经过排查，发现controller-manager调度器出现问题，经过查看，调度器不可使用， 处理 方案： 删除etcd集群的key 查询etcd集群中的key的数量： #etcd的命令行 etcdctl="/opt/et ......
信号量解决协调进程同步问题（司机与售票员问题）
问题描述（在日常生活中司机和售票员的行为动作需要满足一定的规则 ） 分析并发进程的交互点 1.首先我们将司机和售票员看成是2个进程，他们需要协调配合完成工作 2.我们需要找到进行并发执行过程中的交互点(一个进行肯定要等另一个进程做了才能接着往下做)，在这个点上我们需要使用P v操作让他们按照正确的顺 ......
利用kubeadm创建高可用集群
前言 本页的高可用是控制平面组件的高可用部署，同时还分为2种情况：堆叠etcd和外部etcd。使用kubeadm部署多master节点很方便，大体是3个步骤：使用init参数初始化好第一个master节点，然后其余的master节点使用join命令加入到master集群中，形成一个高可用的maste ......
使用kubeadm创建集群
前言 k8s集群在Node节点数量少的情况下，逐台去维护是可行的，但是如果Node节点数量多的情况下，再去想着我大不了一台一台来维护可能就不现实了。而且k8s的每个版本都差不多只有14个月的支持时间。可能还没稳定下来，一个新的版本已经更新了。这样一来版本升级的工作就变的会比较多一些。为了能够保证k8 ......
大规模集群的注意事项
简介 一提到大规模这三个字，就联想到数据中心机房中一排排的物理服务器，在早期还是购买物理机找托管机房的年代，很多时间都在机房中维护服务器，那声音吵得耳朵疼，现在的运维工程师幸福多了。 注意事项 集群峰值 k8s1.28版本单个集群支持5000个工作节点，每个节点Pod数量不超过110，pod总数不超 ......
Linux--进程与作业管理
from pixiv 进程概念与进程查看 pstree 我发现help这个命令简直是个好东西，可以更快地显示出常用参数，可以先使用type xxx 来看下xxx命令的类型，然后再决定用help xxx还是xxx --help pstree是以树的形式打印出当前全部运行的进程 就拿 pstree -a ......
关于elementui的cascader组件多个级联大量数据滚动定位样式导致卡顿问题
如题，多个cascader级联组件，下拉选项含大量数据，滚动时会有实时样式重新渲染，导致CUP内存溢满而卡顿 解决尝试：使用elementui中的内部源码方法处理 <script> import { addResizeListener, removeResizeListener } from 'el ......
【Python微信机器人】第二篇：将python注入到其他进程
目录修整 目前的系列目录(后面会根据实际情况变动): 在windows11上编译python 将python注入到其他进程并运行 使用C++写一个python的pyd库，用于实现inline hook Python ctypes库的使用 使用ctypes主动调用进程内的任意函数 使用汇编引擎调用进程 ......
结构体绑定，返回多个参数
当返回多个参数时，可以使用tuple、pair，它们都是使用get<0...n>(name)取值 结构体绑定;就是将返回的参数自定义名字，要用"[]"括起来。 std::pair<std::string, int>CreatePerson(){ return { "Kxin",22 }; } aut ......
管理进程
一：了解系统linux中系统的进程 1：进程的概念 进程是系统管理事务的基本单元，是操作系统执行特点任务的动态实体，一般情况下，每个运行的程序都有一个进程组成，比如vim编辑文件时，也会生成一个进程 进程：就是这个可执行的程序运行起来，到结束前，它就是一个进程 3种类型的进程 1）交互进程 是由sh ......
C# out参数out多个参数
一、背景说明 一个方法返回多个相同数据类型的变量，可以采用数据的方式； 我需要返回多个不同数据类型的方法，在这里采用out多个参数的方式。 二、作用 用一个方法传递出多个返回值，也可以创建结构体或者一个类，或者使用静态变量达到类似的效果。 三、方法定义 在方法定义时使用out关键字，每一个返回值都要 ......
Day19_叠加多个装饰器_生成器_三元表达式_列表、字典、集合生成式_生成器表达式
1.叠加多个装饰器运行顺序： 2.生成器的运行： 3..send()方法可以为yield传输返回值： 4..send()一个None相当于把None添加到yield后： 5..close关闭之后无法传值： 6.三元表达式： 7.列表生成式： 8.字典生成式： 9.集合生成式： 10.生成器表达式： ......
K8S集群搭建
集群搭建的几种方式 kubeadm 通过kubeadm init、kubeadm join快速部署集群。 二进制包 下载官方编译好的二进制文件，手动部署，比较麻烦。。 第三方工具、web端 第三方提供的部署工具、web部署端。 kubeadm部署k8s集群 实验环境 master节点： IP：10. ......
MongoDB分片+副本集高可用集群的启停步骤
■■ 集群启动步骤 1、先启动各节点的 config server mongod -f ${MongoDir}/conf/config.conf 2、再启动各节点的 shard server mongod -f ${MongoDir}/conf/shard1.conf 3、再启动各节点的 mongo ......
掌握 Kubernetes 故障排除：有效维护集群的最佳实践和工具
Kubernetes 是一款管理容器化应用程序的强大工具。然而，与任何复杂的系统一样，使用它时也可能出错。当问题出现时， 掌握有效的故障排除技术和工具非常重要。 本文将介绍以下步骤，助您了解事件收集的入门知识： 检索最新事件 使用 Pod 模拟问题 在位于 PV 的 Pod 中存储事件 检索最新事件 ......
【RocketMQ】数据的清理机制
Broker在启动的时候会注册定时任务，定时清理过期的数据，默认是每10s执行一次，分别清理CommitLog文件和ConsumeQueue文件： public class DefaultMessageStore implements MessageStore { // CommitLog清理类 p ......
进程、线程与协程概念理解
一、进程 进程是一个具有一定独立功能的程序的一次动态执行过程，是操作系统进程资源分配的基本单位，通常包含三部分 程序 数据 程序控制块PCB：包含进程描述信息和控制信息 二、线程 线程是程序执行中一个单一的顺序控制流程，是程序执行流的最小单元，是处理器调度的基本单位。 用户线程与内核线程 一对一模型 ......
两台实体机器4个虚拟机节点的Hadoop集群搭建（Ubuntu版）
安装Ubuntu Linux元信息 两台机器，每台机器两台Ubuntu Ubuntu版本：ubuntu-22.04.3-desktop-amd64.iso 处理器数量2，每个处理器的核心数量2，总处理器核心数量4 单个虚拟机内存8192MB（8G），最大磁盘大小30G 参考链接 清华大学开源软件镜像 ......
解决Clion中写多个C++文件中存在多个main函数报错的问题
解决Clion中写多个C++文件中存在多个main函数报错的问题 在刷题写C++的时候，常常因为要写多个文件，这时存在多个main就会报错，通常解决这个问题会有以下两种解决方法： 把不需要的main给注释掉 新建一个Project项目 这边我介绍一种新的办法： （适用于IDEA） 1.先下载这个插件 ......
第三章Unix/Linux进程管理—学习笔记六
〇.本章思维导图 1.最近刚好操作系统也学习到进程相关部分，因此再看这些知识更易懂了 2.思维导图 3.本章简介 本章讨论了Unix/inux 中的进程管理;阐述了多任务处理原则;介绍了进程概念;并以一个编程示例来说明多任务处理、上下文切换和进程处理的各种原则和方法。 多任务处理系统支持动态进程创建 ......
chapter 3 Unix/Linux进程管理
学习笔记：Unix/Linux进程管理 摘要 本章深入探讨Unix/Linux中的进程管理。 它涵盖了多任务处理的原理和引入进程概念。 使用编程示例演示了这些概念。 解释了多任务处理、上下文切换以及各种与进程相关的技术。 3.1 多任务处理 多任务处理涉及同时执行多个独立的活动。 在计算中，它指的是 ......
第七周Linux教材第三章学习笔记——Unix/Linux进程管理
Unix/Linux进程管理 3.1 多任务处理 在计算机技术中，多任务处理指的是同时执行几个独立的任务。多任务处理是通过在不同任务之间多路复用CPU的执行时间来实现的，即将CPU执行操作从一个任务切换到另一个任务。不同任务之间的执行切换机制称为上下文切换，将一个任务的执行环境更改为另一个任务的执行 ......
第三章：多个坐标空间
第三章：多个坐标空间 本章提供一些用于图形和游戏的常用坐标空间示例，然后我们将讨论坐标空间如何嵌套在其他坐标空间中。 1. 为什么需要多个坐标空间 从理论上讲，所有点都可以使用单个“世界”坐标系来表达。但有些信息是有意义的或仅在特定上下文环境中可用（表述有点怪，但能理解意思就行），为此开发人员需要不 ......