命令 常用kafka
kafka消息的顺序性
传统队列的顺序性 传统队列在服务器上保存有序的记录，如果多个消费者消费队列中的数据， 服务器将按照存储顺序输出记录。虽然服务器按顺序输出记录，但是记录被异步传递给消费者， 因此记录可能会无序的到达不同的消费者。这意味着在并行消耗的情况下， 记录的顺序是丢失的。因此消息系统通常使用“唯一消费者”的概念 ......
kafka的主从同步
kafka的主从同步 Kafka允许topic的分区拥有若干副本，所以当一个节点down掉时数据依然是可用的 创建副本的单位是topic的分区，每个分区都有一个leader和零或多个followers，所有的读写操作都由leader处理 一般分区的数量都比broker的数量多的多，各分区的leade ......
mq和kafka的区别
Kafka和MQ（消息队列）是两个不同的消息传递系统，它们的区别主要表现在以下几个方面： 1. 数据处理方式：Kafka是一种流式数据处理平台，用于在高吞吐量条件下发送、存储和处理消息流。MQ则更侧重于异步消息传递，即将消息发送到队列中，由消费者按照一定规则进行消费。 2. 消息持久化：Kafka基 ......
基本Dos命令
#切换到D盘 D:#查看盘符目录下的所有文件 dir#进入D盘的IDE目录 cd /d D:\IDE#返回上一级目录 cd ..#清除屏幕 cls#退出终端 exit#查看电脑ip ipconfig#打开应用 calc mspaint notepad ……#ping命令 ping www.baidu ......
安装docker及docker常用的镜像命令
1、安装docker 启动docker 输入 sudo docker run hello-world测试是否成功 查看镜像：输入docker images 查看docker版本：docker --version 2、docker常用的镜像命令 （1）：列出所有运行的容器：docker ps （2）查 ......
kafka环境搭建（Windows10）
1.安装Java jdk 说明：kafka是使用zookeeper来进行集群部署，zookeerper运行环境依赖Java环境，因此需要安装Java jdk，并设置好系统环境变量。 1.1下载jdk 1.8 华为提供的下载服务：https://repo.huaweicloud.com/java/jd ......
3dmax编辑常用按钮添加
### 显示按钮，点击带笔的小图标  ### 修改按钮 
一. 精灵图（重点） 1.1 为什么需要精灵图 一个网页中往往会应用很多小的背景图像作为修饰，当网页中的图像过多时，服务器就会频繁地接收和发送请求图片，造成服务器请求压力过大，这将大大降低页面的加载速度。 为什么使用精灵图（目的）： ·为了有效地减少服务器接收和发送请求的次数，提高页面的加载速度，出 ......
Kafka副本机制
1 副本机制的定义：所谓副本机制（Replication），也可以称之为备份机制，通常是指分布式在多台网络互连的机器上保存有相同的数据拷贝。 2 副本机制的好处： 提供数据冗余。即使系统部分组件失效，系统依然能够继续运转，因而增加了整体可用性以及数据持久性。 提供高伸缩性。支持横向扩展，能够通过增加 ......
常用的webshell管理工具的流量特征 4
一、菜刀流量特征最开始是明文传输，后来采用base64加密： PHP类WebShell链接流量 如下： 第一：“eval”，eval函数用于执行传递的攻击payload，这是必不可少的； 第二：(base64_decode(P O S T [ z 0 ] ) ) ， ( b a s e 6 4 d ......
Kafka通信模型/流程
Kafka的Producer、Broker和Consumer之间采用的是一套自行设计的基于TCP层的协议 由于UDP协议是一种不可靠的传输协议，所以Kafka系统采用TCP协议作为服务间的通信协议 通信 通信模型 Reactor线程模型 Java NIO中的selector模型。最简单的Reacto ......
CAPL 发送接受诊断命令
发送诊断命令 ``` on key 'a'{ long Request_Size=0,Req_iter = 0; byte Req_Buffer[4095]; byte DiagReqBuffer[2] = {0x10,0x01}; diagRequest Door.DefaultSessionCo ......
git命令详解
```sh #首先进入到一个目录中。这个目录专门为gitlab使用。 cd /data/gitlab #登录git仓库 git config --global user.name "用户名" # 设置用户名 git config --global user.email "用户邮箱" #设置邮箱 gi ......
linux 中sed命令实现单词的精确匹配替换
001、 [root@PC1 test03]# ls a.txt [root@PC1 test03]# cat a.txt ## 测试数据 bookbookbookbook jjjj name=jack uuuuuuu 127.0.0.1 bookbook77 xxxxx.com eeebookbo ......
linux不记录历史命令
history命令是被保存在内存中的，当退出或者登录shell时，会自动保存或读取。在内存中，历史命令仅能够存储1000条历史命令，该数量是由环境变量 HISTSIZE进行控制。默认是不显示命令的执行时间，命令的执行时间，history 已经记录，只是没有显示。 ``` # 不记录命令 export ......
Go 字符串中的常用函数
1. 统计字符串的长度，按字节进行统计: `len(str)` 2. 字符串遍历，同时处理中文乱码的问题: `r := []rune(str)` 3. 字符串转整数: `n, err := strconv.Atoi("12")` 4. 整数转字符串: `str = strconv.ltoa(1234 ......
linux 中sed命令实现删除文件的任意列
001、删除文件的第一列 [root@PC1 test03]# ls a.txt [root@PC1 test03]# cat a.txt ## 测试数据 01 02 03 04 05 06 07 08 09 10 11 12 13 14 15 16 17 18 19 20 [root@PC1 te ......
使用SubWCRev命令将SVN版本号自动设置到vs软件版本中
### 背景 在软件开发过程中，每次对一个软件产品的release，都要处理该软件版本号。 有的版本号是人为定的，有些是自动生成的，本文介绍在使用SVN版本管理软件的情况下，利用SVN的SubWCRev命令来自动生成对应svn修改版本的版本号，这样便于快速找到对应二进制的编译时的SVN版本号。 ## ......
常用的表格检测识别方法-表格内容识别方法
表格识别的研究主要涉及两个方面，一方面是对单元格内的文本进行识别，这一步通常是在确定单元格区域后，利用较为稳定的光学字符识别方法（OCR）来实现，这一方面不是表格识别研究的重点，不在此展开；另一方面是基于整个表格内容进行的表格分类、单元格分类、以及表格信息抽取等任务，这是当前表格识别研究的热门领域之... ......
2-kafka日志和分区
1.topic中日志存储形式 分区内部有序，但是同一分区不同partion之间的消息的顺序是无法得知的； 2.分区有序概念 kafka是消息队列，数据在写入topic是按照轮循或者hash(key)%分区数方式将数据写入，分区中是无法保证分区与分区 数据的顺序，只能保证分区内部数据的顺序，但是无法得 ......
Linux变卡cpu占用高，已装curl、wget但提示命令找不到（挖矿病毒）
现象 服务器变卡，top cpu占用非常高，但是进程占用只有1% 下载安装htop查看 看样子中了挖矿病毒 解决方式 修改/etc/hosts 把dev.fugglesoft.me 指向127.0.0.1 F9 -> enter杀掉进程 又多出来一个执行sh的，修改病毒sh，vi进去随便加些字符，然 ......
一线技术团队管理的常用手段
团队管理的手段非常多，包括公司职责拆解的授权如职责划分、晋升提名、绩效评估等，也包括公司、部门职能体系的支持手段如优秀评选、培训机会等，也有作为团队负责人而拥有的表扬、批评等权利。 这些手段作用各不相同，也各有利弊，团队负责人需要清晰理解每种手段的优劣方能合理实施，对团队进行有效、正面的价值引导。 ......
Yarn的几个常用命令
Yarn是一个资源管理器和任务调度器，如果你的大数据集群是用的Yarn来管理的，那下面有几个比较常用的命令。 ## 查看任务列表 ```shell yarn application -list ``` 该命令是查看在所有Yarn上运行的任务信息，一般包括：Application-Id、Applica ......
Java用命令行给main方法传参
# Java用命令行给main方法传参 1.cd到当前程序的src路径下。 2.编译文件，我的文件是在com.test包下。 ```java javac com/test/Demo.java ``` 3.给main方法传值。 ```java java com/test/Demo.java 1 2 3 ......
蓝凌OA admin.do JNDI远程命令执行批量检测POC
漏洞描述 深圳市蓝凌软件股份有限公司数字OA(EKP)存在任意文件读取漏洞。攻击者可利用漏洞获取敏感信息，读取配置文件得到密钥后访问 admin.do 即可利用JNDI远程命令执行获取权限 FOFA app="Landray-OA系统" 漏洞过程 利用 蓝凌OA custom.jsp 任意文件读取漏 ......
gdb常用命令
1. gdb [GDB调试教程：1小时玩转Linux gdb命令] sudo dnf debuginfo-install glibc-2.32-2.fc33.x86_64 编译时, gcc -g test.c -o test，因为在调试二进制文件的时候，我们需要在二进制文件中加入调试信息，而调试信息 ......
Docker CLI docker exec 常用命令
Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中，然后发布到任何流行的 Linux或Windows操作系统的机器上，也可以实现虚拟化。Docker是内核虚拟化，不使用Hypervisor是不完全虚拟化，依赖内核的特性实现资源隔离。本文主要介绍Docke ......