集群cluster linux redis
Redis相关
#### redis-pipeline机制 pipeline是Redis的一个提高吞吐量的机制，适用于多key读写场景，比如同时读取多个key的value，或者更新多个key的value。因为redis本身是基于Request/Response协议的，在正常情况下，客户端发送一个命令，等待Redis ......
Linux-安装包切割
### 安装包切割 在某些客户现场的场景中，因为我们是把安装包中镜像全部打包到本地带到客户现场进行上传，但因为客户本身的资源上传限制，无法一次性将10G、或者20G的安装包进行上传，同时也会因为安装包太大，并且客户上传限速导致超时无法上传。面对这样的问题需要我们将安装包中的镜像包进行切割，切割成客户 ......
HadoopYarn模式集群安装
## Hadoop集群安装步骤 ### 1. Hadoop集群安装 #### 1.1 环境说明 ``` 集群：三台Linux机器（SUSE）； JDK1.8（提前下载好对应的tar.gz） Hadoop2.7.2（提前下载好对应的tar.gz） 以下所有配置需要在每个主机上进行，但按照本文配置，可配 ......
Hadoop集群环境安装
### 1,集群环境准备 ``` 准备jdk 环境，本文用的版本是，java version "1.8.0_102" 为机器准备ssh 客户端和服务端，ubuntu 环境下默认安装了客户端，那么，请安装服务端， apt-get install openssh-server 可以的话尽量不要用root ......
Linux：ls指令
ls（List）：列出某个路径下的所有文件（多个参数可以一起使用） 1、用法 ls [-option] [--color={never,auto,always}] [--full-time] [-time={atime,ctime}] 路径 ls [-option] 路径1 路径2……：列出指定的几 ......
Windows + Linux 双系统详细安装步骤
对于新手来说，学习Linux系统有多种方式选择，可以选择虚拟机、可以选择直接安装Linux系统，下面主要和大家分享一下通过直接安装Linux系统的方法。 U盘启动盘的制作 准备一个 8G 以上的 U 盘(其实 4G 就足够)，备份资料，后面会对 U 盘进行格式化。 然后去 ubuntu 的官网下载你 ......
K8S集群中使用JD KMS服务对敏感数据安全加密
KMS，Key Management Service，即密钥管理服务，在K8S集群中，以驱动和插件的形式启用对Secret，Configmap进行加密。以保护敏感数据 ......
Redis 内存淘汰策略&&过期策略
学习：https://juejin.cn/post/7243987464297070647?searchId=202308240836335CB2B5EBDCD1879D6FB1 https://www.bilibili.com/video/BV1bo4y1E7TK/?spm_id_from=333 ......
linux服务器docker compose的使用步骤
之前说了docker的安装，docker compose的安装，还比较了dockerfile和docker compose的区别，那么docker compose的实际应用是怎么样呢？记录下我的实操步骤 1、服务器上新建目录，目录情况如下，我的data目录是挂载到数据盘的 /data/docker_ ......
Linux中PATH、 LIBRARY_PATH、 LD_LIBRARY_PATH的区别
Linux中PATH、 LIBRARY_PATH、 LD_LIBRARY_PATH的区别_YOULD YGL的博客-CSDN博客 PATH：放可执行命令所在路径；which xxx也可以看见xxx命令所在路径 LIBRARY_PATH：程序编译期间查找动态链接库时指定的查找共享库的路径 LD_LIB ......
小小讲一下Linux基本命令
小小讲一下Linux基本命令Linux是一套类Unix的操作系统，这套系统最大的优点就是安全便捷，快速高效。这就为它赢得了广大的市场空间。但是呢，Linux系统虽然广为流行，它也不是那么容易就可以学会的。比如说，如果我们不懂得Linux系统的基本操作命令和按键的话，那我们也是不能进行下去的。因此，我 ......
小小讲一下Linux基本命令
Linux是一套类Unix的操作系统，这套系统最大的优点就是安全便捷，快速高效。这就为它赢得了广大的市场空间。但是呢，Linux系统虽然广为流行，它也不是那么容易就可以学会的。比如说，如果我们不懂得Linux系统的基本操作命令和按键的话，那我们也是不能进行下去的。因此，我觉得有比较进行Linux系统 ......
Redis序列化协议：RESP
### RESP协议 读一下redis的序列化协议，顺便做点记录。 #### 简介 RESP协议即 REdis Serialization Protocol（Redis序列化协议）。 RESP协议在Redis 1.2中引入，在Redis 2.0中成为了与Redis服务器通信的标准方式。这是所有Red ......
linux系统设置ssh免密登录
# 1、服务器生成密钥 ``` ssh-keygen help //查看ssh-keygen命令相关具体的使用信息 ssh-keygen -t rsa //生成密钥 ``` 然后直接**三个回车**即可； 会在根目录下生成.ssh的文件夹； 易导致竞态。 二、原子操作 1. 原子操作简介 原子操作：不能再进一步分割的操作，一般用于变量或位操作。 例如在 C 语言中对 无符号整型变量 a 赋值： a = 3; 但 C 语 ......
Linux 查看端口是否被占用
场景说明 今天遇到一个同事问了一个问题：怎么查看系统某端口是否被占用，一下子把我问着了，作为一个不服输的人，下班后赶紧学习 环境说明 [hui@hadoop201 ~]$ cat /proc/version Linux version 3.10.0-1160.76.1.el7.x86_64 (moc ......
使用Linux系统的atop监控工具
#1、安装atop #1.1、centos安装 本步骤以Alibaba Cloud Linux 3.2104 LTS 64位操作系统的ECS实例为例，介绍如何安装atop监控工具。 1.远程连接ECS实例。 具体操作，请参见连接方式概述。 2.执行如下命令，安装atop。 `sudo yum ins ......
随笔（二十九）『docker 3主3从redis配置 』
### 1、拉取镜像 ``` docker pull redis:6.0.8 ``` ### 2、创建并启动容器 ``` docker run -d --name redis-node-1 --net host --privileged=true -v /mydata/redis/redis-nod ......
Linux运维工程师面试题（1）
[toc] # Linux运维工程师面试题（1） > 祝各位小伙伴们早日找到自己心仪的工作。 > 持续学习才不会被淘汰。 > 地球不爆炸，我们不放假。 > 机会总是留给有有准备的人的。 > 加油，打工人！ ## 1 别名、内部命令、外部命令的执行顺序 命令执行寻找顺序：别名 > 内部命令 > 外部命 ......
Django - 将session存储位置修改至redis
# settings.py 中加入该配后自动生效 SESSION_ENGINE = "django.contrib.sessions.backends.cache" ......
Linux命令速查
Linux 命令大全 | 菜鸟教程 (runoob.com) Linux 常用命令全拼 | 菜鸟教程 (runoob.com) filename、file1、file2都是文件名。有时文件名有后缀，比如file.zip command，命令名 dir，文件夹名 string，字符串 username ......
linux修改用户显示的问题
处理用户名显示： 如图： 如出现上图的情况，选择执行命令（echo $PS1），查看 正常的显示格式是： 所以需要修改此目录下的 .bash_profile文件 export PS1="[\u@\h \W]\$ " 增加一行此环境变量就ok了 配置完成之后，重新登录就解决用户名显示的问题 ......
linux中echo命令
[参考](https://zhuanlan.zhihu.com/p/577586185) echo 命令是日常 linux 任务中使用最广泛的命令之一。echo 命令是一个内置的命令行工具，它将文本或字符串打印到标准输出或将输出重定向到文件。该命令通常在 bash shell 或其他 shell 中 ......
【升职加薪秘籍】我在服务监控方面的实践(7)-业务维度的redis监控
>大家好,我是蓝胖子，关于性能分析的视频和文章我也大大小小出了有一二十篇了，算是已经有了一个系列，之前的代码已经上传到github.com/HobbyBear/performance-analyze，接下来这段时间我将在之前内容的基础上，结合自己在公司生产上构建监控系统的经验，详细的展示如何对线上服 ......
Linux调度数据相关的接口
前言 Linux中实现了不少接口来将调度相关的数据提供给用户；用户通过读取这些数据可对系统调度运行情况有更加客观的认知。这些接口有系统级别的，也有任务级别的；下面对其做一个简单的汇总。 一、系统级别 1.1 /proc/stat 条目 usr nice system idle iowait irq ......
mysql安装-linux
参考来源：https://www.cnblogs.com/werr370/p/14633785.html # 问题1：cat /var/log/mysqld.log 查看日志出现： Failed to initialize DD Storage Engine.Data Dictionary init ......
要搭建Redis集群高可用
一.部署 因为架构要求，只分配了两台服务器，要搭建Redis集群，为此针对两台服务器搭建了一套特殊的哨兵集群，特殊在不能无限切换， 只能抗住1-2次宕机或网络故障，1-2次故障之后，集群切换机制便不能使用，需要人工按后文的步骤修复； 1.前期准备 准备AB两台服务器部署Redis集群，选择A服务器作 ......
Linux 内核设备树时钟绑定
这种绑定依然处于开发中，并且基于 benh[1] 的一些实验性工作。 时钟信号源可以由设备树中的任何节点表示。这些节点被指定为时钟提供者。时钟消费者节点使用 `phandle` 和时钟指示符对将时钟提供者输出连接到时钟输入。与 gpio 指示符类似，时钟指示符是 0 个、1 个或多个标识设备上的时钟 ......
linux open函数
[参考](https://blog.csdn.net/renlonggg/article/details/80701949) ## 一、open函数用来干什么 open函数在Linux下一般用来打开或者创建一个文件，我们可以根据参数来定制我们需要的文件的属性和用户权限等各种参数。 ## 二、open ......