集群cluster linux redis
Linux常用耗资源命令汇总
在Linux中，以下命令可能在处理大量数据或复杂操作时比较消耗资源。一般来说，涉及大量数据处理、计算或者I/O操作的命令会比较耗费系统资源。 **注意：所有命令资源消耗都是相对的，基于文件的处理量来展现** 1. find 命令通常会比较消耗资源，因为它需要遍历整个文件系统来查找文件或目录。使用 ......
[转]linux sodu使用相关问题
1.提示 is not in the sudoers file. This incident will be reported. 解决方法就是在/etc/sudoers文件里给该用户添加权限。如下： 1.切换到root用户下 2./etc/sudoers文件默认是只读的，对root来说也是，因此需先 ......
大数据管理框架CDP集群搭建
# 1 搭建准备 | HostName | IP | 内存 | CPU | 磁盘 | | | | | | | | cdp01 | 172.29.0.110 | 16G | 4核 | 100G | | cdp02 | 172.29.0.111 | 16G | 4核 | 100G | | cdp03 | ......
linux sbatch 提交jupyter
点击查看代码 ``` #!/bin/bash #SBATCH -p Batch2 #SBATCH -N 1 #SBATCH -n 1 #SBATCH -c 1 #SBATCH --job-name=jupyter #SBATCH --output=jupy.out #SBATCH --error=j ......
导入mysql 乱码问题及 Linux 中的文件格式转换
问题 下载了一个单词sql文件，导入mysql报错，查看文件类型: % file english_word.sql english_word.sql: Non-ISO extended-ASCII text 与另一个导入成功的文件对比，发现格式不一样： % file english-root.sql ......
定期清理日志脚本（Linux or Mac）
* 一个项目的运行必然会产生大量的日志，经过时间的日积月累这些日志难免会对硬盘造成负载，下面用ssh脚本编写一个定期清理日志的脚本 ```python # 使用vi 或者 vim vi clean_logs.sh # 给脚本赋予权限 chmod +x clean_logs.sh # 编写清理日志的命 ......
如何用手机使用 Termux 安装 Kali Linux
termux是手机上的一款终端模拟器，可以在手机无root的情况下在手机中安装多款linux，目前网上的主流主要有两种方法，将分别讲解，这里使用kali系统为例。 Termux 下载地址：https://f-droid.org/packages/com.termux/ 1. 在termux里运行`t ......
Linux中使用Cmake编译工程
Linux中使用Cmake编译工程： 1. 创建工程目录 在/home下面创建了一个工程文件夹，在文件夹中创建三个目录 images、out、src 分别用来存放 需要处理和保存的图像，编译输出的可执行文件， 工程源码。 进入src目录中，创建两个目录 include、source，和CMakeLi ......
Linux——vim编辑器的基础操作
vim是linux操作系统中非常常用的文本编辑器，在学习的过程中几乎不可避免的要使用，本文记录了vim中常用的命令…… ......
限制IP对接口的调用频率_基于Redis实现
pom.xml引入依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> </dependency> 逻辑代码 privat ......
Linux 6.6+ Oracle RAC 12c搭建详解
1． Red Hat Enterprise Linux Server release 6.6 x86_64 两台 2． Oracle 12.1.0.1 3． ASM存储方式 4． 软件下载：http://www.oracle.com/technetwork/database/enterprise-e ......
linux 中sed命令中-D选项
001、-D选项用于限定只删除模式空间中的第一行 [root@PC1 test01]# ls data.txt [root@PC1 test01]# cat data.txt ## 测试数据 Header Line First Data Line End of Data Lines ## N选项将匹 ......
linux ss
一 ss 是什么 ss 全称是Socket Statistics，用于显示各种socket的信息，ss命令功能和netstat类似，ss的优势在于它显示更多更详细的有关TCP和连接状态的信息，而且比netstat更快速更高效。ss 命令可以提供如下信息： 所有的TCP sockets所有的UDP s ......
linux 中 sed命令中-n和-N选项
001、-n（next），处理匹配行的下一行 [root@PC1 test01]# ls a.txt [root@PC1 test01]# cat a.txt ## 测试数据 01 02 03 04 05 06 07 08 09 10 11 12 13 14 15 [root@PC1 test01] ......
Redis 基础
## 1. Redis入门 ### 1.1 Redis简介 Redis是一个基于**内存**的key-value结构数据库。Redis 是互联网技术领域使用最为广泛的**存储中间件**。 **官网：**https://redis.io **中文网：**https://www.redis.net.cn ......
linux命令随笔
指令 --help，指令帮助，查看指令跟随的详情 查看防火墙开放端口号： firewall-cmd --list-port 开放端口号： firewall-cmd --zone=public --add-port=80/tcp --permanent 防火墙重载： firewall-cmd --re ......
redis - 认识 nosql 认识 redis 基础 linux安装 redis
sql和nosql的区别 1. 结构化 非结构化 2. 关联的 非关联的 3. sql查询 非 sql 4. 存储方式 磁盘 内存 5、扩展性 垂直 水平 6. 使用场景： 数据结构固定，相关业务对数据安全性，一致性要求较高 数据结构不固定，对安全性，一致性要求不高，对性能要求较高 nosql ：结 ......
【技术积累】Linux中的命令行【理论篇】【二】
博客推行版本更新，成果积累制度，已经写过的博客还会再次更新，不断地琢磨，高质量高数量都是要追求的，工匠精神是学习必不可少的精神。因此，大家有何建议欢迎在评论区踊跃发言，你们的支持是我最大的动力，你们敢投，我就敢肝 ......
windows安装redis
前言 Remote Dictionary Server(Redis) 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存、分布式、可选持久性的键值对(Key-Value)存储数据库，并提供多种语言的 API，是跨平台的非关系型数据库。Redis 通常被称为数据结构服务 ......
Java面试题 P25：Redis篇：redis是单线程的，但是为什么还那么快？
一、Redis是单线程的，但是为什么还那么快 1、Redis是纯内存操作，执行速度非常快 2、采用单线程，避免不必要的上下文切换可竞争条件，多线程还要考虑线程安全问题，加入并发锁，影响性能 3、使用I/O多路复用模型，非阻塞IO 二、你能解释一下I/O多路复用模型？ ......
Java面试题 P24：Redis篇：redis集群有哪些方案？
在Redis中提供的集群方案总共有三种： （1）主从模式 （2）哨兵模式 （3）分片集群 redis主从数据同步的流程时什么？ ......
Java面试题 P23：Redis篇：redis分布式锁，是如何实现的？
单台服务器：加synchronlzed解决方案。 （1）采用Watch dag 给锁续期 （2）抢不到锁的线程会尝试等待 （3）所有的redis命令采用lua脚本，保证执行的原子性 ......
Java面试题 P20：Redis篇：Redis做为缓存，数据的持久化是怎么做的？
Redis做为缓存，数据的持久化是怎么做的？ 在Redis中提供了两种数据持久化的方式：1、RDB 2、AOF ......
Java面试题 P19：Redis篇：Redis做为缓存，mysql的数据如何与redis进行同步呢（双写一致）
双写一致性：当修改了数据库的数据也要同时更新缓存的数据，缓存和数据库的数据要保持一致。 共享锁：读锁代码 排他锁，写数据。读锁和写锁的值要一致。 MQ异步消息通知： ......
Redis中的过期策略
# redis过期策略 **定时过期、惰性过期、定期过期** 问题：使用expire key 60，在key60s之后key就会过期，之后如何清除key ## 定时过期 每个设置过期时间的key都创建一个定时器，到时间就会对key进行清除。该策略可以立即清除过期key，对内存友好，但是需要消耗大量的 ......
redis主从复制
## 1. 概念 指将一台Redis服务器的数据，复制到其它的Redis服务器。前者称为**主节点**(master)，后者称为**从节点**(slave)；数据的复制是**单向**的，只能由主节点到从节点。 ## 2. 配置步骤 1、在/etc/redis下面，将6379.conf拷贝两份，分别称 ......
Hadoop集群相关理解
# Hadoop集群简介  # Hadoop集群模式安装 # 安装包获得 ## Hadoop安装包、源码包下载地址： ......
linux 进程管理
在Linux操作系统中，进程也是一个基本的概念，它是程序的执行实例。当我们在Linux上运行一个程序时，操作系统会创建一个进程来执行该程序的指令。每个进程都是独立的执行单元，拥有自己的内存空间、执行状态和系统资源。 Linux中进程的特点包括： 1. 独立性：每个进程是独立的，它们之间相互隔离，不会 ......