分布式 资源管理 资源
装备故障预测与健康管理(PHM)技术---初探
PHM技术的研究是笔者硕士的研究方向，下面将简单介绍一下PHM技术的概念、PHM系统组成、发展历史和设涉及的关键技术。 1. 概念 PHM，其英文名称为Prognostics and Health Management，PHM技术旨为设备状态的实时监控和健康预测提供解决方案。PHM技术是一种基于数据 ......
分布式系统——分布式ID方案
分布式ID介绍 在分布式系统中，我们经常需要生成全局唯一的标识符，例如订单号，用户id，消息id等。这些标识符通常被称为分布式id。分布式id有以下几个常见的要求： 全局唯一：不同的节点或服务不能生成重复的id。 高性能：生成id的速度要快，不能成为系统的瓶颈。 低延迟：生成id的过程要尽可能简单， ......
分布式系统——并发条件下如何保证缓存与DB数据一致性
什么是数据一致性 我们常说的数据一致性指的是在程序运行过程中本地缓存、分布式缓存、数据库三者之间的数据一致性 常见的本地缓存有 hashmap、currenthashmap、guava cache、caffeine 分布式缓存常见的有 redis、memcache 常见数据不一致常见有： 本地缓存与 ......
🎊这个 OpenTiny 开源项目的 CLI 可太牛了，两行命令创建一个美观大气的 Vue Admin 后台管理系统，有手就会，连我的设计师朋友都学会啦啦
近期尝试了下 OpenTiny 的 CLI 工具，不得不说，简单到“有手就会”，只要执行两行命令就创建了一个美观大气的 Vue Admin 后台管理系统，连我的设计师朋友都学会啦啦。 ......
多维随机变量及其分布
《二维随机变量》 注意 在分布函数中 P{X<=x 且 Y<=y} 而且有性质： 这个性质在求概率密度的未知数时有用 这个公式结合一下二维前缀和算法就能很好明白了 《二维离散型随机变量》 注意一下分布律的求法，其中的概率记住：X与Y是 且 《二维连续型随机变量》 具体练习看书P65 《高数知识》 到 ......
项目讲解之火爆全网的开源后台管理系统RuoYi
博主是在2018年中就接触了 RuoYi 项目 这个项目，对于当时国内的开源后台管理系统来说，RuoYi 算是一个完成度较高，易读易懂、界面简洁美观的前后端不分离项目。 对于当时刚入行还在写 jsp 模板的博主来说，RuoYi 项目在后台基础功能、模块划分、易用性和页面美观度上，对比同期用 Java ......
nginxWebUI--一款更好的管理nginx的软件
背景 博主之前搭建了一套k8s系统用来管理开发中常用的软件，以及项目的快速部署。但是在使用的过程中有个麻烦的问题是在于，k8s暴露出来的服务的端口号是限定范围内随机的。所以在我们访问部分服务的时候需要不得已的带上一些端口号，这样有点太麻烦了。能不能简单一点，正好我手上有个域名，这样我用nginx+二 ......
2、kubernetes资源管理
四、资源管理介绍 k8s本质上是一个集群系统，用户可以在集群中部署各种服务，部署服务（其实就是在k8s集群中运行一个个容器，并将指定的程序跑在容器中） k8s的最小管理单元是pod不是容器，所以只能将容器放在pod中，而k8s一般不会直接管理pod，而是通过pod控制器来管理的pod的 pod可以提 ......
Hive 如何巧用分布函数percent_rank()剔除极值求均值
场景描述 前期写过一篇关于剔除订单极值求订单均值的案例，之前使用的是 dense_rank 函数对订单金额进行排序后，过滤掉最大值最小值后进行处理，最近工作刚好使用到分布函数percent_rank，想起来应该也可以用到这个场景； percent_rank() 简介 percent_rank() 函 ......
基于智能文字场景个人财务管理创新应用
：贾湛秋 郭子锴 蛋仔派对冲冲冲 ：https://www.bilibili.com/video/BV1QL411S7f1/?spm_id_from=333.999.0.0&vd_source=dc47d240283b447afd0e42584f15f0c6 ： ......
分布式系统——基于Redis的分布式锁的实现
分布式锁的介绍 分布式锁是分布式系统中用于协调多个进程或线程之间并发访问共享资源的一种机制。在分布式系统中，由于各个节点之间的通信存在延迟、故障等问题，可能会导致数据的不一致性。为了保证数据的一致性，需要使用分布式锁来协调各个节点的并发访问。 在分布式系统中，多个节点同时访问共享资源可能会导致以下问 ......
第二篇：go包管理
第二篇：go包管理 一、包管理 1 包 即模块，组织go源代码，提供了更好的可重用性和可用性。 每个文件中第一行是package packagename，代表指定了该文件属于那个包。 go语言中，同一层级的文件属于一个包，比如第一层级package main，如果新定义一个demo文件夹，在其中的文 ......
大数据经典论文解读 - 分布式锁 Chubby
Chubby 在谷歌“三驾马车”中3个系统都是单Master系统，这个Master是系统的单点，一旦Master故障集群就无法提供服务。使用Backup Master，通过监控机制进行切换。但是： 如何实现Backup Master和Master完全同步？ 监控程序也是单点，如何确定是Master宕 ......
【深入浅出 Yarn 架构与实现】6-2 NodeManager 状态机管理
NodeManager（NM）中的状态机分为三类：Application、Container 和 LocalizedResource，它们均直接或者间接参与维护一个应用程序的生命周期。 ......
k8s 资源限制层级
对pod和container的资源设置数值限制，如果值不符合下面设置则启动报错 apiVersion: v1 kind: LimitRange metadata: name: limitrange-magedu namespace: magedu spec: limits: - type: Cont ......
COMP30023进程管理
COMP30023: Computer SystemsProject 1: Process ManagementReleased: March 24, 2023 AEDTDue: 9am April 17, 2023 AESTWeight: 15%1 OverviewIn this project, ......
C语言酒水批发管理系统[2023-04-03]
C语言酒水批发管理系统[2023-04-03] 编写一个C语言程序，实现一个酒水批发管理系统，至少能够管理30条进货/批发销售记录。其中: 管理系统所管理物品仅包括各种不同品牌的酒水类货物 货物信息主要包括: 货物名称、货物编号、货物库存数、货物属性 (不同包装、是否促销)等; 进货记录主要包括: ......
内存管理：判断对象是否存活
在堆里面存放着 Java 世界中几乎所有的对象实例，垃圾收集器在对 Java 堆进行回收前，第一件事情就是要确定这些对象之中哪些还“存活”着，哪些已经“死去”（“死去”即不可能再被任何途径使用的对象）。
有两种判断对象是否存活的算法：引用计数算法、可达性分析算法。 ......
Redis添加分布式锁
1.不是高并发的场景 stringRedisTemplate.opsForValue.setIfAbsent("zql","人在代码在",10,TimeUnit.SECONDS);//只加过期限制 2.高并发的场景 如果加锁的过期时间小于业务执行时间，那么需要给每个线程的锁加这个线程的唯一标识，让每 ......
Jmeter的http信息头管理器设置
什么是信息头：请求头 什么时候用？cookie token或者是其他的信息的时候； 我们的场景设计？反爬虫添加信息头--模拟浏览器去发送请求--user-agent ......
让应用交付和管理统一：KubeVela 亮点功能及核心技术回顾
自 2020 年 OAM（Open Application Model） 开放应用模型发布以来，KubeVela 经历了数十个版本的更新和演变，朝着现代化应用交付的高级功能不断发展。今天，我们将回顾 KubeVela 项目发展至今的亮点功能和核心技术。 ......
ceph分布式存储搭建
CEPH分布式存储搭建 本文通过参考臧 雪 园 老师的文档根据实际操作做修改，详细视频链接参考： https://edu.51cto.com/course/15982.html 集群配置信息： 安装的ceph版本： 配置所需源的地址 wget -O /etc/yum.repos.d/CentOS-B ......
Fiddler 替换资源
资料 https://www.bilibili.com/video/av205290948/?p=5&vd_source=046ea4f5c29b8099c725f82685b9c821 https://www.cnblogs.com/fenglovellx/p/8137551.html https ......
《Linux基础》04. 用户管理 · 用户组 · 相关文件 · 权限管理
(用户管理) 本文以 CentOS7.6 为例 1：用户管理指令 Linux 系统是一个多用户多任务的操作系统。任何一个要使用系统资源的用户，都必须首先向系统管理员申请一个账号，然后以这个账号的身份进入系统。 1.1：添加用户 基本语法： useradd 用户名 默认一个用户的家目录在 ==/hom ......
redis使用setnx+lua实现分布式锁
在Redis中，使用SETEX命令（对应RedisTemplate的setIfAbsent方法）可以实现一个最简易的分布锁。SETEX命令当key不存在的话，才会设置key的值，如果可以已经存在，就不做任何操作。 为了避免锁无法被释放，就给这个key（也就是锁）设置一个过期时间。 为了保证解锁操作的 ......
GPT-4杀进网络安全，攻击面管理今后该怎么做？
从GPT-4的正式发布到现在还不到半个月，科技圈热闹得像过年一样，尤其是OpenAI的金主微软爸爸，感觉它三天两头地在做产品升级发布会——Office全家桶、Copilot X、Bing、Edge…… 一连串融合了AI技术的产品组合拳打得让人应接不暇，频频在行业内掀起浪潮。 这不，凌晨微软又宣布将A ......