奥秘 缓存 磁盘 内存
缓存穿透方案之布隆过滤器
作用：快速过滤掉不存在数据 一种数据结构，特点是高效插入和查询，但是返回的结果是概率性的，不是确切的。 使用场景：1.缓存穿透解决方案2.网络爬虫重复下载url解决方案3.HBase客户端查找列族文件数据问题解决方案。 ......
常见堆内存溢出OOM的几种情况
一。常见堆内存溢出的几种情况： 1.查询数据库返回的数据量过大，加载到内存中导致内存溢出； 2.代码中出现死循环情况，导致大对象一直被引用不能被GC回收； 3.资源链接池、io流在使用完没有进行手动释放； 4.静态集合类里面存在引用对象，始终存在引用关系，没有进行清除； 以上属于常见的几种堆内存溢出 ......
Windows 磁盘映像占用大问题释放空间
注：如没有备份，请先进行备份数据 1、查找磁盘映像文件 2、在选项中取消勾选隐藏受保护的操作系统文件 （可以看到 System Volume Information 已显示） 3、给administrator用户超级管理员权限 （cmd管理员运行模式下输入：net user administrato ......
3.5 Windows驱动开发：应用层与内核层内存映射
在上一篇博文`《内核通过PEB得到进程参数》`中我们通过使用`KeStackAttachProcess`附加进程的方式得到了该进程的PEB结构信息，本篇文章同样需要使用进程附加功能，但这次我们将实现一个更加有趣的功能，在某些情况下应用层与内核层需要共享一片内存区域通过这片区域可打通内核与应用层的隔离... ......
3.3 Windows驱动开发：内核MDL读写进程内存
MDL内存读写是一种通过创建MDL结构体来实现跨进程内存读写的方式。在Windows操作系统中，每个进程都有自己独立的虚拟地址空间，不同进程之间的内存空间是隔离的。因此，要在一个进程中读取或写入另一个进程的内存数据，需要先将目标进程的物理内存映射到当前进程的虚拟地址空间中，然后才能进行内存读写操作。 ......
缓存击穿 redis
缓存穿透 1、缓存穿透是指查询一个缓存中和数据库中都不存在的数据，导致每次查询这条数据都会透过缓存，直接查库，最后返回空。 解决缓存穿透的方法一般有两种，第一种是缓存空对象，第二种是使用布隆过滤器。 缓存击穿 2、缓存击穿是指当缓存中某个热点数据过期了，在该热点数据重新载入缓存之前，有大量的查询请求 ......
线上java程序CPU及内存占用过高问题排查总结
背景 最近发现线上的一个JAVA程序总是过段时间慢慢卡死，最后导致无法提供服务，外部请求接口超时。 经排查发现，该程序CPU及内存占用都很高，导致整个系统负载很高。 到这里，就想到了对程序内存进行分析。 排查过程 查询负载高的进程 使用top命令查询负载高的进程，获取负载高的进程id 由此，可见，该 ......
Linux服务器修改java项目内存大小
找到启动脚本： 找到你的 Java 项目的启动脚本，这通常是一个 .sh（Shell 脚本）文件。 编辑脚本： 使用文本编辑器（比如 vim 或 nano）打开脚本文件。 设置 Java 参数： 在脚本文件中找到启动 Java 的命令行，并添加或修改相关的 JVM 参数，如下所示： bash # 在 ......
记两次内存取证
一、flag藏在了某个文件中 获取镜像信息： volatility -f [镜像路径] imageinfo 可以确定Profile为Win7SP1x64 进行文件扫描： 由于flag藏在某个文件中，于是我们进行filescan，并利用grep命令找到关于flag的文件 volatility -f [ ......
使用Spring Cache高效处理缓存数据
在下一次调用相同的方法时，如果缓存中存在对应的数据，则直接从缓存中读取，不再执行方法。Spring Cache支持多种缓存技术，包括内存缓存、Redis、Ehcache等，开发人员可以根据具体的需求选择合适的缓存实现。具体而言，我们介绍了Spring Cache的基本概念和使用方法，包括添加依赖、配... ......
zabbix运维告警处理-磁盘读写
1、 https://zhuanlan.zhihu.com/p/617685164?utm_id=0 服务器相关 告警：Disk read/write request responses are too high vda: Disk read/write request responses are ......
MySQL - MySQL 占用内存涨得特别快？可能原因？解决方案
https://www.processon.com/mindmap/655307fe6a2ff722ead8d9e4 ......
k8s中是如何计算pod的计算资源（cpu和内存）的requests和limits值的？
1、结论 对于pod来说，cpu和内存的requests和limits的值，等于pod中所有容器的requests和limits的值的总和。 具体来说： pod的requests的大小，等于所有的容器的requests的大小的和，如果某个容器没有设置requests，则这个值是0. pod的limi ......
npm 的 .npmrc 文件在哪里？缓存及全局包文件在什么位置？
npm的配置文件,及其路径问题 如何快捷修改.npmrc配置文件？ .npmrc文件，就是npm的配置文件所在位置。 当然，寻找这个文件的目的，多数是为了修改.npmrc文件内容。 但npm提供了方便快捷的修改方式，不知道这个文件的位置，其实也是可以修改的。 .npmrc配置文件在哪里？ 如果你还是 ......
磁盘的访问问题
1、例题一 某磁盘有100个磁道，磁头从一个磁道移至另一个磁道需要6ms。文件在磁盘上非连续存放，逻辑上相邻数据块的平均距离为10个磁道，每块的旋转延迟时间及传输时间分别为100ms和20ms，则读取一个100块的文件需要（ ）ms。 相关公式：读取时间=（寻道时间+旋转延迟时间+传输时间）*文件数 ......
查看dd刻录磁盘状态
在我们通常使用dd命令克隆磁盘的时候，终端是没有回显的，看着很别扭，有很多其他的方法观察dd命令使用的情况，这里选择使用watch 加入先使用dd进行磁盘克隆 sudo dd if=kali-linux-2023.3-installer-amd64.iso of=/dev/sda1 然后另外打开一个 ......
使用tracemalloc对python内存进行分析
1.通过两次快照对 import tracemalloc # 这个是python自带的 def on_start(): ''' 需要测试的代码 ''' pass tracemalloc.start() snapshot1 = tracemalloc.take_snapshot() on_start( ......
第2章 Cache和内存
第2章则系统地介绍内存和cache的相关基本知识，分析了各种IA平台上的cache技术的特点和优势，并介绍了一个DPDK的重要技术“大页”的使用。 2.1 存储系统简介 一般而言，存储系统不仅仅指用于存储数据的磁盘、磁带和光盘存储器等，还包括内存和CPU内部的Cache。当处理完毕之后，系统还要提供 ......
Linux服务器不自动杀死超内存Python程序导致服务器卡死掉线
状态：Python处理大数据时，内存占用超过服务器可用内存，但是服务器并没有杀死该进程，而是被卡死无法通过ssh进入 解决方向： 一、设置系统内存限制： 使用 ulimit -a 查看系统参数 ulimit -a 命令的结果中会显示各种资源的限制参数。以下是一些常见参数及其含义： core file ......
稀疏数组如何帮助我们节省内存，提升性能
本文由葡萄城技术团队发布。转载请注明出处：葡萄城官网，葡萄城为开发者提供专业的开发工具、解决方案和服务，赋能开发者。 什么是稀疏矩阵 稀疏矩阵是指矩阵中大部分元素为零的矩阵。在实际应用中，很多矩阵都是稀疏的，比如网络图、文本数据等。由于矩阵中存在大量的零元素，因此稀疏矩阵的存储和计算都具有一定的特殊 ......
.Net Core Redis缓存接口以及实现
群里的老表说用 StackExchange.Redis 遇到超时问题 Timeout performing GET my_141 (5000ms), inst: 30, qu: 0, qs: 20, in: 20320, serverEndpoint: 172.16.3.119:6379, mgr: ......
适当的文件分块和流式处理可以帮助管理和处理大文件，从而降低内存的需求。
适当的文件分块和流式处理可以帮助管理和处理大文件，从而降低内存的需求。 适当的文件分块和流式处理可以帮助管理和处理大文件，从而降低内存的需求。 适当的文件分块和流式处理可以帮助管理和处理大文件，从而降低内存的需求。 ......
Welcome to YARP - 5.压缩、缓存
目录 Welcome to YARP - 1.认识YARP并搭建反向代理服务 Welcome to YARP - 2.配置功能 2.1 - 配置文件（Configuration Files） 2.2 - 配置提供者（Configuration Providers） 2.3 - 配置过滤器（Confi ......
打开 Chrome 的 「内存节省程序」开关
不知道从什么时候开始，应该是最近1个月，感觉 Mac 浏览器总是占用很高的 CPU，多开一些标签页，或者浏览器窗口，相互切换时系统就会变得无响应，从 Chrome 浏览器里找到一个「内存节省程序」的配置，不知道有没有，先把开关打开看看。 ......
excel对比两个文档，判断范围内的取值是否在另一个列表内存在（vlookup函数的使用）
背景： sheet1表为原始数据： sheet2表为新的数据副本， 目标是查询sheet2列表中是否存在sheet1表的数据，并且标记出来，且获取sheet2列表的一些数据至sheet1列表中，补充D与E两列的数据情况： 一、vlookup函数介绍： 作用：垂直查找（按列号查找） 函数说明：vloo ......
C++ 内存分区
C / C++ 内存管理 C / C++内存分布 转载https://www.coonote.com/note/cpp-memory-management.html C/C++程序内存分配的几个区域： 栈区（stack） 在执行函数时，函数内局部变量的存储单元都可以在栈上创建，函数执行结束时这些存储 ......
68.Oracle的内存参数设置
如果服务器是100G内存，那么Oracle的内存参数可以按照如下进行配置: alter system set sga_max_size=40000M scope=spfile; alter system set streams_pool_size=1200M scope=spfile; alter ......
net core自带的缓存机制
.NET Core的缓存机制主要有以下几种： 1. 内存缓存（In-Memory Cache）：这是最简单的缓存形式，它将缓存数据存储在应用程序的内存中。这种缓存方式非常快速，但是如果应用程序重启或者服务器发生故障，缓存数据将会丢失。 2. 分布式缓存（Distributed Cache）：这种缓存 ......
JVM系列-第7章-对象的实例化内存布局与访问定位-cnblog
title: JVM系列-第7章-对象的实例化内存布局与访问定位 tags: - JVM - 虚拟机 categories: - JVM - 1.内存与垃圾回收篇 keywords: JVM，虚拟机。 description: JVM系列-第7章-对象的实例化内存布局与访问定位。 cover: 'h ......
分类累加的内存数组结果
问题：分类累加的内存数组结果 下拉公式 =SUMIF(A$2:A2,A2,B$2) 内存数组 =SUMIF(OFFSET(A2,,,ROW(1:5)),A2:A6,B$2) Offset组建多维引用，每个区域分别为A2、A2:A3、A2:A4、A2:A5、A2:A6，以此作为Sumif的第一参数条件 ......