20230818 memories内存chapter
国产的固态内存已经全面占领市场，那么使用国产的内存颗粒的内存条呢
随着国产固态硬盘的技术突破把整个市场的固态硬盘价格拉低了一倍，现在买固态就像当年买机械那种感觉，是十分的舒畅，五六百就可以买个2T的固态，1200左右就可以买一个4T的固态，简直是大快人心，但是在国产固态硬盘全面占领市场的同时我们的国产内存（使用国内内存颗粒的）呢？ 与国产固态硬盘相比国产内存却显着 ......
C++ /内存文件使用例程
/// c++ 内存文件使用例程class MemoryBuffer : public std::strstreambuf { public: using Base = std::basic_streambuf<char>; using char_type = typename Base::char ......
Kernel Memory 入门系列：生成并获取文档摘要
Kernel Memory 入门系列：生成并获取文档摘要 前面在RAG和文档预处理的流程中，我们得到一个解决方案，可以让用户直接获取最终的问题答案。 但是实际的业务场景中，仍然存在一些基础的场景，不需要我们获取文档的所有详情的，而只是了解的文档的大概信息，得到文章整体的摘要或者总结，此时仍然可以使用 ......
幽灵和熔断+LR/SC的实现和使用+Consistent和Coherent+memory 属性 Device-nGnRnE+IP-XACT+vcs token is "until"+vcs编译解决 module名重复的冲突问题+Webhook
幽灵和熔断 幽灵和熔断是基于瞬态指令流的缓存侧信道攻击。在瞬态指令流中被执行的内存加载指令如果将一个数据带入了缓存，则即使流水线回滚期间处理器丢弃了该指令返回的访存结果，已经被修改的缓存状态却无法撤销。由此，攻击者可以通过监测缓存的变化来推断受害者程序的访存地址，如果该地址本身包含敏感信息，就会引发 ......
C++（引用符号&、访问内存地址&）
在C++中，引用符号 & 和访问内存地址的 & 运算符有不同的用途和含义。 引用符号 &：创建引用 使用 & 符号可以创建引用，即给一个变量起一个别名。引用是一个别名，它与原变量共享相同的内存地址。 引用在声明时必须初始化，并且一旦初始化后，不能再引用其他变量。 int x = 10; int& r ......
docker 启动报错 library initialization failed - unable to allocate file descriptor table - out of memory
docker 启动报错 library initialization failed - unable to allocate file descriptor table - out of memory 1.报错日志 library initialization failed - unable to ......
内存问题定位方法 - 内存泄漏
前言 Linux 内存是嵌入式开发人员，需要深入了解的计算机资源。合理的使用内存，有助于提升机器的性能和稳定性。 Linux下内存问题可分为内存泄漏，踩内存，内存溢出，内存碎片，性能调优等。本文主要介绍工作中常用的几类内存问题的原因以及常见排查方法和工具，希望对大家有所帮助。 Linux下经常遇到内 ......
【转载】内存基本概念-node, zone ,page
1. Linux描述物理内存 在linux 内存管理(一)中介绍了UMA和NUMA，Linux通过巧妙办法把UMA和NUMA的差别隐藏了起来，所谓的UMA其实就是只有一个结点的NUMA。内存的每个结点关联到系统中的一个处理器内存控制器，每个服务器处理器可以有多个内存控制器，所以每个服务器处理器可以有 ......
【转载】内存基本概念-watermark&lowmem_reserve
概述 当系统内存短缺的情况下仍去申请内存，可能会触发系统对内存的回收，那什么时候应该进行回收，回收到什么标准又可以停止回收，参考依据是什么？即本文将介绍的watermark(内存水位线)，当检查watermark时又不单单是判断watermark，还会牵扯到lowmem_reserve[]，关于lo ......
【转载】内存基本概念-slab算法
Linux内存管理之slab 2：slab API https://blog.csdn.net/lqy971966/article/details/119801912 1. 为什么有了Buddy(伙伴系统)还需要slab? 1.1 什么是伙伴系统？ Linux内核中使用伙伴系统（buddy syst ......
【转载】内存基本概念-伙伴(Buddy)算法
简介 在Linux系统中，内存的分配与回收速率直接影响系统的存取效率。当内核频繁请求和释放不同大小的一组连续页框时，会导致许多外部空闲碎片，造成空间的浪费。使用伙伴算法可以有效地缓解该问题。伙伴关系机制是操作系统中的一种动态存储管理算法。在进行内存分配时，该算法通过不断平分较大的空闲内存块来获得 ......
7.内存管理基础+连续分配
程序执行基本原理 程序是一条一条被读入寄存器内执行的 内存卡是一个临时保存中介，磁盘是永久保存介质 地址总线的选中原理（译码器原理） 四大存储器的速度和所处位置 寄存器>Cache>内存卡>磁盘 概念辨析 CPU位数、OS位数、内存地址总线数、内存数据总线数、逻辑地址位数、物理地址位数、真实内存大小 ......
微服务广播模式实践：维护内存数据的缓存一致性
本文分享自华为云社区《微服务广播模式实践》，作者：张俭 。 微服务广播模式，指的是在微服务多实例部署的场景下，将消息广播到多个微服务实例的一种模式。 广播模式，一般用来维护微服务的内存数据，根据数据类型的不同，有助于解决两类问题。通常广播模式会使用支持发布订阅的消息中间件实现（如Redis、Kafk ......
Kernel Memory 入门系列：Kernel Memory Service
Kernel Memory 入门系列：Kernel Memory Service 在 Kernel Memory 的 GitHub 仓库中有一个单独的项目 Service , 用于提供独立的Kernel Memory OpenAPI 服务。可以用于独立的部署后台，也可以为其他语言提供接口调用服务。 ......
Redis内存问题的学习之一
Redis内存问题的学习之一 背景 前几天帮同事看redis的问题 发现info memory 显示 60GB 但是实际上 save出来的dump文件只有 800M 然后导入到其他的redis之后, info memory只有 2G左右的内存. 所以感觉比较奇怪. 认为 redis 的info me ......
内存溢出和内存泄露的区别
大家好，我是joker，希望你快乐。 内存溢出 内存溢出(Out Of Memory,简称OOM)是指应用系统中存在无法回收的内存或使用的内存过多，最终使得程序运行要用到的内存大于能提供的最大内存。 内存泄漏 内存泄漏（Memory Leak）是指程序中已动态分配的堆内存由于某种原因程序未释放或无法 ......
JVM内存参数的学习之三
JVM内存参数的学习之三 背景 研究启动性能时, 顺便看到了jmap -heap 1 的部分信息 看到: MinHeapFreeRatio、MaxHeapFreeRatio 自己突然以为是 Percentage的参数, 恍惚了好久. 才发现自己对内存的学习不够, 所以想多学习一下. 参数解释 Min ......
ThreadLocal的内存泄露？什么原因？如何避免？
前言 在分析ThreadLocal导致的内存泄露前，需要普及了解一下内存泄露、强引用与弱引用以及GC回收机制，这样才能更好的分析为什么ThreadLocal会导致内存泄露呢？更重要的是知道该如何避免这样情况发生，增强系统的健壮性。 内存泄露 内存泄露为程序在申请内存后，无法释放已申请的内存空间，一次 ......
c# 32位程序突破2G内存限制
起因在开发过程中，由于某些COM组件只能在32位程序下运行，程序不得不在X86平台下生成。而X86的32位程序默认内存大小被限制在2G。由于程序中可能存在大数量处理，期间对象若没有及时释放或则回收，内存占用达到了1.2G左右，就会引发异常“内存溢出”。环境：Visual Studio 2022 问题 ......
来领奖了，InfiniCloud网盘又能领取内存了
1 缘由 今天登录自己的邮箱，整理相关的邮件的时候，突然发现有来自于infiniCloud的邮件，阅读邮件竟然发现了一个惊喜，为庆祝Happy Holidays! ,用户就是能领取3GB的储存空间，有效期是一年的时间，对于免费用户来说这就很不错了。 # Happy Holidays! Click b ......
JVM内存模型
JVM内存模型 JDK7堆内存模型 内存模型说明： 1）Young（新生代） Young区被划分为三部分，Eden（ˈiːdn）区和两个大小严格相同的Survivor（sərˈvaɪvər）区，其中Survivor区间中，某一时刻只有其中一个是被使用的，另外一个留做垃圾收集时复制对象用，在Eden区 ......
Spring Boot —— Caffeine（内存缓存器）
项目中需要用一个替代concurrenthashmap 能够帮忙过期或者防止一直put oom所以使用 优点内存管理优化Caffeine 使用了一种基于堆外内存的存储模型，通过直接内存访问，避免了 Java 堆内存的垃圾回收开销。这种内存管理优化可以减少垃圾回收对应用性能的影响，提供更高的缓存读写性 ......
lazarus中json使用与内存释放问题
ZJson:TJSONObject; arrJson:TJSONArray; subjson:TJSONObject; ZJson:=TJSONObject(GetJSON('.....Json字符串....')); //后面json变量的都不能用创建，否则会无法释放内存 //以前用了arrJson ......
人们一般提到的安全性只涉及内存安全——但这还远远不够……而且与其他语言（包括 C++ 和 C）互操作的需求往往缺乏关注。
C++ 之父 Bjarne Stroustrup：我会为全球数十亿行 C++ 代码带来一个崭新的解决方案 https://mp.weixin.qq.com/s/L8xYyR88KdHsHqyz_sQ5Sg 作者 | David Cassel译者 | 王强策划 | Tina在 CppCon C++ 会 ......
Kernel Memory 入门系列：快速开始
Kernel Memory 入门：Quick Start 了解了用户问答和文档预处理的流程之后，我们就可以直接开始使用Kernel Memory了。 1. 安装 项目中只需要通过NuGet安装Microsoft.KernelMemory.Core包即可。 dotnet add package Mic ......
Java中内存四区
这里简要说明这四个区域通常用于存储的变量类型： 栈区（Stack）： 存放局部变量、方法参数、返回地址等。 变量的生命周期与其所在的方法（函数）的调用周期一致。 堆区（Heap）： 主要用于动态分配内存，存放由 new 关键字创建的对象和数组。 变量的生命周期不受方法调用的限制，需要手动释放内存。 ......
Python追踪内存占用
技术背景 当我们需要对python代码所占用的内存进行管理时，首先就需要有一个工具可以对当前的内存占用情况进行一个追踪。虽然在Top界面或者一些异步的工具中也能够看到实时的内存变化，还有一些工具可以统计代码中每一步的内存占用。但如果只是要查看单步操作之后的内存变化，tracemalloc的简单易用， ......
linux 内存碎片处理
Linux内存碎片化主要由于内存的分配和释放不均匀导致,会降低内存利用效率。可以通过以下方法对Linux内存进行碎片整理: 执行sync命令:该命令会强制将内存中的脏数据写回磁盘,释放内存。这可以腾出较大的连续内存块,减少碎片。执行echo 1 > /proc/sys/vm/drop_caches命 ......
Kernel Memory 入门系列：文档预处理
Kernel Memory 入门系列：文档预处理 Embedding为我们提供了问题理解和文档检索的方法，但是面对大量的文档，如果在用于提问的时候再进行文档的Embedding的话，那这个过程是非常耗时的，再加之我们的文档并不会频繁变化，所以我们可以对文档进行预处理，提升检索的效率。 文档的预处理大 ......