特征 内存sunday 6.2
embeddedkafka 方便测试的基于内存的kafka 实现
embeddedkafka 方便测试的基于内存的kafka 实现，可以用来方便的进行基于kafka 周边的测试目前embeddedkafka提供了stream，core，conenct 以及schema-registry，对于测试场景是一个不错的选择 参考资料 https://github.com/ ......
19_系统内存管理
系统内存管理 内存管理与程序好坏? 对于安全要求高的应用,尽可能不使用动态内存分配。 malloc()和free() 当RTOS内核需要RAM时,调用pvPortMalloc()函数来代替malloc()函数。当RAM要被释放时,调用vPortFree()函数来代替free()函数。 freeRTO ......
面向对象编程特征？
面向对象编程（Object-Oriented Programming，OOP）的特征包括以下几个方面： 封装（Encapsulation）： 封装是将对象的状态（属性）和行为（方法）捆绑在一起，并对外部隐藏对象的内部细节。 通过访问修饰符（如public、private、protected等）来限制 ......
5.1 内存CRC32完整性检测
CRC校验技术是用于检测数据传输或存储过程中是否出现了错误的一种方法，校验算法可以通过计算应用与数据的循环冗余校验（CRC）检验值来检测任何数据损坏。通过运用本校验技术我们可以实现对特定内存区域以及磁盘文件进行完整性检测，并以此来判定特定程序内存是否发生了变化，如果发生变化则拒绝执行，通过此种方法来... ......
机器学习算法原理实现——lightgbm，核心leaf-wise生长结合数据和特征并行+直方图算法+单边梯度抽样+互斥特征捆绑
算法亮点： 1、leaf-wise生长策略+特征并行和数据并行 让我们通过一个简单的例子来详细解释 LightGBM 的 Leaf-wise 生长策略。假设我们有以下的数据集：| 年龄 | 收入 | 购买 || | | || 20 | 3000 | 0 || 25 | 3500 | 0 || 30 ......
特征点检测
斑点检测——LoG（Laplace of Gaussian） 原理 LoG对指定宽度斑点进行卷积时，参数中，取不同的σ响应幅值会不同，取响应幅值最大时候的σ用于检测该宽度的斑点。如下图（已经做了尺度归一化）。 一维形式如下： 二维形式如下： σ取不同的值，在一副图片中检测到的斑点尺寸也不同 响应幅值 ......
内存泄漏和内存溢出
内存溢出 out of memory，是指程序在申请内存时，没有足够的内存空间供其使用，出现out of memory；比如申请了一个integer,但给它存了long才能存下的数，那就是内存溢出。 内存溢出就是你要求分配的内存超出了系统能给你的，系统不能满足需求，于是产生溢出。 内存泄漏是指你向系 ......
从内核世界透视 mmap 内存映射的本质（原理篇）
本文基于内核 5.4 版本源码讨论 之前有不少读者给笔者留言，希望笔者写一篇文章介绍下 mmap 内存映射相关的知识体系，之所以迟迟没有动笔，是因为 mmap 这个系统调用看上去简单，实际上并不简单，可以说是非常复杂的一个系统调用。 如果想要给大家把 mmap 背后的技术本质，正确地，清晰地还原出来 ......
C/C++中结构体占用内存大小的计算方法
两个值： 对齐系数：一般为8个字节。#pragma pack(8)设置对齐系数为8。 有效对齐值：假设结构体中最长的类型的长度为len，则有效对齐值=min(len,对齐系数)。 计算规则： 计算存放的位置：第一个成员放在位置0，后面的成员A存放的时候，会先计算size=min(A大小, 有效对齐值 ......
JAVA 线上故障排查完整套路，从 CPU、磁盘、内存、网络、GC 一条龙！
https://mp.weixin.qq.com/s/zaoypK8nn1egoKFFLKxNLQ （给Java日知录加星标，提高Java技能） 线上故障主要会包括cpu、磁盘、内存以及网络问题，而大多数故障可能会包含不止一个层面的问题，所以进行排查时候尽量四个方面依次排查一遍。 同时例如jstac ......
CPU/内存/磁盘/网络/redis/MQ测试工具合集
闲余时间为大家整理了CPU性能测试、内存带宽测试、内存延迟测试、磁盘IOPS测试、网络测试、数据库测试、Kafka/rabbitMQ性能测试工具合集，后续也会对工具进行简单使用说明。 序号 工具名称 监控策略及内容 1 UnixBench-5.1.4 CPU性能测试 2 stream 内存带宽测试 ......
记一次 .NET 某电力系统 内存暴涨分析
一：背景 1. 讲故事 前些天有位朋友找到我，说他生产上的程序有内存暴涨情况，让我帮忙看下怎么回事，最简单粗暴的方法就是让朋友在内存暴涨的时候抓一个dump下来，看一看大概就知道咋回事了。 二：Windbg 分析 1. 到底是谁吃了内存 这个问题说的再多也不为过，一定要看清楚这个程序是如何个性化发展 ......
[Microsoft Azure] 如何在 Azure App Service 上获取内存转储文件
在本文中，我们将探讨如何在 Azure App Service 上获取应用程序的内存转储文件。这对于诊断和解决应用程序性能问题非常有用。 在处理 Azure App Service 上运行的应用程序性能问题时，获取内存转储文件可能非常有用。内存转储文件记录了应用程序在某个时刻的内存状态，可以帮助开发 ......
71-变量的作用域-全局变量-局部变量-栈帧内存分析讲解
帧就是看电影的时候，一咋眼一个帧，胶卷一样，这个也是一样 使用前必须要赋值，上面全局有a，你这局部再a，他就认为你这是一个局部变量，只是重名了 a=300是栈帧里的，而a=3是全局的，就像你班级里有个张伟，你学校里还有个，你肯定优先考虑你班级的 ......
67-函数的基本概念-内存分析-函数的分类-定义和调用
java中叫方法，不叫函数，本质是一样的 python函数有几种： 内置函数，标准库函数 2.标准库函数，如tutle海龟画图 在python中，一切都是对象！ 左边是堆，变量test01，右边是栈，id，函数也是对象 ......
Java内存模型
Java内存模型（Java Memory Model，JMM）定义了Java程序在多线程环境下如何与主内存和工作内存交互的规范。JMM规定了变量的可见性、原子性和顺序性等方面的规则，保证了多线程程序的正确性和可靠性。 Java内存模型包括以下几个核心概念： 主内存（Main Memory）：主内存是 ......
12 面向对象三大特征
1 封装：提高程序的安全性。 将数据 (属性) 和行为 (方法) 包装到类对象中。在方法内部对属性进行操作，在类对象的外部调用方法。 在Python中没有专门的修饰符用于属性的私有，如果该属性不希望在类访问，前边使用两个‘____’。 2 继承：提高代码的复用性。 语法格式：class 子类类名（父 ......
Python中进行特征重要性分析的9个常用方法
特征重要性分析用于了解每个特征(变量或输入)对于做出预测的有用性或价值。目标是确定对模型输出影响最大的最重要的特征，它是机器学习中经常使用的一种方法。 为什么特征重要性分析很重要? 如果有一个包含数十个甚至数百个特征的数据集，每个特征都可能对你的机器学习模型的性能有所贡献。但是并不是所有的特征都是一 ......
《动手学深度学习 Pytorch版》 6.2 图像卷积
import torch from torch import nn from d2l import torch as d2l 6.2.1 互相关计算 X = torch.tensor([[0.0, 1.0, 2.0], [3.0, 4.0, 5.0], [6.0, 7.0, 8.0]]) K = t ......
linux 内存盘的使用方式与验证
linux 内存盘的使用方式与验证 背景 某些情况下, 硬盘的写入是一个很大的瓶颈 使用 内存文件系统的方式应该能够极大的提高IO的速度. 内存盘的优点是比较快, 缺点就是数据不是持久化的. 其实还是有很多可以持续优化的方式与方法的. 可以最大化的 磁盘的IO速度等. 内存盘的多种模式与区别 ram ......
虚拟内存如何与物理内存映射
转自 https://www.cnblogs.com/binlovetech/p/17571929.html 笔者之前在自己的专栏《聊聊 Linux 内核》 里通过大量的篇幅写了一个系列关于内存管理相关的文章，在这个系列文章中，笔者分别通过虚拟内存管理和物理内存管理两个角度算是把 Linux 内存管 ......