屏障 机制 内存linux
linux内核中的zero-page
zero-page 操作系统给用户新分配的内容(通过mmap或者brk)都是清零过的，但是这些虚拟地址通常都是按需分配物理页面。这里的“按需”的需求可能是读取，也可能是写入。如果只是读取，只要保证读取内容是零即可，在MMU的基础上，可以让“所有”虚拟地址都映射到内容为0的物理页面中。 这样如果申请的 ......
Linux磁盘分区和挂载
一、准备工作(1)查看主机磁盘命令：lsblk(2)查看主机磁盘挂载文件系统情况命令：df -h二、磁盘分区(1)分区命令：fdisk -b 1024 /dev/vda其中：b 1024，一个sector size的大小；1GB;使用-b指定sector时，每个sector的大小是： sector ......
【Linux】命令实现分卷压缩
压缩命令 # 压缩命令：把es-head.tar文件，差分成20m大小的文件，每一部分都以es-head-part-前缀命名 split -b 20m es-head.tar es-head-part- # 压缩命令：把testSplit文件夹，压缩拆分成20m大小的文件，每一部分都以testSpl ......
Linux：vscode扩展无法下载，报错：Error while fetching extensions : XHR failed
在Linux系统上下载安装好vscode以后，发现扩展里面无法下载安装，报错：Error while fetching extensions : XHR failed 解决办法：修改 hosts 文件 1.sudo cp /etc/hosts /etc/hosts.bak 2.sudo vi /et ......
【Linux】正则匹配SQL里面的时间 TIMESTAMP
在使用plsql或者dbeaver的insert sql导出的时候通常日期格式的会导出为以下形式，我们通常将这些日期需要更新为sysdate或者to_char(sysdate,'YYYYMMDD')的形式，此时可以使用正则匹配来替换，以下列举了常见的两种时间场景： 1. 匹配 TIMESTAMP ' ......
2-2自动微分机制
0.配置 神经网络通常依赖反向传播求梯度来更新网络参数，求梯度过程通常是一件非常复杂而容易出错的事情。 而深度学习框架可以帮助我们自动地完成这种求梯度的运算。 Pytorch一般通过反向传播backward方法实现这种求梯度计算。 该方法求得的梯度将存在对应自变量张量的grad属性下。 除此之外，也 ......
Linux Shell: 写程序 翻译单词
脚本 #!/usr/bin/python3 import sys import requests import json from termcolor import colored url = 'https://fanyi.baidu.com/sug' data = {'kw': sys.argv[ ......
Linux Shell: 写程序 背单词
网上下载了一个英语词根和英语单词文件，包含导入到数据库的sql语句：english-root.sql和english_word.sql，于是写个脚本辅助背单词。 脚本 脚本逻辑：通过随机数获得词根编号，取得词根，过滤出其中的词根字符，并从数据库中提取以这些词根字符开头的单词。 脚本操作：接收一个传入 ......
内存问题定位方法 - 内存泄漏
前言 Linux 内存是嵌入式开发人员，需要深入了解的计算机资源。合理的使用内存，有助于提升机器的性能和稳定性。 Linux下内存问题可分为内存泄漏，踩内存，内存溢出，内存碎片，性能调优等。本文主要介绍工作中常用的几类内存问题的原因以及常见排查方法和工具，希望对大家有所帮助。 Linux下经常遇到内 ......
【转载】内存基本概念-node, zone ,page
1. Linux描述物理内存 在linux 内存管理(一)中介绍了UMA和NUMA，Linux通过巧妙办法把UMA和NUMA的差别隐藏了起来，所谓的UMA其实就是只有一个结点的NUMA。内存的每个结点关联到系统中的一个处理器内存控制器，每个服务器处理器可以有多个内存控制器，所以每个服务器处理器可以有 ......
【转载】内存基本概念-watermark&lowmem_reserve
概述 当系统内存短缺的情况下仍去申请内存，可能会触发系统对内存的回收，那什么时候应该进行回收，回收到什么标准又可以停止回收，参考依据是什么？即本文将介绍的watermark(内存水位线)，当检查watermark时又不单单是判断watermark，还会牵扯到lowmem_reserve[]，关于lo ......
【转载】内存基本概念-slab算法
Linux内存管理之slab 2：slab API https://blog.csdn.net/lqy971966/article/details/119801912 1. 为什么有了Buddy(伙伴系统)还需要slab? 1.1 什么是伙伴系统？ Linux内核中使用伙伴系统（buddy syst ......
【转载】内存基本概念-伙伴(Buddy)算法
简介 在Linux系统中，内存的分配与回收速率直接影响系统的存取效率。当内核频繁请求和释放不同大小的一组连续页框时，会导致许多外部空闲碎片，造成空间的浪费。使用伙伴算法可以有效地缓解该问题。伙伴关系机制是操作系统中的一种动态存储管理算法。在进行内存分配时，该算法通过不断平分较大的空闲内存块来获得 ......
linux基础01----命令集锦
Linux命令集锦： 一、关机&重启命令： sync：把内存的数据同步到磁盘，当我们关机或者重启时，都应该先执行下sync命令，把内存的数据写入磁盘，防止数据丢失。 shutdown -h now：表示立即关机 shutdown -h 1：表示1分钟后关机 shutdown -r now：立即重启 ......
linux基础002-----环境搭建1
一、 vimtools安装 在终端输入gcc -v如果显示gcc的版本说明安装了gcc 之后一直回车 关闭系统后，在虚拟机中找到要克隆的系统，右键 管理 克隆，选择克隆的位置（选择大的磁盘），修改系统名，即可完成克隆。 选择要快照的系统右键 快照 拍摄快照，输入名称和描述后，点击确定，即可保存快照。 ......
linux-firewalld 和iptable的策略配置(nat 以及端口开放)
一、配置防火墙开发端口 1、 sudo yum install firewalld sudo systemctl start firewalld sudo systemctl enable firewalld 2、配置防火墙规则 firewall-cmd --permanent --add-serv ......
linux-网卡配置
一、网络配置 ip link show 查看网卡配置 set ens33 up/down 网卡的开启关闭 ip link add/up 添加/删除网卡 为网络设备添加协议地址 ip address 192.168.10.1/24 brocase 二、添加网卡并配置网络 1、在linux虚拟机上新添加 ......
如何解决在 Linux 中 WPS 字体缺失问题（安装常用的 Windows 中文字体）
所需文件的下载链接在末尾 Symbol 字体 安装 wsp-font-symbols 即可 Windows 字体 安装 Win10Fonts即可 常用字体 文件内容包括 仿宋GB2312 、楷体GB2312、方正小标宋简 安装方式 首先下载你所需要的字体文件 在字体文件所在的目录下右键点击在命令行中 ......
linux系统僵尸进程处理
查看僵尸进程 [root@mac-25 ~]# top top - 19:04:11 up 177 days, 23:58, 2 users, load average: 15.18, 21.64, 22.02 Tasks: 1791 total, 2 running, 1347 sleeping, ......
linux同步文件到百度云盘
背景 由于个人项目预算有限，把mysql和应用程序都跑在同一台阿里云ECS机器上面，就在昨天(2023年12月21日) ，服务器突然出现问题 进程全部挂掉了，服务器也无法重启，找工程师排查后发现是系统磁盘挂载出现了问题，好在恢复后数据都还在，数据没有丢失真是万幸。如果数据丢了那就game over了 ......
linux tar打包压缩解压命令学习
Linux系统中tar是最常用的打包工具，通过打包工具可以压缩/解压 比如常见的压缩包格式 如下： tar 未压缩文件 只是做了一个打包而已 tar.gz 使用gzip算法格式压缩的压缩包 tar.bz2 bz2格式压缩包 tar.xz xz格式压缩 参数介绍 tar 的参数很多 列出几个比较常用的 ......
7.内存管理基础+连续分配
程序执行基本原理 程序是一条一条被读入寄存器内执行的 内存卡是一个临时保存中介，磁盘是永久保存介质 地址总线的选中原理（译码器原理） 四大存储器的速度和所处位置 寄存器>Cache>内存卡>磁盘 概念辨析 CPU位数、OS位数、内存地址总线数、内存数据总线数、逻辑地址位数、物理地址位数、真实内存大小 ......
文档生成工具：Linux下doxygen的使用
一、概述 Doxygen是一个代码文档生成工具。它从代码文件中提取注释并可生成多种文档形式。如：网页文档HTML，RTF (MS-Word)，PDF等等。同时也可生成函数之间的调用和文件的依赖关系图表。 二、安装 平台：linux sudo apt-get install doxygen sudo ......
在 Linux 上以 All-in-One 模式安装 KubeSphere
1、什么是 KubeSphere KubeSphere 是在 Kubernetes 之上构建的面向云原生应用的分布式操作系统，完全开源，支持多云与多集群管理，提供全栈的 IT 自动化运维能力，简化企业的 DevOps 工作流。它的架构可以非常方便地使第三方应用与云原生生态组件进行即插即用 (plug ......
Linux OpenGL (2) —— 创建窗口
# 编译命令写在前面： g++ -o out main.cpp lib/glad.c -lglfw -lGL -lm -lXrandr -lXi -lX11 -lXxf86vm -lpthread -ldl -lXinerama -lXcursor 初始化 GLFW 配置需要使用的 OpenGL 版 ......
SVN 在Linux检出代码报Name or service not known
SVN checkout（域名，非IP）代码报错： svn co http://jz-10010/svn/1/mediaplayersvn: E170013: Unable to connect to a repository at URL 'http://jz-10010/svn/1/mediap ......
vm exsi 扩展linux虚拟机磁盘空间，ubuntu系统扩容
在虚拟机的管理中为了不浪费资源空间，有一个原则，就是宁可初始化空间分的比较小，随着使用情况而逐步增加，也不要初始化空间分很大，造成物理磁盘空间的浪费和不够用 因为虚拟机扩容相对容易，缩容比较困难（有丢失数据的风险） 下面为我的一次扩容操作记录，用于日后回顾备忘 ......
linux环境下nginx配置http2
由于项目需求，在nginx下支持http2协议，希望提升访问性能。 除了介绍配置过程，在文章最后会记上过程中的困惑。 准备工作 nginx-1.19.2.tar.gz openssl-1.0.2r.tar.gz（必须不低于1.0.2，否则不支持http2） 以上文件上传到/usr/local目录下。 ......
Linux OpenGL (1)——环境搭建(GLFW, glad)
所有代码和过程都已经过测试 测试环境：Ubuntu WSL 18.04 为什么需要 GLFW 和 glad 库 我粗浅的理解：opengl 并没有提供一些跨平台代码的实现细节，因此，需要根据不同的平台下载一些库来填充 opengl 中“空虚”的函数。 如何安装 GLFW 和 glad 库 安装 GL ......
linux下域名解析工具
1、dig [root@hlcc_master mysqlinit]# dig www.baidu.com ; <<>> DiG 9.11.4-P2-RedHat-9.11.4-26.P2.el7_9.13 <<>> www.baidu.com ;; global options: +cmd ;; ......