架构 分布式storming笔记
[软件体系结构/架构]零拷贝技术(Zero-copy)[转发]
0 前言 近期遇到难题：1个大数据集的查询导出API，因从数据库查询后占用内存极大，每次调用将消耗近100MB的JVM内存资源。故现需考虑研究和应用零拷贝技术。 如下全文摘自: 看一遍就理解：零拷贝原理详解 - Zhihu/捡田螺的小男孩 零拷贝是老生常谈的问题啦，大厂非常喜欢问。比如Kafka为什 ......
二、搭建基于LNMP架构的web服务
2.1 环境说明 主机 IP地址 备注 web01 192.168.1.7 nginx+php web02 192.168.1.8 nginx+php web03 192.168.1.9 nginx+php 2.2 安装nginx及PHP 执行主机web01、web02、web03 添加nginx官 ......
K8S学习笔记之卸载K8S集群
阅读目录 0x00 概述 0x01 操作 0x00 概述 有时候需要卸载已安装在本机的K8S服务和服务，本文卸载的K8S面向使用kubeadm或者二进制方法安装的，不涉及使用rpm包安装的集群； 主要使用kubeadm reset和删除指定文件的方法，卸载K8S集群。 0x01 操作 首先清理运行到 ......
《Java高手笔记常见100例错误》笔记
1. 用户信息错乱-ThreadLocal 问题：有时获取到的用户信息是别人的。 因为Tomcat 的工作线程是基于线程池的, 所以使用类似 ThreadLocal 工具来存放一些数据时，需要特别注意在代码运行完后，显式地去清空设置的数据，不然就有可能因为线程池复用工作线程，ThreadLocal ......
学习笔记：AC自动机
AC自动机的核心思想： **如果当前模式串匹配成功部分的后缀与其他某个模式串的前缀一致，则如果在下一次匹配失败时，直接匹配那个模式串的与当前模式串的后缀不同部分。**
举例： 模式串1 `abcd`，模式串2 `bcf`，模式串3 `e`。 ......
C++基础知识学习笔记20230328
常量 C++常量定义有两种方式 #define 宏常量：#define 常量名 常量值 通常在文件上方定义，表示一个常量 const修饰的变量，count 数据类型 变量名 = 常量值 通常在变量定义前加关键字，修改变量为常量，后不可修改 ......
matlab学习笔记6 积分
#求和 使用sum函数，注意其对于矩阵和向量的不同：对向量即数组和，对矩阵为把每列进行累加 也可以使用symsum函数,其作用是对符号变量求和,即 （第一个参数）公式对其因变量(第二个参数）从（第三个参数）到（第四个参数）求和 上图的的结果为n*(n+1) 第二个例子： 也可以计算无穷级数求和： # ......
分布式与微服务面试题
分布式与微服务面试题 说说你对分布式事务的理解？ 本地事务需要满足四大特性： 原子性 一组操作，要么全部成功，要么全部失败，不能有部分成功部分失败的情况。 一致性 数据从一种稳定状态切换到另外一种稳定状态，数据是符合业务逻辑的。 隔离性 事务与事务之间是彼此隔离的，互不影响的。 持久性 数据完成操作 ......
【C++学习笔记】关于头文件
为什么需要使用头文件？ 当代码中需要使用其他文件定义的函数时，因为跨文件而无法调用，只能使用#include来解决跨文件的调用，但#include实际是在编译时，把""或者<>的文件拷贝到当前文件，从而导致函数被重复定义而报错。于是把函数的声明写在一个文件中.h，把函数的定义写在另一个文件中.cpp ......
javascript 学习笔记3
和let一样，通过 const 定义的变量不会被提升到顶端。const 变量不能在声明之前使用。 回调函数曾经是 JavaScript 中实现异步函数的主要方式。 =>的使用： function doStep1(init, callback) { const result = init + 1; c ......
【C++学习笔记】关于类
如果说方法是代码块，那么类就是方法块。 头文件声明类的数据和函数，内容文件定义函数。 1.初始化列表：与构造函数相同，都是给数据成员提供数据，与构造函数不同的是，构造函数是赋值，初始化列表是初始化。特别是const 数据成员，在定义时，必须初始化，所以const数据成员可以在初始化列表中初始化，但不 ......
（转）高并发/高性能架构概述
转载自 https://www.cnblogs.com/three-fighter/p/14757813.html 慎入，作者高并发搞得少（没搞过），这里面水太深，什么高并发，大流量的东西都是虚拟的，作者还太年轻，没有那个经历，把握不住。系统只有几QPS，开心快乐就行，不PK，文明PK。 我关注的大 ......
MATLAB代码：基于分布式优化的多产消者非合作博弈能量共享
MATLAB代码：基于分布式优化的多产消者非合作博弈能量共享 关键词：分布式优化 产消者 非合作博弈 能量共享 仿真平台: matlab 主要内容：为了使光伏用户群内各经济主体能实现有序的电能交易，提出了一种基于光伏电能供需比（SDR）的内部价格模型。 在考虑经济性和舒适度的基础上，提出了用户参与需 ......
SQL Server底层架构技术对比
背景 数据库是信息化的基石，支撑着整个业务系统，发挥着非常重要的作用，被喻为“IT的心脏”。因此，让数据库安全、稳定、高效地运行已经成为IT管理者必须要面对的问题。数据库在底层架构层面需要满足以下几点建设要求： 安全和可靠：不能因为服务器的软硬件故障导致数据丢失和业务中断； 容灾：多数据中心间的数据 ......
Ceph MDS服务的多主一备高可用架构
阅读目录 ceph mds 高可用 回到顶部 ceph mds 高可用 Ceph mds(metadata service)作为 ceph 的访问入口，需要实现高性能及数据备份,而 MDS支持多 MDS 结构，甚至还能实现类似于 redis cluster 的多主从结构，以实现 MDS 服务的高性能 ......
面试笔记——操作系统
什么是操作系统 操作系统 内核 系统调用 用户态 系统态 进程process与线程thread 区别 进程状态 进程间的通信方式 线程间同步的方式 进程的调度算法 死锁 四个条件 解决办法 内存管理 机制 快表和多级页表 分页和分段的共同点和区别 逻辑（虚拟）地址和物理地址 CPU寻址 虚拟内存 局 ......
HBase2.1分布式部署
一、环境 Hadoop版本:hadoop-2.7.5 部署参考：https://www.cnblogs.com/panwenbin-logs/p/8666589.html zookeeper版本:zookeeper-3.4.12 部署参考：https://www.cnblogs.com/panwen ......
若依框架-后端架构
项目中的结构： 前后端分离版本分为6个子模块，子模块的依赖 <groupId>com.ruoyi</groupId> <artifactId>ruoyi</artifactId> <version>3.7.0</version> 项目模块化对于开发者来讲没有任何写法上的区别，但是对于维护和功能细分有 ......
读Java性能权威指南（第2版）笔记30_Java服务器
1. 响应式编程 1.1. 使用基于事件的范式处理异步数据流 1.2. 和异步编程提供了相同的性能优势 1.3. 能够扩展程序（特别是扩展I/O）以处理很多连接和数据源 2. 非阻塞I/O 2.1. 有效扩展服务器的基础 2.2. 允许服务器用相对较少的线程处理相对较多的连接 2.2.1. 传统的服 ......
《云原生架构容器&微服务优秀案例集》惊喜来袭
云原生架构特别是容器与微服务技术领域已经成为下一代技术演进的必经之路，同时也是各行各业快捷上云、高效用云最合适的架构选择。 ......
mysql笔记1 基本语法（待完结）
#语法样式 总的来说挺像c++的，无论是分号结尾，不强制的缩进还是/**/的注释。不过要注意它并不区分大小写，这很重要 语句分类 分为四种，定义的、增删改的、查询的、和管权限的。简称都是DxL的形式，比如增删改就是DML，M代指manipulation DDL SHOW DATABASES #所有数 ......
【C++学习笔记】关于指针
指针与类型无关，指针只是一个长度为4字节或者8字节的变量，其长度根据操作系统32还是64有关，存储的内容是内存的地址。当类型是数组或自定义类等内存块时，它的值是内存块的首地址。 int a=8; int* b=&a; void* c=&a;//任意类型的指针 int d=*b; int e=*c; ......
前端js笔记
#js的书写位置 #写在标签的事件属性中,比如 onclick 鼠标的单机事件 <a href = "" style = "css" 代码 onclick = "js的代码"></a> #<script> //单行注释 /*多行注释*/ </script> 一般会讲script标签 写在 页面bod ......
[学习笔记] 模拟退火
目标：求函数极值。 思想：函数上随机跳跃，跳跃的幅度由温度限制（温度逐步递减）。 流程：设温度 $T$ 从初始 $T_0$ 到 $T_f$ 降温速度 $0<rate<1$ 通常取 $[9.5,9.99]$ 。 每次随机求得新的函数值，如果函数值优于原函数值，直接更新状态。否则，设差量为$\Delta ......
【深入浅出 Yarn 架构与实现】5-3 Yarn 调度器资源抢占模型
本篇将对 Yarn 调度器中的资源抢占方式进行探究。分析当集群资源不足时，占用量资源少的队列，是如何从其他队列中抢夺资源的。我们将深入源码，一步步分析抢夺资源的具体逻辑。 ......
Django笔记九之model查询filter、exclude、annotate、order_by
在接下来四五篇笔记中，将介绍 model 查询方法的各个细节，为我们的查询操作提供各种便利。 本篇笔记将介绍惰性查找、filter、exclude、annotate等方法，目录如下： 惰性查找 filter exclude annotate alias order_by 1、惰性查找 前面我们在介绍 ......
CSS学习笔记
CSS学习笔记 vertical-align vertical-align 属性设置元素的垂直对齐方式。 css中的vertical-align 属性只能用于 行内元素 和 置换元素（例如 图像和表单输入框） ，此属性不继承。 vertical-align的取值:baseline|sub|super ......
构造之法阅读笔记02
这次阅读笔记主要包括整本书前言和概论，我想它必定与所有书的前言和概论一样，告诉我们作者的真是心里写照，以及他想要通过这本书告诉我们的内容。在注册博客园一年多的时间以来，我的粉丝数寥寥无几，当然我也很明白其中的原因。但后来我渐渐的发现，几乎我的每一篇博客都有一个名叫SoftwareTeacher的用户 ......
2023.3.27阅读笔记
《代码大全》阅读笔记01 欢迎进入软件构建的世界 这章阐述了软件构建的重要性，软件构建大体上就是说具体程序员做的工作，而不是需求收集人员，产品设计人员，业务分析人员，架构设计人员，测试人员，运维人员等做的工作，虽然这些人的工作在整个软件开发生命周期中也非常的重要，但是一个软件开发的最主要的部分却是具 ......
pytest--xdist分布式运行
前言 当测试用例数量上去以后，执行一遍所有测试用例，那么执行速度就会比较慢，除了多线程来提高效率外，pytest也提供pytest-xdist插件来做分布式执行，从而减少测试时间，它属于进程级别的并发 pytest-xidst安装 可以直接通过pip进行安装 pip install pytest-x ......