小记 索引 进程mssql
【转】MySQL慢查询优化、索引优化、以及表等优化总结
MySQL优化概述 MySQL数据库常见的两个瓶颈是：CPU和I/O的瓶颈。 CPU在饱和的时候一般发生在数据装入内存或从磁盘上读取数据时候。 磁盘I/O瓶颈发生在装入数据远大于内存容量的时候，如果应用分布在网络上，那么查询量相当大的时候那么平瓶颈就会出现在网络上。 我们可以用mpstat, ios ......
僵尸进程杀死
1、 ps xf | grep “/virtuoso ”找到Z状态的进程 2、 Z是僵尸进程，是无法单独kill掉的需要查找父进程 3、 父进程查找 cat /proc/4385/status 找到该子进程对应的父进程，将其父进程杀死% State: Z (zombie) gid: 4385 Pid ......
windows通过命令杀掉某个端口对应的程序进程
如下 在本地开发时候，经常会出现端口被占用的情况。通过命名快速找到被占用的端口，并杀掉对应的应用进程。 1 查找被占用的端口号 netstat -aon | findstr 端口号 2 根据命令一获取到pid，根据pid杀掉应用进程 taskkill /pid pid值 -t -f 例如：taskk ......
Windows中杀死占用某个端口的进程
第一步，打开cmd命令窗口，输入命令，根据端口号查找对应的进程号 netstat -ano | findstr 80 //列出进程极其占用的端口，且包含 80<details> 结果如下： 发现 8080 端口被 PID(进程号)为 9268 的进程占用。 第二步， 据进程号寻找进程名称 taskl ......
小记 | 使用 PyInstaller 打包和交付 Python 项目
PyInstaller 可以将 Python 项目打包成一个可执行文件，或是一个文件夹，包含可执行文件以及依赖包。方便我们将 Python 项目交付给用户，方便用户使用的同时也可以一定程度的保护项目源代码。本文将介绍如何简单使用 PyInstaller 打包。 安装 使用 pip 安装即可： pip ......
记一次docker执行kill进程卡住问题
背景:收到报警信息，一台运行docker的32G内存机器突然爆内存80%警告，上去观察也没发现特别占用内存的进程，只是发现有几个docker容器运行8天多，是异常卡住，正常是运行几秒就关闭的于是我就打算docker kill 容器ID，结果一直卡住，等了好久。 解决: 通过ps -ef | grep ......
10--多进程回顾
一 多任务原理 1.1 概念 现代操作系统比如Mac OS X，UNIX，Linux，Windows等，都是支持“多任务”的操作系统 就是操作系统可以同时运行多个任务 1.2 实现原理 单核CPU实现多任务原理 操作系统轮流让各个任务交替执行 QQ执行2us（微秒），切换到微信，在执行2us，再切换 ......
RHCSA之系统进程学习.17949520
什么是进程 在linux系统中，触发任何一个事件时，系统都会讲他定义成为一个进程。并且回给予这个进城一个ID，称为PID，同时根据出发这个进程的用户与相关属性关系，会给予这个进程一个一组有效的权限设置。 进程与程序 进程的产生 一般来说，执行一个程序或命令就可以触发一个事件而获取一个PID。 任务管 ......
数据库索引概念及其如何使用的相关介绍
在日常开发中，难免会与数据库打交道，然而对数据库中数据的操作又会与另一个名词挂钩，“索引”，下面简单介绍一下索引的相关概念以及何时使用索引最合适。 一、什么是索引？索引是一种数据结构，它可以把表中的数据按照某种规则（如B树、哈希表等）进行排序，以便快速查询和访问数据。使用索引能减少磁盘I/o操作和数 ......
linux shell脚本for循环批量对bam文件构建索引并绘制geneBody coverage曲线
#首先设置所用程序的路径 samtools='samtools的路径' geneBody_coverage='geneBody_coverage.py的路径' bedFile='hg38_GENCODE_V42_Comprehensive.bed文件的路径' #然后，获取bam文件列表并进行排序 f ......
Interface 【接口的使用】 可定义属性，方法，索引器和事件的签名，不可定义字段
一.接口含义: 接口定义了所有类继承接口时应遵循的语法合同。接口定义了语法合同 “是什么” 部分，派生类定义了语法合同 "怎么做"部分。通俗来讲就是接口定义了一些行为,继承接口的类应该必须拥有这些行为,按照这些行为去做…【接口定义了大方向的使用部分，比如一天的工作量，第一做什么，第二做什么，第三做什 ......
面试题：mysql索引的原理以及使用
MySQL索引是用于加速查询的数据结构，它能够提高数据检索的速度，从而改善数据库的查询性能。索引的原理基于数据结构，如B树或B+树，用于组织和存储表中的数据记录。 首先数据是以文件的形式存放在磁盘上面的，每一行数据都有它的磁盘地址。如果没有索引的话，要从 500 万行数据里面检索一条数据，只能依次遍 ......
Linux进程管理、安全
1.介绍 1.什么是进程 比如: 开发写的代码我们称为程序，那么将开发的代码运行起来。我们称为进程。 总结一句话就是: 当我们运行一个程序，那么我们将运行的程序叫进程。 PS1: 当程序运行为进程后，系统会为该进程分配内存，以及进程运行的身份和权限。 PS2: 在进程运行的过程中，系统会有各种指标来 ......
flink小记
Flink核心概念 1、Flink是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架 2、Flink底层是以Java编写的，并为开发人员同时提供了完整的Java和Scala API。 3、Flink运行时包括JobManager（Master）和TaskManager（Work ......
hive小记
Hive介绍 1、Hadoop是由java语言编写的，在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框架 2、Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射成一张表，并提供类SQL查询功能 3、Hive处理的数据存储在HDFS，底层实现是MapReduce，执行 ......
nebula小记
为什么要用GraphDB 1、图数据库是专门用于存储和检索庞大信息网的存储引擎，能够高效将数据存储为点和边，并允许对这些点边结构进行高性能的检索。 2、关系型数据库在处理复杂数据关联运算上表现很差，数据库建模复杂，数据量大时有性能问题，多度关系查询开销大。 3、图数据库相对关系型数据库的优点：建模简 ......
python小记
特殊变量 双下划线开头，双下划线结尾的变量和方法 双下划线开头，双下划线结尾的变量是特殊变量，特殊变量是可以直接访问的，不要随意取这种形式的变量名。 双下划线开头，双下划线结尾的方法是特殊方法，有特殊用途，比如__init__会在初始化实例的时候被调用，__del__在引用计数为0时被调用，__eq ......
redis小记
redis 1、redis是一款c语言编写的基于内存的kv存储，是目前市面上最流行的nosql开源项目，常用于缓存场景（优点高性能/寻址更快，缺点易失存储/价格更高） 2、redis快的原因：纯内存操作、单线程避免上下文切换、采用非阻塞IO多路复用机制（1个线程监控多个连接，一旦某个连接就绪，就能够 ......
scala小记
scala和java 1、scala是基于java开发的，以jvm为运行环境，将面向对象和函数式编程结合起来的静态编程语言。 2、scala是面对对象的语言，万物皆对象，对象的本质是对数据和行为的封装（对象/属性/行为） 3、scala是函数式的语言，万物皆函数，函数是将解决问题的一个个步骤的封装， ......
spark小记
Spark介绍 1、Spark 是一种由 Scala 语言开发的基于内存的快速/通用/可扩展的大数据分析计算引擎。 2、Spark Core中提供了Spark最基础与最核心的功能。Spark SQL 是 Spark 用来操作结构化数据的组件。 3、MLlib 是 Spark 提供的一个机器学习算法库 ......
Oracle在什么情况下可不使用索引
数据库AWR报告监控到耗时160s。此表有200w数据，rr_time创建了索引。分析发现还是执行了全表扫描。 SELECT max(rr_time) FROM cpoint where uid='12' and rr_time<=to_date('2024-1-5 23:59:59','yyyy- ......
一些小记
美剧： 艾米丽在巴黎 刘瑜 观念的水位 李银河：女性主义 《看见成长的自己》 复旦大学 沈奕裴老师 讲座：是什么阻挡了我们相亲相爱 张悦然 顿悟的时刻 纪录片 河西走廊、神秘的西夏 博尔赫斯 诗 我用什么才能留住你 黄灿然 奇迹集 樊登解读： 恰如其分的自尊 人生有很多象限。 很多成功人士其实也是低 ......
多进程启动方法"spawn"、"fork"的选择
官方指导 实践 使用官方的例子： python版本为3.9.6 根据官方的说法，3.8开始默认就是spawn了，而不是fork。 from multiprocessing import Process, Lock def f(l, i): l.acquire() try: print('hello ......
elasticsearch集群red恢复损坏的索引
背景 客户磁盘损坏，修复磁盘后，重启机器，发现elasticsearch启动成功，ES状态正常green，但是历史数据都没有加载进，查看ES存储数据目录，发现数据还在。 解决方案 首先，需要确认indices目录下的lucene 索引正常。需要关闭ES（实际操作索引处于close状态也可以）。 # ......
Linux核心组件（CPU，内存，磁盘，网络，进程）
一、CPU 不同组件，每秒的运算、读写次数 命令集：lscpu+top/htop/uptime+mpstat+sar # 查看CPU静态信息 cat /proc/cpuinfo # 查看CPU统计信息 lscpu uptime Load Average(平均负载)：就是一段时间内（1分钟、5分钟、1 ......
【多进程】python多进程CPU密集型任务的进程数选择
实验思路 从1加到100000000， 分别用单进程，多进程方案去做。 实验代码 from multiprocessing import Pool, Process, Queue import os, time, random def test_func(left, right): res = 0 ......
swoole运行Master 进程、Reactor 线程、Worker 进程、Task 进程、Manager 进程的区别与联系
Master 进程、Reactor 线程、Worker 进程、Task 进程、Manager 进程的区别与联系 Master 进程 Master 进程是一个多线程进程 Reactor 线程 Reactor 线程是在 Master 进程中创建的线程 负责维护客户端 TCP 连接、处理网络 IO、处理协 ......
第5章 在 ASP.NET Core Web 应用进程中使用 EF Core
本章涵盖 在 ASP.NET Core 中使用 EF Core 在 ASP.NET Core 中使用依赖注入 在 ASP.NET 核心MVC操作中访问数据库 使用 EF Core 迁移更新数据库 使用 async/await 提高可扩展性 在本章中，您将使用 ASP.NET Core 构建一个真正的 ......
MySQL索引详解
1、联合索引 使用表中的多个字段创建索引，就是 联合索引，也叫 组合索引 或 复合索引。 以 score 和 name 两个字段建立联合索引： ALTER TABLE `cus_order` ADD INDEX id_score_name(score, name); 2、最左前缀匹配原则 最左前缀匹 ......
7.elasticsearch重建索引
什么时候需要重建索引 索引的mappings发生变更 索引的setting发生变更 集群内，集群间，需要做数据迁移 update by query 在现有索引重建 比如需要给一个text新增一个子字段，用english分词器。那么新添加的数据会被索引，之前的数据不会被索引。此时可以用_update_ ......