postgresql进程 内存 数据库
数据库sqlalchemy
sqlalchemy 是一个基于python的orm框架，可以让我们在python中可以使用sql操作数据库 flask 中没有orm框架 都是使用sqlalchemy作为操作数据库表的模块 fastapi 也是使用的sqlchemy 1.安装 pip3.8 install sqlalchemy # ......
【Java 并发】【十】【JUC数据结构】【五】DelayQueue延迟阻塞队列原理
1 前言 前两节我们看了BlockingQueue阻塞队列的两个子类，LinkedBlockingQueue、ArrayBlockingQueue，它们都是使用了ReentrantLock、Condition的来实现的，在进行插入操作、拉取数据操作之前为了并发安全都需要进行加锁；然后插入时候在容量满 ......
python 多进程
背景：串行执行慢，考虑使用多进程来加速。 1 多进程 这块可以参考：https://blog.csdn.net/Hao_ge_666/article/details/120571731 2 多线程 这块可以参考：https://blog.csdn.net/Hao_ge_666/article/det ......
C盘爆满的解决方法，不用删除文件，使用分区助手无损增加内存
一、分区助手傲梅科技 对于我们C盘内存不足的来说，老师推荐的yyds。 我的内存C盘历史最低是900多M，1.5G还是多的，经过我不断的删除文件，发现没什么用，电脑用久了C盘文件占内存自然就多了！！改变不了！！ 所以方法是用其他盘的内存移到C盘。一分钟解决。 下载完直接看使用步骤 二、下载 1.1、 ......
.NET Core MongoDB数据仓储和工作单元模式封装
前言 上一章我们把系统所需要的MongoDB集合设计好了，这一章我们的主要任务是使用.NET Core应用程序连接MongoDB并且封装MongoDB数据仓储和工作单元模式，因为本章内容涵盖的有点多关于仓储和工作单元的使用就放到下一章节中讲解了。仓储模式（Repository ）带来的好处是一套代码 ......
内存去哪儿了——linux free 命令查看内存偏小
相信很多公司都在使用云服务器，不知道大家有没有注意到，当你购买了一台云服务器以后，在操作系统里面通过 free 命令查看服务器的内存，容量总是会小于在云厂商控制台上面看到的内存容量。 为什么会这样呢，那就带着疑问往下看。 现象描述 购买了2台云服务，控制台上面显示的内存是4GiB（4096MiB） ......
内存整理器 - 开源研究系列文章
这些天弄了一个内存清理器，主要是清理内存操作，与360、电脑管家等内存清理球是一个道理。关键是放到任务栏里，方便操作。 1、 项目目录； 目录见下图，对代码进行了划分，比较简单。主处理类在Helper目录里。 2、 函数介绍； 下面对主要的函数进行介绍。这个是清理内存的函数实现。 3、 运行说明； ......
C# 连接数据库
一、SQL SERVER 连接字符串语法： 1、SQL SERVER验证（两种写法）（安全连接） string connStr = "Data Source=.;Initial Catalog=DatabaseName;User Id=sa;Password=123"; 或 string connS ......
爬虫最后一天,爬取到的数据存到mysql中，爬虫和下载中间件、加代理、cookie、header、selenium、随机生成uersagent、去重规则源码分析(布隆过滤器)、scrapy-redis实现分布式爬虫、扩展去重规则
==爬到的数据存到mysql中== class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', password="", h ......
浏览器层面优化前端性能(1):Chrom组件与进程/线程模型分析
Chrome支持以下几种进程模型：Process-per-site-instance Process-per-site Process-per-tab Single Process。Browser只有一个，主控整个系统的运行，管理Chrome大部分的日常事务；而Renderer则可以有多个，主要负责... ......
sqlite数据库在close()之后任然不能释放与db文件的连接
conn.Close();conn.Dispose(); 在close和dispose后，必须要加上以下两句代码，让垃圾回收机制启动，否则仍不能释放与db文件的连接 GC.Collect(); GC.WaitForPendingFinalizers(); ......
多条数据并成一条后合并查询（Power Query）
问题：两表合并，其中一表有重复的数据需要事先求和或合并 let 源 = Excel.CurrentWorkbook(){[Name="表1"]}[Content], 合并查询 = Table.NestedJoin(源, {"订单号"}, 表2, {"订单号"}, "表2", JoinKind.Lef ......
本地数据库忘记密码
一、概述 系统：win11 数据库： SQL SERVER 忘记了sa的密码。 二、重置密码 2.1 Windows身份认证登入 2.2 选择账户属性 有机sa,选择属性。 2.3 确认服务器角色 sa一般都是公共角色和系统管理员 2.4 重置密码 直接在密码和确认密码中完成密码重置 2.5 退出登 ......
html_table获取当前数据
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Title</title> </head> <body> <table border="1px"> <tr id="filed"> <td id="id">ID ......
C++内存对齐
0x1 什么是内存对齐，为什么需要它？ 尽管内存是以字节为单位，但是大部分处理器并不是按字节块来存取内存的.它一般会以双字节,4字节,8字节,16字节甚至32字节为单位来存取内存，这些存取单位称为内存存取粒度。 现在考虑4字节存取粒度的处理器取int类型变量（32位系统），该处理器只能从地址为4的倍 ......
第7章_InnoDB数据存储结构
1. 数据库的存储结构：页 索引结构给我们提供了高效的索引方式，不过索引信息以及数据记录都是保存在文件上的，确切说是存储在页结构中。另一方面，索引是在存储引擎中实现的，MysQL服务器上的存储引擎负责对表中数据的读取和写入工作。不同存储引擎中存放的格式一般是不同的，甚至有的存储引擎比如Memory都 ......
【Java 并发】【十】【JUC数据结构】【三】LinkedBlockingQueue阻塞队列原理
1 前言 这节我们就来看看LinkedBlockingQueue内部实现的原理。 2 LinkedBlockingQueue的使用 在看原理之前我们先来用一用LinkedBlockingQueue，来体验一下： 2.1 插入数据 public class LinkedBlockingQueueTes ......
大数据面试题集锦-Hadoop面试题(一)
你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。 1、集群的最主要瓶颈 磁盘IO 2、Hadoop运行模式 单机版、伪分布式模式、完全分布式模式 3、Hadoop生态圈的组件并做简要描述 Zookeeper：是一个开源的分布式应用程序协调服务,基于zookeeper可以实现同步服 ......
【Java 并发】【十】【JUC数据结构】【二】BlockingQueue阻塞队列原理
1 前言 这节我们就来看看BlockingQueue阻塞队列是什么都有哪些具体实现。 2 BlockingQueue阻塞队列是什么 BlockingQueue阻塞队列，它是一个提供阻塞功能的队列容器。首先它是一个队列容器，能够存储东西，提供数据入队功能，进行数据存入；提供数据取出功能，进行出队，如下 ......
BlockingQueue读取文本内容，多线程处理数据（线程池版本）
import java.io.BufferedReader; import java.io.FileReader; import java.io.FileWriter; import java.io.IOException; import java.util.concurrent.*; public ......
BlockingQueue读取文本内容，多线程处理数据
现在有一个txt文本，每个文本中每行的内容是：id,商品id。 要求：启动一个线程去读取文本的内容，把每行的内容通过使用BlockingQueue发送到队列里面，然后多线程，最好是10个线程，从BlockingQueue队列里面取出来，将地址作为请求参数，请求api接口，把返回的内容解析出来，把原内 ......
大数据经典论文解读 - S4 + Storm
S4 流式计算的模型是什么样？要解决哪些问题？ S4是如何设计，如何进行分布式计算的？ S4有哪些缺陷？ 在分析海量用户搜索、广告点击行为时，这个处理数据的的需求和MapReduce生成报表类似，但是要求数据统计的反馈时间尽可能短。如果频繁使用MapReduce将不得不面对： 大量“额外开销”Map ......
Android遇到内存泄漏和性能优化，需要采取以下措施
内存泄漏： a. 使用内存分析工具，如Android Studio的Memory Profiler或LeakCanary，找出内存泄漏的位置，并修复代码。 b. 避免在Activity或Fragment中使用静态变量或单例模式，因为它们可能会持有对Activity或Fragment的引用，并导致内存 ......
[数据分析与可视化] Python绘制数据地图2-GeoPandas地图可视化
本文主要介绍GeoPandas结合matplotlib实现地图的基础可视化。GeoPandas是一个Python开源项目，旨在提供丰富而简单的地理空间数据处理接口。GeoPandas扩展了Pandas的数据类型，并使用matplotlib进行绘图。GeoPandas官方仓库地址为：GeoPandas ......
精讲MySQL数据库两大知识点：主从复制与读写分离（慕课网没有的，只有哔哩哔哩有的教程）
精讲MySQL数据库两大知识点：主从复制与读写分离 https://www.bilibili.com/video/BV16i4y1g7TF/?spm_id_from=333.337.search-card.all.click&vd_source=177322cf37f4d2f9c779b40ce7a ......
MySQL数据库
数据的基本知识 1.什么是数据库 保存数据的仓库，它体现在我们电脑中，就是一个软件或者文件系统，然后把数据都保存在特殊的文件中。并且需要使用固定的语言(SQL语言/语句)去操作文件中的数据。数据库（DataBase，简称DB） 2.数据库管理系统 管理数据库的大型软件，英文名：DataBase Ma ......
剑指 Offer 41. 数据流中的中位数
题目链接：剑指 Offer 41. 数据流中的中位数 方法一：插入排序 解题思路 每次添加一个数字时，通过插入排序添加，需要返回中位数时，根据元素个数进行返回。 代码 class MedianFinder { private: vector<int> nums; public: /** initia ......
【Java 并发】【十】【JUC数据结构】【一】CopyOnWriteArrayList原理
1 前言 我们前面看过了volatile、synchronized以及AQS的底层原理，以及基于AQS之上构建的各种并发工具，ReentrantLock、CountDownLatch、Semaphore、CyclicBarrier，那么我们这节该看什么了，是不是要看运用了。在日常的业务编程中经常使用 ......
mysql与redis如何保证数据一致性
1.先更新MySQL数据库，再删除缓存，再从数据库查询到的最新的数据同步到redis。采用最终一致性性策略。 缺点：相较于mq的方式，这种方式由于要查数据库并将最新数据写到redis，可能会造成接口响应速度变慢。 2.更新mysql数据库，再采用mq异步的方式，将数据同步到redis中。 缺点：数据 ......