postgresql进程 内存 数据库
今年双11，火山引擎数据飞轮为企业生意带来更大确定性
今年 4 月，火山引擎提出了数据驱动的新范式——数据飞轮。针对企业当下“有数据，但不驱动”的问题，“数据飞轮”以数据消费为核心，使企业数据流充分融入业务流，增强业务发展动力。而刚刚过去的“双 11”，则成为在实践中检验“数据飞轮”真实成效的一次契机。 ......
道路病害数据集调研【检测数据集】
RoadDamageDetector 地址：https://github.com/sekilab/RoadDamageDetector/ 注意：CRDDC2022 数据集包含 GRDDC2020 数据集，Road Damage Dataset 2019 包含 Road Damage Dataset ......
数据库设计规范
数据库设计（Database Design)是指对于一个给定的应用环境，构造最优的数据库模式，建立数据库及其应用系统，使之能够有效地存储数据，满足各种用户的应用需求（信息要求和处理要求）。 一、数据库设计的原则 表设计原则 1 （1）规范化与反规范化 规范化的优点是减少了数据冗余，节约了存储空间，相 ......
他山之石，可以攻玉｜银行业数据中心数字化转型之模型篇 04（完结）
导语： 银行业数据中心数字化转型是一项系统性工程既涉及管理层面转型——包括数字化转型战略、基础架构和技术架构转型、技术创新和知识体系转型，又涉及执行层面转型——包括人员管理（P）、流程管理（P）、技术管理（T）、资源管理（R）等。数据中心数字化转型作为一项宏大的系统性工程，必须要依据一个模型或标 ......
构建满足流批数据质量监控用火山引擎DataLeap
面对今日头条、抖音等不同产品线的复杂数据质量场景，火山引擎 DataLeap 数据质量平台如何满足多样的需求？ ......
C++-Python_多进程_多线程-协程-异步开发
python 多任务、并发编程等领域 并发：宏观上并行，微观上串行 并行：宏观上并行，微观上并行 并发：I/O密集型作业 运行态 阻塞态的转化 并行：CPU密集型作业 并发(Concurrent)、并行(Parallesim)、 多线程(Multi Threaded)、多进程（Multiproces ......
如何实现图像搜索，文搜图，图搜图，CLIP+faiss向量数据库实现图像高效搜索
如何实现图像搜索，文搜图，图搜图，CLIP+faiss向量数据库实现图像高效搜索 这是AIGC的时代，各种GPT大模型生成文本，还有多模态图文并茂大模型， 以及stable diffusion和stable video diffusion 图像生成视频生成等新模型， 层出不穷，如何生成一个图文并貌的 ......
表示层USL 业务逻辑层Bll 数据访问层DAL
1.表示层（USL）：UI User 主要表示WEB方式，也可以表示成WINFORM方式。如果逻辑层相当强大和完善，无论表现层如何定义和更改，逻辑层都能完善地提供服务。 2.业务逻辑层（BLL）：主要是针对具体的问题的操作，也可以理解成对数据层的操作，对数据业务逻辑处理。如果说数据层是积木，那逻辑层 ......
聊一聊 .NET高级调试 中的一些内存术语
一：背景 1. 讲故事 在高级调试的旅程中，经常会有一些朋友问我什么是 工作集(内存)，什么是 提交大小，什么是 Virtual Size, 什么是 Working Set 。。。截图如下： 既然有很多朋友问，这些用口头也不怎么好描述，刚好上午有时间就系统的聊一下吧。 二：内存术语解读 1. Vir ......
数据类型内置方法
数据类型内置方法介绍 八大基本数据类型 数字类型 整形（int） 浮点型（float） 字符串（str） 列表（list） 元组（tuple） 布尔（bool） 字典（dict） 集合（set） 【一】整型（int） （1）类型强转 可以将由纯整数构成的字符串直接转换成整型 符合int类型格式的字符 ......
【FAQ】运动健康服务端侧数据常见问题及解答
目录 Q1：Health Kit开放的API是否支持同时获取多个华为手环的健康数据？ Q2：当前通过Health Kit获取运动健康数据的功能是否免费？ Q3：在联盟平台申请Health Kit权限，上传开发者申请资料清单时，提示“上传失败，请重新上传”，需如何处理？ Q4：睡眠记录返回的数据结果与 ......
【scikit-learn基础】--『数据加载』之玩具数据集
机器学习的第一步是准备数据，好的数据能帮助我们加深对机器学习算法的理解。 不管是在学习还是实际工作中，准备数据永远是一个枯燥乏味的步骤。scikit-learn库显然看到了这个痛点，才在它的数据加载子模块中为我们准备了直接可用的数据集。 在它的数据加载子模块中，提供了6种直接可用来学习算法的经典数据 ......
数据监控
实现原来：请求接口数据，数据解析，数据进行处理，使用echarts进行趋势图绘制，截图邮件，数据阈值范围判断，对接软件告警，Jenkins持续集成； 一.数据处理： 二.结构 三.基础方法： ......
Linux进程管理命令心得
通过学习了解了一些常用进程管理命令的使用，例如ps、kill命令，了解到换个kill与killall的不同，对于linux操作系统下的进程的学习打下基础，更好的学习进程。同时也学到了本章节是熟悉掌握Linux系统常用进程创建与管理的系统调用，linux下使用fork()创建子进程，与windows下 ......
supervisor 进程管理工具，配合Cesi
一、简介 二、实操内容 三、问题 一、简介 Supervisor 是一个客户端/服务器系统，允许用户控制类 UNIX 操作系统上的多个进程。 Supervisor 官方文档 可以管控服务器发生错误停止时自动重启，远程打开关闭。 CeSi 是 Supervisor 官方推荐的集中化管理 Supervi ......
VMProtect 壳保护 构造 ROP 链 DLL 内存加载 “白加黑” 多层内存解密 后门 免杀 远控
恶意后门利用多种免杀手段，可远控用户电脑 - 知乎 https://zhuanlan.zhihu.com/p/644588718 恶意后门利用多种免杀手段，可远控用户电脑 火绒安全 已认证账号 42 人赞同了该文章 近期，火绒威胁情报系统监测到一款后门病毒正在快速传播，被激活后会通过远程服务器下 ......
StackGres 1.6 数据库平台工程集群配置管理(K8S Pods/PostgreSQL/PgBouncer)
Postgres 配置 PostgreSQL 的配置在 SGPostgresConfig CRD 中指定。如果在创建集群时没有指定自定义配置，StackGres 将创建一个默认配置，您可以在 这里 看到。 https://stackgres.io/doc/latest/reference/crd/s ......
终于有人把内外网数据交换方案讲清楚了！
顾名思义，内外网数据交换方案，解决的是不同网络之间的场景下，文件数据的交换问题，那么首先，我们得搞清楚，为什么会有不同的网络？为什么要划分内外网？ 划分内外网主要有两个原因，一个是安全考虑，一个是合规要求： 安全性：不同的网络可以设置不同的安全策略和权限，有助于保护数据安全和防止潜在的威胁。即使是内 ......
Mysql不同数据库之间表结构同步
开发环境的Mysql表结构做了修改，要同步到其他环境数据库中使用数据库管理工具JookDB的表结构同步功能就很方便。虽然Navicat也有这个功能但是有免费的当然是用免费的。 用JookDB添加数据库后在数据库节点上右键选择“同步结构”即可开始表结构同步。 1.选择结构同步的源库和目标库。 2.点“ ......
跨网文件摆渡系统：安全、高效的数据传输桥梁
在企业高度信息化的时代，数据的流通与共享已经成为企业、组织乃至个人之间不可或缺的沟通方式。然而，在数据流通的过程中，我们经常会遇到各种难题和挑战，尤其是当涉及到不同网络环境之间的文件传输。这不仅需要保证文件的安全性，还要确保传输的高效性。 1、数据泄露风险：近些年企业数据泄露成本逐年增加，波及各个行 ......
SQL 日期处理和视图创建：常见数据类型、示例查询和防范 SQL 注入方法
SQL处理日期 在数据库操作中，处理日期是一个关键的方面。确保插入的日期格式与数据库中日期列的格式匹配至关重要。以下是一些常见的SQL日期数据类型和处理方法。 SQL日期数据类型 MySQL日期数据类型 DATE - 格式为YYYY-MM-DD DATETIME - 格式为YYYY-MM-DD HH ......
记录一次 postgresql 优化案例（ volatility 自定义函数无法并行查询 ）
同事最近做个金融适配项目，找我看条SQL，告知ORACLE跑1分钟，PG要跑30分钟(其实并没有这么夸张)😎， 废话不说，贴慢SQL。 慢SQL（关键信息已经加密）： explain analyze SELECT c_qxxxxaode, '2023-03-22 00:00:00' AS d_cd ......
【数据结构】静态map
map可以动态进行插入删除等操作，但其常数太高了。 如果只用一个有序数组来存储的话，那么可以提供更好的查询复杂度的常数，同时在构建的时候由于不需要保存额外的信息所以非常节约内存： struct my_map { vector<pair<pii, int>> vec; void clear() { v ......
数据结构与算法总结-----1
前言 在学习专业知识的过程中，我们经常看到两个词一起出现，数据结构和算法，为什么呢？因为通常选择正确的数据结构往往能够让我们程序算法 的效率变得更好。 解决问题方法的效率，跟数据的组织方式是相关联的。例如在线性表中删除一个数，选择顺序表(数组)，时间复杂度是O(N)，而用链表删除一个数是比顺序表的效 ......
指针内存测试
对下面的这一段代码 int a[10]; int *b = new int[10]; int *c = (int*) malloc(sizeof(int) * 10); cout << sizeof(a) << endl; cout << sizeof(b) << endl; cout << siz ......
Linux学习之进程管理
一.查看进程 5.2.1静态查看进程 ps aux 可以查看当前目录某一瞬间的进程状态 ps aux --sort -%cpu可以查看CPU使用率，按照CPU占用百分比排序 ps -ef可以查看UID,PID,PPID等信息 ps axo可以自定义显示的字段 使用 pidof，pgrep命令都可以查 ......
Oracle常用数据库操作
数据库备份和还原 备份类型：Oracle数据库备份可以分为物理备份和逻辑备份两种类型。物理备份是指备份数据库文件，包括数据文件、控制文件、日志文件等，可以恢复整个数据库。逻辑备份是指备份数据库中的逻辑数据，如表、视图、存储过程等，可以恢复数据库中的数据。 备份工具：Oracle提供了多种备份工具，如 ......
Restart Study MySQL-01数据库概述(基础)
C(Chapter) C-01.数据库概述 1.为什么要用数据库 持久化(persistence)：把数据保存到可掉电式存储设备(硬盘)中以供之后使用。大多数情况下，特别是企业应用，数据持久化是将内存中的数据保存到硬盘上加以"固化"，而持久化的实现过程大多使用各种关系数据库来完成。 持久化的主要作用 ......
go 内存管理
协程栈 go 栈的位置 1. Go 协程栈位于 Go-堆内存上 2. Go 堆内存位于操作系统虚拟内存上 go 栈的工作流程 以main.main为出发点 要记录runtime.main的栈基地址 记录 a 和 b的局部变量值 开辟一个空间记录 sum函数的返回值 记录 b 和 a的值, 这里是为了 ......