数据库 笔记 数据mysql
算法学习笔记( 一）（1）动态规划（LIS）
### 题目链接：https://www.acwing.com/problem/content/897/ ## 讲解 动态规划问题具有三个特质： * 子问题重叠: 即子问题是相互之间依赖的 这个子问题在之后可能被反复使用 (此条件并非必要条件 但失去它也就没有优化作用了） * 最优化原理: 此问题可 ......
数据仓库时实践
数据仓库建设 近年来，随着银行业务日益发展、监管要求不断深化，银行逐步将数据分析、数据应用、数据挖掘作为金融业务发展和管理决策的重要支撑手段，将数据作为行内的核心资产，不断拓展数据应用场景，提升数据资产管理能力。烟囱式系统建设模式会给数据建设带来严重后果，数据标准、数据规范无法按预期实施，数据质量提 ......
数据仓库建设方法论
数据仓库建设方法论 了解决多数据源导致的口径不一致、数据无关联、数据质量差、缺少历史数据、开发效率低等问题，企业需要构建企业级数据仓库，对数据进行规整和高效利用。除此以外，由于直连业务系统支撑多方报表导致读写交叉性能降低，影响正常业务系统使用的问题也可解决。 构建企业级数据仓库的步骤分为调研、数仓设 ......
Element 自定义指令 下拉分页，获取无限数据
## template 代码 ```js ``` ## data 下拉数据： ```js batchList: { list: [], total: 0, pageNo: 1, pageSize: 100 }, ``` ## methods 方法： ```js import { uniqBy } f ......
redis初探——redis配置和redis的数据类型简述
0.Redis，启动！ 安装工作完成以后，我们需要到redis的目录下打开cmd，输入redis-server.exe redis.windows.conf，此时的界面应该如下 出现这样的界面代表成功，如果是其他的界面例如： 这个代表端口被占用，可能是之前开启的服务没有关闭，我们输入以下代码即可。 ......
类欧几里得算法学习笔记
# 类欧几里得算法 类欧几里得算法可以在$O(log_2\max\{a,b\})$的时间内求解形如$\sum_{i=0}^n\lfloor \frac{a\cdot i+b}{c} \rfloor$的式子，而他的求解过程酷似欧几里得算法，故而得名。 ## 基础款 令$f\left( a,b,c,n ......
MySQL-锁等待排查
## 背景 最近我们的登录系统在每个钟点的 18分就会登录不进去, 排查后发现有锁等待情况 , 周期地发生那么很大几率是自动任务了, 为了找到为什么会锁等待 ,我们做了以下的排查 ## 排查过程 ````SQL -- 1.锁住的事务 SELECT * FROM INFORMATION_SCHEMA. ......
论文阅读：Segment Anything之阅读笔记
### 引言 - 论文：Segment Anything是Meta出的图像语义分割的算法。这个算法因其强大的zero-shot泛化能力让人惊艳，这不抽空拿来学习了一下。 - 该算法的代码写得很清楚、简洁和规范，读来让人赏心悦目。推荐去看源码，很有意思。 - 本篇文章，将以问答形式来解读阅读过程中遇到 ......
从GaussDB(DWS)的技术演进，看数据仓库的积淀与新生
摘要：随着云计算的兴起和渗透，云数仓成为了数仓技术演进的新阶段，并且逐渐成为了众多企业的共同选择。 本文分享自华为云社区《从GaussDB(DWS)的技术演进，看数据仓库的积淀与新生》，作者： 华为云头条。 数据驱动着现代商业的发展 今天，无论在制造、零售、物流 还是在互联网、金融等行业 数据都变得 ......
mssql执行大文件 还原数据库
解决脚本还原数据库文件过大，打开卡顿问题 1、打开MSSQL安装路径：找到Microsoft SQL Server Management Studio的图标，点击右键属性>打开文件位置 2、在安装路径下打开cmd控制台 3、输入命令： C:\Program Files (x86)\Microsoft ......
DMA数据发送缓存模块实现
# DMA数据发送缓存模块实现 ```mermaid graph TD A[DMA数据发送缓存模块实现] --> B[目的] A --> C[原理] A --> D[实现] B --> E[把池化后的数据返回给PS端的ADI3] C --> F[使用FIFO作为存储载体] C --> G[设置FIF ......
数据仓库MPP架构&分布式架构
数据仓库MPP架构&分布式架构 一、MPP架构 1.1MPP架构概述 MPP（Massively Parallel Processing）架构是一种分布式数据处理技术，能够通过将工作负载分散到多个节点上来提高数据处理性能。与传统的共享架构不同，MPP采用非共享架构（Share Nothing），将单 ......
HBase+Elasticsearch，百亿级数据中心架构设计实践
所以最终我们的数据中心存储架构采用的是 HBase+Elasticsearch 作为核心架构。 也就是说，基于 HBase 把数据以 kv 的格式分布式的存储在多台服务器上，写入的时候是 kv 格式，读取的时候也是 kv 格式，key 就是数据的主键 id，value 就是一行完整的数据。 同时会为 ......
火山引擎DataLeap数据质量解决方案和最佳实践（三）：最佳实践
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 最佳实践 前面介绍了DataLeap数据质量平台的一些实现方式，下面为大家介绍一些我们在数据量和资源这两个方面的最佳实践。 表行数信息-优先 HMS 获取 内部的离线监控中，表行数的监控占比非常大，可能至少 50% ......
光学成像系统 Part III - BRDF测试数据使用 (二)
# 一、BRDF实验数据使用方法 ## 1. 数据集-[下载](https://pan.baidu.com/s/1_XLyBAgdqwR_wiVnoBoLxw?pwd=mchg) ### I. 数据集格式(Anisotropic BRDF Data File Format) 解压后的数据集以 `.d ......
未来数据定时刷新——从zset中获取预设时间内的任务添加到list中
未来数据定时刷新——实现步骤： 定时任务/每分钟————》未来数据的keys————》按照分值查询zset，判断数据是否到期——到期》同步到Redis中的list 1、如何获取zset中所有的key? keys 模糊匹配，future。效率低 SCNA命令：SCAN 命令是一个基于游标的迭代器，SC ......
JUC学习笔记
## 目录 * [1. JUC概述及回顾](#1-juc概述及回顾) * [1.1. JUC是什么？](#11-juc是什么) * [1.2. 进程和线程](#12-进程和线程) * [1.3. 并行和并发](#13-并行和并发) * [1.4. wait/sleep的区别](#14-waitsle ......
查询sqlserver 数据库中各表条数
SELECT ROW_NUMBER() OVER (ORDER BY All_Table.NAME) AS NO, All_Table.NAME AS '表名(EN)', CONVERT(NVARCHAR(100),ISNULL(TableDesc.[VALUE],'-')) AS '表名(CN)' ......
方芳：非物质文化遗产学重点学习背诵笔记合集2024版
非物质文化遗产学重点背诵笔记合集2024版 武汉市江夏路桥工程有限公司 中央财经大学 经济管理学院 方 芳 159 2760 2711 第一章 非物质文化遗产的范畴定义:非物质文化遗产是指各族人民世代相传并视为其文化遗产组成部分的各种传统文化表现形式，以及与传统文化表现形式相关的实物和场所。定义中的 ......
多源异构数据信息的融合方式1 - 区间数
一、区间数 鉴于区间数容易计算的特点，将多源异构数据融合为区间数的形式。区间数，如果表示为一个具体的东西，那么该是什么？ 步骤1：统一化处理决策矩阵D和T，其中D代表的是方案A在属性C下的评估值，其中T代表的是方案A在属性G下的评估值。 方案A：代表备选方案的集合，属性C：效用满意度评估时考虑的决策 ......
PostgreSQL 管理数据表（一）
创建表 在PostgreSQL中，使用CREATE TABLE语句创建一个新表： CREATE TABLE table_name ( column_name data_type column_constraint, column_name data_type, ..., table_constrai ......
PostgreSQL 管理数据表（二）
修改表 当我们创建好一个表之后，可能会由于业务变更或者其他原因需要修改它的结构。PostgreSQL使ALTER TABLE语句修改表的定义： ALTER TABLE name action; 其中的action表示要执行的操作。常见的修改操作包括： 添加字段 删除字段 添加约束 删除约束 修改字段 ......
PostgreSQL 管理数据表（三）
删除约束 删除约束通常需要知道它的名称，可以通过psql工具的\d table_name命令查看表的约束。 ALTER TABLE table_name DROP CONSTRAINT constraint_name [ RESTRICT | CASCADE ]; RESTRICT是默认值，如果存在 ......
mysql中count(*)和found_rows()的区别
count(*)和found_rows()都可以用来求查询记录的数量 而count(*)往往单独使用，found_rows()却可以跟上前面一个查询，即select * from table limit 10; select found_rows();这样的 总共可分为几个区别：1.count(*) ......
python [pymysql] 操作MySQL数据库
python [pymysql] 操作MySQL数据库 # 连接、关闭数据库 ```python def get_conn_(): """ :return: 连接，游标 """ # 创建连接 conn = pymysql.connect(host="", user="", port=3306, pa ......
RunnerGo最新版！支持连接数据库，支持websocket、dubbo等协议API调试，对接第三方消息通知
历时两个月，RunnerGo迎来上线以来第二次的大版本更新，本次更新包含超多上新功能，一起来看看吧 ～ 01.企业管理后台 为了更好的进行多团队多项目管理，RunnerGo推出企业管理后台，管理后台分为四个模块有：个人工作台、企业成员管理、角色管理、设置（第三方消息通知）。 个人工作台： 用户可以在 ......
MySQL的match函数在sp中使用的BUG解析
## 一、问题发现 在一次开发中在sp中使用`MySQL PREPARE`以后，使用`match AGAINST`语句作为`prepare stmt`的参数后，发现执行第二遍call会导致数据库crash，于是开始动手调查问题发生的原因。 > 注：本次使用的 MySQL 数据库版本为最新的debug ......
数据仓库基本概念
数据仓库基本概念 一、数据仓库诞生原因 随着互联网的普及，信息技术已经深入到各行各业，并逐步融入到企业的日常运营中。然而，当前企业在信息化建设过程中遇到了一些困境与挑战。 1.1历史数据积存 过去企业的业务系统往往是在较长时间内建设的，很少进行大面积的改造或者升级，历史数据留存在业务系统中。随着业务 ......
python解析json数据
python解析json数据 # demo ```python data = { "name": "John", "age": 30, "hobbies": ["reading", "running", "swimming"], "scores": [85, 90, 95] } for key, v ......
目标检测数据增强之mosaic
1、技术原理 Mosaic是YOLOV4中提出的新方法，适用于目标检测，主要思想是将四张图片进行拼接到一张图上作为训练样本。由于Mosaic用于目标检测，进行拼接时目标框的坐标也要做相应的变化。Mosaic的主要操作如下： 对每一张图进行随机裁剪得到A；crop的目标是选择原图的某一块区域，而不是全 ......