数据结构 算法 结构 专题
postgresql存储时序、轨迹数据
需求 轨迹查询 查询车辆一天的指标（轨迹、速度） 业务： 1、一天有1800万条指标数据 pg分区功能、最好每个设备数据存在一个分区 pg array类型、或者中间表，来解决行数太多的问题。 表太大时，btree会有性能瓶颈。块级索引就适合这个场景https://zhmin.github.io/po ......
数据分析涉及的标准库及导入形式
import pandas as pd import numpy as np import matplotlib.pyplot as plt import datetime from dateutil.parser import parse import seaborn as sns %matplo ......
算法学习Day11栈的一天
# Day11栈的一天 `By HQWQF 2023/12/23` ## 笔记 *** ## 20. 有效的括号 给定一个只包括 '('，')'，'{'，'}'，'\['，']' 的字符串，判断字符串是否有效。 有效字符串需满足： - 左括号必须用相同类型的右括号闭合。- 左括号必须以正确的顺序闭合 ......
redis数据类型及指令
...... 1、list 队列（先进先出） 2、set 无序、两端取值、可遍历 3、zset 有序set、两端取值、可遍历 String常用指令 1、set key value 2、get key 3、mset key1 val1 key2 val2 ..... 4、mget key1 key2 ......
算法学习笔记五一快速排序
目录什么是快速排序算法思想示例代码 什么是快速排序 快速排序（Quicksort）是一种常用的排序算法，它的基本思想是通过分治的策略将一个大问题划分为多个小问题来解决。它的平均时间复杂度为O(nlogn)，最坏情况（有序情况）为O(n^2)。是一种高效的排序算法。 算法思想 选择一个基准元素（piv ......
PEMs数据集
交通流量数据PEMs数据集说明 distance_df_filename (str): path of the csv file contains edges information tuple: two adjacency matrix. adj_PEMS07.pkl np.array: conn ......
代码随想录算法训练营第十一天|20. 有效的括号，1047. 删除字符串中的所有相邻重复项，150. 逆波兰表达式求值
一、20. 有效的括号 题目链接： LeetCode 20. 有效的括号 学习前： 思路： 当前元素为左括号，直接入栈 当前元素为右括号，若找到对应的左括号匹配，则循环继续；反之返回false 若栈为空，返回true；反之false 时间复杂度：O(n) 空间复杂度：O(n) 学习后： 采用入栈右括 ......
java接口自动化系列（05）：测试数据注入到测试方法
注入测试数据 这里我们是数据驱动方式，把数据注入到测试方法 上一篇我们已经把用例数据封装到对象并放到list中，这里我们把用例对象list中的对象分别放到Object类型的一维数组中，再把一维数组添加到新对象类型一维数组的list中 然后我们在测方法中打印获取到的用例数据，看获取到的数据对不对 修改 ......
字节国际化TnS算法实习的碎碎念
Motivation 在保研之后，我和南大的导师投了一篇个性化联邦学习的CVPR作为毕设。之后感觉就没什么事了，于是想着找个实习吧，第一个想法就是去字节实习，也只投了字节（别学我，还是多投一些哈哈，找不到实习就g了）。 面试过程 因为是日常实习，所以就是两轮技术加一轮hr面，虽然师兄说比较简单，但我 ......
性能测试之Mysql数据库调优
一、前言 性能调优前提：无监控不调优，对于mysql性能的监控前几天有文章提到过，有兴趣的朋友可以去看一下 二、Mysql性能指标及问题分析和定位 1、我们在监控图表中关注的性能指标大概有这么几个：CPU、内存、连接数、io读写时间、io操作时间、慢查询、系统平均负载以及memoryOver 2、介 ......
网络与数据安全领域的框架模型
1.PDR模型 PDR模型是由美国国际互联网安全系统公司（ISS）提出，它是最早体现主动防御思想的一种网络安全模型。 保护（Protection）就是采用一切可能的措施来保护网络、系统以及信息的安全。保护通常采用的技术及方法主要包括加密、认证、访问控制、防火墙以及防病毒等。 检测（Detection ......
6.PG数据库管理
1.PG数据库库属主 PG中的数据库属主属于创建者，只要有cretedb权限就可以创建数据库，数据库属主不一定拥有存放在该数据库中其它用户创建的对象的访问权限。 数据库在创建后，允许public角色连接，即允许任何人连接 数据库在创建后，不允许除了超级用户和owner之外的任何人在数据库中创建sch ......
1982-2022年GIMMIS-NDVI数据获取
1982-2022年GIMMIS-NDVI数据获取方法: https://mp.weixin.qq.com/s?__biz=MzkyNjMzNTQ2Mw==&mid=2247485197&idx=1&sn=9da0449f4dc8241fd40f70ab22dc3f0d&chksm=c239af85 ......
各种分辨率的DEM数据获取
各种分辨率的DEM数据获取方法: https://mp.weixin.qq.com/s?__biz=MzkyNjMzNTQ2Mw==&mid=2247485184&idx=2&sn=f11297321901fe473cd141d40a0877a4&chksm=c239af88f54e269e8e50 ......
Python数据科学手册笔记:IPython
目录Ipython帮助文档用符号?来查来文档用??来获取源代码补全方法利用tab利用*加?来补全Ipython快捷键Ipython魔法命令粘贴代码块执行外部代码计算代码运行时间内存分析魔法函数帮助错误和调试控制异常:%xmode调试模型:%debug输入输出历史禁止输出历史输入Ipython和she ......
tdsql(mysql版)数据库参数修改
首先考虑赤兔管理系统修改参数；如果在赤兔管理系统无法修改参数，则需要修改mysql的参数文件 一、在赤兔管理系统修改参数： 1.在赤兔管理台主界面，单击左侧菜单【实例管理】>单击所需实例 ID>【数据库管理】>【数据库参数】，进入数据库参数子界面。 2.勾选需要更改的参数，并在对应【当前值】下拉框中 ......
【MySQL】SQL通用语法、SQL分类、约束、数据库设计、多表查询、事务
SQL通用语法、SQL分类（DDL：操作数据库、表等；DML：对表中的数据进行增删改；DQL：对表中的数据进行查询；DCL：对数据库进行权限控制）、约束、数据库设计、多表查询、事务 ......
机器学习-无监督机器学习-kmeans衍生的算法-18
目录1. k-Medoids2. 二分KMEANS3. KMeans++4. elkan KMeans5. min batch KMeans算法6.小结： 1. k-Medoids 之前的kmeans算法 对于异常点数据特别敏感，更新中心点的时候，是对于该簇的所有样本点求平均，这种方式对于异常样本特 ......
关于Secure Hash Algorithm加密算法
一、概述 SHA（Secure Hash Algorithm）加密算法是一种广泛应用的密码散列函数，由美国国家安全局（NSA）设计，用于保障数据的安全性和完整性。SHA算法经历了多个版本的更新，目前主要应用于各种网络安全和数据加密领域。 SHA在线加密 | 一个覆盖广泛主题工具的高效在线平台(amd ......
算法之递归
递归算法是一种直接或者间接调用自身函数或者方法的算法，也就是说在函数内部再次调用自己。简单点： 就是自己调用自己 这个算法的核心思想： 就是原问题，可以不断地分解成规模更小的子问题，但是子问题和原问题完全是同一种类型的问题。也就是说用解决子问题的方法，同样可以解决原问题。这样，我们就可以通过递归的形 ......
el-upload批量上传，获取第一个数据返回参数并在后面的上传中进行传递；递归
fileChange(file, fileList) { const { raw } = file; if (file.status != 'ready') return; if (file.size / 1024 / 1024 > 100) { this.$message.error('文件大小不 ......
postgresql实例结构
postgresql实例结构 postgresql实例简介 用来访问postgresql数据库 一个实例对应一个数据库集簇 由内存和后台进程组成 postgresql初始化参数文件 文件中有两种类型的参数 1. 显式:在文件中对参数进行设置 2. 隐式:文件中没有设置，使用postgres默认值 可 ......
二叉树的查找算法的实现与运用
二叉树的查找算法的实现与运用 这里我们需要运用到之前二叉树建立的知识点 每一次调用Insert函数时，都会开辟一个BiNode类型的空间，同时递归调用。其次，我们在建立平衡二叉树时，当前节点的左结点小于该结点，当前节点的右结点大于该结点，所以，我们在递归之前添加了一个判断条件。最后，Insert插入 ......
数据类型转换的坑
请求其他服务的接口，返回的数据类型为Map<String, Object> 其中的某个key对应的Object中的类型为Double, 于是在解析时直接用(Double) value进行强制类型转换 然而啊然而 后来被调用服务有所改动，Double类型变为Integer，于是出现强制类型转换错误 为 ......
简单讲讲网络结构
FCN（Fully Convolutional Network），PSPNet（Pyramid Scene Parsing Network）和DeepLab-v3是在计算机视觉领域中广泛应用的三种网络结构。它们在语义分割任务中具有出色的性能，并在许多实际应用中取得了显著的成果。 首先，我们来了解一下 ......
循环结构习题
3.循环结构-习题 1.for循环求和 【题目描述】 利用for循环。计算输出1+2+3+...+n的和。 【输入】 输入n。 【输出】 如题述，之和。 【输入样例】 10 【输出样例】 55 【提示】 【数据规模及约定】 对于100%的数据，1≤n≤100。 { int n,j=0; cin>>n ......
2024数据治理新工作规划
回望2023年的数据治理工作，更多的事在公司内部满足控股集团对数据合规和安全的要求，我们发布了自己公司的数据分级分类管理办法和数据安全管理办法，那么2024年，我们希望做的就是数据治理工作的落地实现，不仅是为了满足集团对数据合规的要求，也是我们自身存在这些数据方便的痛点，需要合力的改进数据治理工作。 ......
23.自动化关键数据记录
目录 行为日志 截图 页面源码 行为日志 使用 python 自带的 logging 模块 使用 pytest.ini 配置日志开关与格式 参考链接 [pytest] ;日志开关 true false log_cli = true ;日志级别 log_cli_level = info ;打印详细日志 ......
MySQL数据库
MySQL数据库 基本概念 数据库体系 分两类：关系型数据库SQL 非关系型数据库NOSQL 关系型数据库：典型代表 MySQL MariaDB , PostgreSQL（pgdb) , Oracle SQL server , DB2 信创 国产数据库：阿里云 RDB ，华为 高斯 ，阿里 Ocea ......
初始MySQL数据库
MySQL的安装 在官网中下载MySQL的安装包到opt目录下 yum安装依赖环境 `yum -y install gcc gcc-c++ ncurses ncurses-devel bison cmake openssl-devel` 使用tar命令解压MySQL安装包 useradd命令创建my ......