位图 数据结构 算法 结构
【图论之多源最短路】多源最短路专题(弗洛伊德算法)
注:弗洛伊德算法也可以在数据范围很小时($10^2$级别)求单源最短路,例如3488.最短路径。优点是弗洛伊德算法相对于Dijkstra更好写,就三个for循环,代码比较短,缺点是只有在数据范围是$10^2$级别才能用。 3488. 最短路径 #include <iostream> #include ......
node_exporter是怎么获得数据的
exporter分为两类:独立 和 集成到应用,集成到应用的方式侵犯业务逻辑代码 独立式数据流: [目标系统] ->(采集监控数据、规范数据格式) [exporter] ->(http轮询获取数据) [Prometheus] 常见的exporter数据采集方式: 1)文件方式:例如node expo ......
图数据库驱动的基础设施运维实操
本文系图技术在大型、复杂基础设施之中 SRE/DevOps 的实践参考,并以 OpenStack 系统之上的图数据库增强的运维案例为例,揭示图数据库、图算法在智能运维上的应用。 ......
mall--订单模块数据库表解析
本文主要对购物车功能相关表进行解析,介绍从商品加入购物车到下单的整个流程,涉及购物车优惠计算流程、确认单生成流程、下单流程及取消订单流程。 购物车表 用于存储购物车中每个商品信息,可用于计算商品优惠金额。 create table oms_cart_item ( id bigint not null ......
pymysql操作数据库入门
1. python操作数据库 pymysql PyMSQL是一个纯的python的MySQL客户端。 pip install PyMySQL 使用步骤 创建连接(修高速公路) 创建游标(运输车) 执行sql(提货单) 获取结果(卸货) 关闭游标(车退掉) 关闭连接(路也断掉) import pymy ......
VAR算法介绍
1. 风险价值(VaR)简述风险价值(value at risk,VaR)是指在一定的持有期和给定的置信水平下,利率、汇率、股价等风险因子发生变化时可能对投资组合造成的潜在最大损失。例如:持有期 1 天、置信水平 95% 的情况下,计算得到的 VaR 值为 1000 万元,则表明该投资组合在1天中有 ......
搭建rabbix监控Redis数据库
服务端节点:192.168.30.100 客户端节点:192.168.30.110 部署 zabbix 服务端 systemctl disable --now firewalldsetenforce 0hostnamectl set-hostname zbx-server //获取 zabbix 的 ......
Java构建树结构的公共方法
一、前提 pId需要传入用来确认第一级的父节点,而且pId可以为null。 树实体类必须实现:TreeNode接口 MyTreeVo必须有这三个属性:id、pId、children 可以根据不同需求,配置TreeNode和MyTreeVo中固定的属性 二、代码 定义TreeNode接口 public ......
Java语言在Spark3.2.4集群中使用Spark MLlib库完成XGboost算法
一、概述 XGBoost是一种基于决策树的集成学习算法,它在处理结构化数据方面表现优异。相比其他算法,XGBoost能够处理大量特征和样本,并且支持通过正则化控制模型的复杂度。XGBoost也可以自动进行特征选择并对缺失值进行处理。 二、代码实现步骤 1、导入相关库 import org.apach ......
ubuntu 使用xshell5连接跳板机,出现问题: “服务器发送了一个意外的数据包”received:3,expected:20
xshell5访问报错,“服务器发送了一个意外的数据包。received:3,expected:20” 1、排除了网络、防火墙等因素 2、查看sshd服务状态: 3、在/etc/ssh/sshd_config配置文件最后面添加下面一行: KexAlgorithms curve25519-sha256 ......
PyQuery数据解析
PyQuery数据解析 1、导入 from pyquery import PyQuery 2、创建PyQuery对象 p = PyQuery("页面源代码") 3、定位 # 用法 a = p("css选择器") a = p("a") # 选择a标签 a = p("li")("a") # 选择li下的 ......
用 Windows 自带刻录软件刻录数据到光盘
1、工具 刻录光驱 空白光盘 2、在电脑上连接光驱并将空白光盘放入光驱 3、在“此电脑”下找到“DVD RW 驱动器”,右键“打开” 4、选择“用于 CD/DVD 播放机”,然后下一步 5、将需要刻录的数据拖拽到“DVD RW 驱动器” 6、右键选择“刻录到光盘”,然后下一步开始刻录数据,刻录完成后 ......
Sql Server 连接读取access数据库
IF EXISTS (SELECT srv.name FROM sys.servers srv WHERE srv.server_id != 0 AND srv.name = N'ACCESSTEST') exec sp_dropserver 'ACCESSTEST', 'droplogins'Go ......
C#请求访问HTTP+JSON数据的解析
一、前言最近工作客户需要一个HTTP的Mes需求,所以自己去学习了C#请求HTTP的方法以及JSON数据的解析方法,总结出了点经验,以便后续自己找起来方便一点,故在此写一篇文章。 二、准备工作下面我用一个聚合数据提供的天气预报API接口来阐述请求HTTP和JSON数据解析的功能; 先看API文档这么 ......
开发手记-前端发送请求返回数据为空
问题描述 发送请求获取到数据并传递给组件,但是组件第一次获取到的数据为空导致报错 猜测可能的原因 react有一个机制会导致两次渲染 axios异步请求,在没有去的结果前就返回 解决组件首次渲染时,数据还未到达,导致错误的情况 这边又分两种情况 组件自己发送请求获取数据 可以在组件中使用 useSt ......
Visual Studio C盘数据迁移,解决C盘空间不足的问题
迁移原理: 将Visual Studio比较占用磁盘空间的 “C:\Program Files (x86)\Microsoft SDKs\” 目录和 “C:\Program Files (x86)\Windows Kits\” 目录移动到D盘, 然后通过mklink命令建立C盘和D盘的软连接 然后在 ......
BS结构的系统通信原理(没有涉及到java小程序)
B/S结构的系统通信原理(没有涉及到java小程序) WEB系统的访问过程 第一步:打开浏览器 第二步:找到地址栏 第三步:输入一个合法的网址 第四步:回车 第五步:在浏览器上会展示相应的结果 关于域名: http://www.baidu.com/(网址) www.baidu.com是一个域名 在浏 ......
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图 1、前言 我们之前定义视图,数据源都是来源于数据库,从数据库中获取数据,然后序列化。那么,如果数据源不来自于数据库,而是来自于其他途径,比如requests请求,这时候,序列化类就用不上ModelSeri ......
APISIX 是怎么保护用户的敏感数据不被泄露的?
本文以 APISIX 作为例子,为大家介绍了如何借助 Global Data Encryption 功能来保护敏感数据,确保不会有任何敏感数据进行明文存储,这样即使 etcd 中所有存储的数据都被盗取,也不会造成敏感数据泄露,从而有效提升了 APISIX 的安全性。 作者刘维,API7.ai 技术工 ......
云图说|云数据库GaussDB如何做到卓越性能
摘要:对于数据库来说,性能一直被视为最关键的部分。GaussDB作为华为自主创新研发的分布式关系型数据库,那么华为云数据库GaussDB在提升数据库性能方面都有哪些黑科技呢? 本文分享自华为云社区《【云图说】第275期 云数据库GaussDB如何做到卓越性能》,作者:阅识风云。 对于数据库来说,性能 ......
基于chunjun纯钧的增量数据同步问题排查【博客园-实习小生】
基于chunjun纯钧的增量数据同步 目前我司的大数据平台使用的是flink技术栈,底层的连接器插件使用的是国产的chunjun插件,在使用chunjun的过程中也遇到了很多问题,本次记录下在SQL模式的情况下怎么支持增量的数据同步 chunjun的官网文档对增量同步已经做出了一定的说明 纯钧官方 ......
深度学习的优化算法
目前,深度学习的优化器以反向传播的梯度下降算法为主流。常见的优化器有如下几种: BGD SGD MBGD Momentum RMSProp AdaGrad Adam 1. 批量梯度下降(Batch Gradient Descent, BGD) 2. 随机梯度下降法(Stochastic Gradie ......
Hive元数据信息表
--Hive元数据表 1.表信息 (1)TBLS--记录数据表信息,可作为左表,关联其他表信息 (2)TABLE_PARAMS—存储Hive表的属性信息 具体数据内容: (3)COLUMNS_V2—保存表的字段信息 2.分区信息 (1)PARTITIONS (2)PARTITIONS_PARAMS— ......
【随手记】解决mybatis返回List<map>类型的数据时 无序 并且 不能返回空值
#返回结果无序 希望表格的列能根据数据库查出来的数据保持一致,但是返回页面的结果集是无序 在mybatis中使用List<Map>结构接收数据,发现输入的sql语句结果并不是按照输入的字段名顺序返回的。 例如输入 select col1,col2,col3 from table 却返回 | col2 ......
python爬取股票数据
import json import os import requests import time def save_data(data, date): if not os.path.exists(r'stock_data_%s.csv' % date): with open("stock_data ......
排序算法
冒泡排序 let array = [2, 5, 3, 1, 4] function sort(arr) { let res = [] if(!Array.isArray(arr)) return [] for (var i = 0; i < arr.length; i++) { for (var j ......
十二载征程犹未止,看今朝星光尽闪耀丨万字长文回顾2023数据技术嘉年华
4月8日下午,为期两天的第十二届数据技术嘉年华(DTC 2023)在北京新云南皇冠假日酒店圆满落下帷幕。群贤毕至、俊采星驰,本文细数主论坛与12场分论坛的68场主题演讲内容,并附上大会PPT下载合辑,欢迎查阅。 ......
高空安全带算法实现
1. 项目背景 由于项目中用到安全带识别算法,所以进行了比较粗略的安全带识别算法的实现,经过我们的资料查阅发现安全帽的识别算法比较普遍,但是安全带的算法比较少,但也不能说没有,几篇罢了,现将实现过程记录如下; 需求:每次传入算法一张图片(或者三维数组),经过算法处理后传出一张图片(或者三维数组) 2 ......
mysql插入数据如果存在则忽略
经常有一种场景,某类数据只能在一张表中存在一条,我们会创建唯一索引进行约束,但是如果重复插入就报错了,所以开发上一版都会先查一次然后再insert。 mysql有个简单的写法,基于已经创建的索引,如果存在的话,那么就忽略这条记录的插入。 不废话了,上代码吧。 create table userabc ......