数据 持久性 数据备份 分布式
2023数据采集与融合技术实践作业二
作业①: 1）、要求：在中国气象网（http://www.weather.com.cn）给定城市集的7日天气预报，并保存在数据库。 题目1链接：题目1 代码如下： from bs4 import BeautifulSoup from bs4 import UnicodeDammit import u ......
数据库系统笔记 - chap2 - 关系模型
关系数据结构 关系代数 A set of fundamental operations to retrieve and manipulate tuples in a relation. These operations take one or some relations as inputs, an ......
数据库系统笔记 - chap3 - SQL
Introduction to SQL SQL（Structured Query Language），是关系数据库的标准查询语言。 SQL 的特点： 综合统一 SQL 集数据定义语言（DDL），数据操纵语言（DML），数据控制语言 （DCL）功能于一体。 高度非过程化 SQL 只要提出“做什么”，而 ......
数据库系统笔记 - chap1 - 绪论
数据库发展史 人工管理阶段（1950） \(\Rightarrow\) 文件系统阶段（1950-1960） \(\Rightarrow\) 数据库系统阶段（1960-） 数据库管理系统（DBMS）的出现，使得数据存储、数据管理和数据应用分离。 数据库管理系统采用外模式-模式-内模式的三级模式，外模式 ......
MyBatis Plus 操作 达梦数据库
MyBatis Plus 操作 达梦数据库 一、准备 MyBatis Plus 相关依赖包 MyBatis Plus 依赖包下载地址：JAVA_Mybatis_Plus_lib.zip 下载加压后，效果如下： ......
连接html界面和数据库
1.建立java项目。 2.右击项目名称添加框架支持 3.在web下面建立HTML 4.配置tomcat后，点击编辑配置，部署工件后，将url结尾更改为项目名称，部署最下面应用程序上下文改成/ 5.右击文件，点击项目结构，选择模块，选择依赖，加号添加上mysql驱动器 ......
标后预算数据编制教程
Excel预算书筛选 通常我们的预算书一个巨大的文件包，里面包含很多excel小文件。 就像如下这样 我们需要使用excel工具来对它进行规整 1.我在表外部新建一个excel用于整理 2.获取该文件夹数据 3.excel会读取文件夹中所有的文件，这些文件你看起来就会很熟悉。 3.1.由于导入中发现 ......
Hutool:一行代码搞定数据脱敏
1.什么是数据脱敏 1.1数据脱敏的定义 数据脱敏：指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护。这样就可以在开发、测试和其它非生产环境以及外包环境中安全地使用脱敏后的真实数据集。在涉及客户安全数据或者一些商业性敏感数据的情况下，在不违反系统规则条件下，对真实数据进行改造并 ......
Numpy数据运算
1.4-NumPy数组运算 1.4.1 算术运算¶ add 加 subtract 减 multipie 乘 divide 除 1.4.2 数学运算¶ 三角函数: sin,cos,tan 算术运算 1.4.3 统计运算¶ mean 均值 average 均值 var 方差 std 标准差 1.4.4 ......
数据结构：线性表-详解双向链表
《详解双向链表》 目录： 双向循环链表的定义及其特点 链表的介绍 双向循环链表的实现 完整Demo 运行截图 小结 参考文献 一、双向循环链表的定义及其特点 双向循环链表就是在双向链表的基础上，让哨兵结点的前驱指针指向链表的最后一个结点，让最后一个结点的后继指针指向哨兵结点。在原单链表的基础上多了一 ......
数据结构与算法 | 数组(Array)
数组(Array) 数组（Array）应该是最基础的数据结构之一，它由相同类型的元素组成的集合，并按照一定的顺序存储在内存中。每个元素都有一个唯一的索引，可以用于访问该元素。 // java 数组示例 int[] numbers1 = {2,0,2,3,9,23}; // 或者 int[] numb ......
C# 解析动态Json数据
方式1：使用Newtonsoft.Json // str 为一个json字符串 JObject jobj = JObject.Parse(str); foreach (var prop in jobj.Properties()) { Console.WriteLine($"字段名：{prop.Nam ......
JDBC 方式操作 达梦数据库
JDBC 方式操作 达梦数据库 一、启动达梦数据库 本篇博客以访问本地达梦数据库（DM8）为基础进行演示。（前提：本地已经安装了 DM8 数据库！） 1、启动达梦数据库 搜索“DM服务查看器”，启动“DmServiceDMSERVER” 2、客户端连接达梦数据库 ......
es 支持实时的数据读取吗
通常我们说 es 是近实时的搜索服务，指的是 es 写入一条数据后，默认 1 s 后才可以搜索到，但我们在实际使用过程中指定 id 可以进行实时的查询。客户端使用 GetRequest 发起的查询默认是实时的，分片会从 translog 中读取数据并返回，为什么通过 id 查询就是实时的呢？ es ......
sortable 拖拽后数据变更但视图不变
问题 表格中某两行拖拽换序，使用 sortable.js 在拖拽结束后调用换序接口，再更新数据列表。 问题是数据变了，但视图不变。如下图所示： 分析 vue 无法检测数组中顺序的变化。 即使采用 $set，$forceUpdate()，给组件添加 key 属性，仍然无法解决该问题。 解决办法 请求数 ......
接口幂等性数据库乐观锁实现
场景最简单的一种方式 直接上示例代码 // 根据订单号查询订单是否存在 步骤1、Order order = orderService.getOrder(orderNo); // 判断状态是否成功 步骤2、if (order!=null && !order.getStatus().equalsIgno ......
有手就会做！保姆级Jmeter分布式压测操作流程（图文并茂）
分布式压测原理 分布式压测操作 保证本机和执行机的JDK和Jmeter版本一致 配置Jmeter环境变量 配置Jmeter配置文件 上传每个执行机服务jmeter chmod -R 755 apache-jmeter-5.1.1/ 执行机配置写自己的ip 控制机配置所有执行机ip,把server.r ......
2023年10月最新全国省市区县和乡镇街道行政区划矢量边界坐标经纬度地图数据 shp geojson json
发现个可以免费下载全国 geojson 数据的网站，推荐一下。支持全国、省级、市级、区/县级、街道/乡镇级以及各级的联动数据，支持导入矢量地图渲染框架中使用，例如：D3、Echarts等 geojson 数据下载地址：https://geojson.hxkj.vip 该项目 github 地址：ht ......
年轻人的第一个车轱辘——比较两个数据库中表结构的不同并导出为Excel文件
package com.example.demo; import lombok.Data; import org.apache.commons.collections4.ListUtils; import org.apache.poi.ss.usermodel.*; import org.apach ......
分布式一致性算法Raft
raft算法之所以容易理解，其一是他将一致性问题划分成几个子问题，这几个子问题都是独立、可理解和解释的。从传统的思维来讲，对于一个复杂的系统或者工程，都是大化小，分解实现，然后去尝试融合解决整体逻辑。 一、Raft详解 Raft算法是分布式系统开发首选的共识算法。比如现在流行Etcd、Consul、 ......
【分布式】解决树莓派4B-64位更换清华源问题(GPG error:because the public key is not available)
【分布式】解决树莓派4B-64位更换清华源问题(GPG error:because the public key is not available) 别出BUG求求了 于 2022-04-30 16:15:38 发布 阅读量3.1k 收藏 18 点赞数 7分类专栏： 分布式 文章标签： debian ......
数据结构之拓扑序列
例题展示 例题解决 拓扑排序指的是从一个入度为0的点开始，将这个点记录下来，同时将这个点以及这个点的出度的线去除，再找入度为0的点，直到将所有的顶点遍历完成。 故而，上述例题中的拓扑排序序列为 01243567 01243657 02143567 02143657 四种。 ......
Mybatis自定义TypeHandler完成字段加解密And枚举数据处理
Mybatis自定义TypeHandler完成字段加解密And枚举数据处理 新增And查询对枚举数据处理 定义枚举 @Getter public enum UserEnum { HOLD_A_POST("在职", 10), RESIGN("离职", 20); private String name; ......
mongo_db数据库
数据库数据服务器下，每次创建一个数据库。user database_name;("没有就会创建 有的话就会切换") 并且 每个数据库下面又单独的用户。 1--:创建用户： 先use到指定的数据库。 db.createUser( { user: "ems", pwd: "Rxd123456!", // ......
大集合里查询数据-布隆过滤器
1.问题场景 有100亿个url被加入了黑名单，现在提供一个url要去判断是否属于黑名单。也就是一个很简单的一个东西是否属于一个集合的问题。 一般来说用set就能解决这种问题，但是由于url数目太多，内存中无法开辟一个这么大的空间去存放所有url，这个时候就需要我们去使用一种结构，去减少状态信息存储 ......