随笔 数据
mysql 底层数据存储结构
内存和磁盘每次交互都是完整的页，数据页里面存放的是行（不仅仅是数据库的数据行，还有行格式等） 页（16k，计算机与内存的最小单位）的上层单位还有区（一个区存放64个页，64*16k = 1024k，刚好 1M），区上面是段（一个或多个区组成），段上面是表空间（一个或多个段组成） 行格式 show t ......
python实现数据库备份与恢复
1. 概述 首先，数据库的备份理论上只是一句命令的事，但是也可以通过循环遍历数据库的表实现备份，但是无疑那样会使代码量提升很多，不过就是用SQL语句，原理倒是非常简单。当然，现在市面上用的最多的还是用命令的，这条命令如果手动操作应该是在命令窗口就可以实现的，用代码的话不过是拼接下字符串，生成命令，然 ......
如何利用电商API接口来获取商品数据
要利用电商API接口来获取商品数据，我们可以按照以下步骤实现： 确定电商平台和API接口 不同的电商平台提供不同的API接口，因此我们需要确定我们要获取商品数据的电商平台，并选择相应的API接口进行调用。目前比较常见的电商平台包括淘宝、京东、拼多多、苏宁易购等。 注册申请API接口权限 要调用电商A ......
淘宝商品详情数据详细信息查询，数据参数包括：商品链接，商品列表主图、价格、标题，sku，库存，销量，店铺昵称，店铺等级，商品详情SKU属性，商品视频，商品优惠券
淘宝商品视频接口，淘宝商品详情接口，淘宝关键词搜索，淘宝商品评论接口，淘宝商品优惠价接口，淘宝商品历史价格接口，卖家买家订单列表等 ......
电表无线红外抄表数据采集mqtt协议对接json字段格式示例要求
{ "cmd": "SnapshotData", #定时上报数据命令 "ts": 1683341539, #时间戳-秒(s) "group": 1, #分组号 "data": { "recTime": 1683341539, #时间戳-秒(s) "Ua": 200.14, "Ub": 265.81, ......
Javascript执行原理 网页引入javascript的三种方式* javascript核心语法 数据类型 Typeof运算符
Javascript执行原理： 用户端发送请求到服务器端 将js解析出来的数据（用户身份表示）绑定在请求路径中 服务器端获取到参数后会响应客户端 客户端通过浏览器解析响应的数据并将数据展现在浏览器上 网页引入javascript的三种方式*： 使用script标签 <script type=“tex ......
Oracle客户端导出服务端数据（数据泵）生成DMP文件并导入
1.首先了解下EXPDP 和 EXP的区别 1)EXP和IMP是客户端工具程序,它们既可以在可以客户端使用,也可以在服务端使用。 2)EXPDP和IMPDP是服务端的工具程序,他们只能在 ORACLEQ 服务端使用,不能在客户端使用 3)IMP只适用于EXP导出文件,不适用于EXPDP导出文件;IM ......
pb中删除事件, ue_del 删除数据窗口某列的值或全部行
// 删除“开松工艺单” Long ll_rowCount, ll_temp=1, ll_row, ll_id String ls_openCraft ls_openCraft = this.tab_1.tabpage_1.dw_1.Object.open_craft[1] ll_id = Tab_ ......
查找文本字符串，并返回所在行数据
#include <iostream>#include <string>#include <Windows.h>#include <fstream>#include <sstream>#include <signal.h>#include <io.h>#include <vector>#includ ......
excel-数据格式化
数据格式化 查找和替换 替换：批量修改工作表中的某个固定字符为新的字符。 查找：查找某已知固定的值，在查找内容中输入对应的值即可一个个的查找到其对应的位置。 | 搜索目标 | 搜索方式 | 注意事项 | | | | | | 以A开头 | A* | 勾选“单元格匹配” | | 以A结尾 | *A | ......
如何调用api接口获取其中的数据
part1.API接口可以运用到的场景，主要包括以下几个方面： 1. 应用程序集成：API可以使不同的应用程序相互之间进行集成，比如将某个应用程序的数据传递给另一个应用程序，或者调用另一个应用程序的功能。 2. 数据共享：API可以用来共享数据，从而使不同的应用程序可以访问同一组数据。这样做可以 ......
最近遇到的一个问题 后端写好的接口，前端怎么获取数据
这是我后端的接口：GET 接口 这是我前端运行的项目地址： 简单使用： 咱门前端使用 颇受好评的 axios 来发起请求 这是它的官网：https://www.axios-http.cn/ 不过要在vue中使用它，就需要先安装 打开终端 输入一下命令 npm install axios 然后在需要使 ......
什么是数据资产
数据资产是指组织或企业所拥有的具有价值和潜在利益的数据资源。它可以包括各种类型的数据，例如结构化数据（如数据库中的表格数据）、半结构化数据（如XML文档、JSON数据）和非结构化数据（如文本文档、图像、视频等）。数据资产具有重要的商业价值，可以用于支持决策、洞察业务趋势、进行分析和预测等。 数据资产 ......
JavaScript——数字超过精度导致数据有误
前言 接口返回的number类型的数据，超过了JavaScript中Number类型的限制，浏览器自动进行了转换； console.log(7232167009634730040) 内容 以下内容来自Claude JavaScript 的 Number 类型可以安全表示的最大整数是 2^53 - 1 ......
玩转MYSQL数据库之--视图详解
前言 从今天开始本系列文章就带各位小伙伴学习数据库技术。数据库技术是Java开发中必不可少的一部分知识内容。也是非常重要的技术。本系列教程由浅入深, 全面讲解数据库体系。 非常适合零基础的小伙伴来学习。 全文大约 【1297】字，不说废话，只讲可以让你学到技术、明白原理的纯干货！本文带有丰富案例及配 ......
sqlite 删除数据后文件size并不会减小,解决办法：
E:\sqlite3>sqlite3 db_stu.sqlite3 "VACUUM;" E:\sqlite3>dir 驱动器 E 中的卷没有标签。 卷的序列号是 0672-3CDA E:\sqlite3 的目录 2023/05/16 17:33 <DIR> . 2023/05/16 17:33 <D ......
基于云原生的物联大数据智能服务
摘要：物联大数据已成为当前物联网系统建设的核心，基于物联大数据的涌现智能和应用以及借此对物理世界的反馈和控制是未来物联网系统的建设目标。 本文分享自华为云社区《基于云原生的物联大数据智能服务》，作者：赵卓峰 、丁维龙 、于淇 / 北方工业大学数据工程研究院、大规模流数据集成与分析北京市重点实验室。 ......
关于使用Serilog配置MySql数据库和appsettings的问题
1、项目使用dtonet 6 WebApi。 2、Nuget包： 用来访问mysql数据库 Pomelo.EntityFrameworkCore.MySql Serilog日志 Serilog 配合dotnet Serilog.AspNetCore 读取环境变量配置 Serilog.Settings ......
提高数据的安全性和可控性，数栈基于 Ranger 实现的 Spark SQL 权限控制实践之路
在企业级应用中，数据的安全性和隐私保护是极其重要的。Spark 作为数栈底层计算引擎之一，必须确保数据只能被授权的人员访问，避免出现数据泄露和滥用的情况。为了实现Spark SQL 对数据的精细化管理及提高数据的安全性和可控性，数栈基于 Apache Ranger 实现了 Spark SQL 对数据 ......
数据结构
数据结构 堆 1.插入一个元素：h[++size] = x； up(size)； 2.求集合中当前最小值：h[1]； 3.删除最小值：h[1] = h[size]; size--; down(1); 4.删除任意一个元素：h[k] = h[size]; size--; up(k) or down(k ......
properties数据处理-类
1、介绍 (1)Properties类 通用的properties数据类型，即不预设sep1和sep2，也不预设是否大小写敏感，不预设是否对键和值去除首尾空白字符。 该类也是其余类的父类，定义属性和方法。部分属性和方法可能被继承重写，而其它则可以直接使用。 (2)Headers类 头部字段，sep1 ......
行政区划代码（使用国务院官方数据）形成树形结构数据表
2022年中华人民共和国行政区划代码 https://www.mca.gov.cn/article/sj/xzqh/1980/202304/20230400047341.shtml 下拉复制 粘贴到excel，导入数据库 表结构为： CREATE TABLE `citynew` ( `id` int ......
shell 中怎样去除数据中^M 字符
这个符号^M在Linux文本文件中能看出来，在Windows系统下看不出来，因为这是windows系统下的回车换行符号。 有2中方法可以去掉这个回车换行符号。 第一种是全文替换，第二中是先搜索字符串，然后用sed命令替换。 方法一**：** 用vim打开文件，输入以下命令 vim filename ......
.NET + SignalR 的反向代理 websocket/http 数据隧道
开源项目TuToDataTunnel： https://github.com/viordash/TuToDataTunnel，这个项目可以满足以下几个需求：使用一个公网 IP 地址和一个 tcp 端口，默认端口为 80 http。Websocket 或 http 隧道传输、性能或可访问性。理想情况下 ......
地铁数据挖掘
最近在看图神经网络的视频，里面使用了北京上海的地铁信息，这里整了一下郑州的地铁信息，直接上代码 # 引包 from bs4 import BeautifulSoup import requests url = 'http://www.zzmetro.com/lines/query/operating ......
oracle数据库重启命令
1、 https://www.cmy.cn/yun/article/y47072.html 1、oracle服务器重启命令是什么 Oracle服务器是面向企业级应用的关系数据库管理系统。在日常使用中，由于各种原因可能需要进行服务器重启。下面是Oracle服务器重启命令的介绍。 Oracle服务器重启 ......
三种方式从jdbc中获取数据库表字段信息
一、整体代码 1、method1：执行select语句获取，select * from dims where 1 = 2 2、method2：执行show create table获取，show create table dims 3、method3：从jdbc数据库连接获取 import lomb ......
druid使用时，发现数据库空闲太久自动关闭连接导致异常的问题
系统启动后，创建了连接池。那如果后续超过数据库配置的最大连接时间，就会单方面的断开连接。 而此时，druid并不知道，所以，在有请求访问进行数据操作的时候，使用到那个已断开的连接，就会报错。 解决方式是: 回收连接池中的链接 实例： timeBetweenEvictionRunsMillis: 10 ......
excel-数据的输入
数据的输入 填充方式 自动填充 方式：通过鼠标下拉方式进行数据的快速填充。 当序列在自定义填充序列时，可进行自动填充 数字、星期、月、季度均可自动填充 自动填充到指定序列 大小写字母录入问题 方式：大写：=CHAR(ROW(A65)) 小写：=CHAR(ROW(A97)) 解决：录入自定义填充序列 ......