数据 持久性 数据备份 分布式
GB28181/GB35114国标平台LiveGBS适配国产信创环境，使用国产数据库达梦数据库、高斯数据库、瀚高数据库的配置方法
1、如何配置切换信创达梦数据库？ livecms.ini -> [db]下面添加配置如： ... [db] dialect=dm url =dm://SYSDBA:Aa12345678@localhost:5236/livegbs 2、如何配置切换高斯数据库？ livecms.ini -> [db] ......
关于Dataframe数据保存出现的问题
问题描述： 读入csv文件，执行以下程序 import pandas as pd import numpy as np # pd.set_option('max_colwidth',2000) sub_file_name="submission.csv" df = pd.read_csv(sub_f ......
如何下载全国水系、铁路、土地、交通设施和运输相关数据？
通过以下方法可以将全国水系、铁路、土地、交通设施和运输相关数据下载到本机。 方法/步骤 下载GIS地图下载器 http://www.geosaas.com/download/mapdownloader.exe，安装完成后桌面上出现”GIS地图下载器“图标。 2、双击桌面图标打开”GIS地图下载器 ......
如何下载全国道路（路网）数据？
通过以下方法可以将全国道路（路网）数据下载到本机。 方法/步骤 下载GIS地图下载器 http://www.geosaas.com/download/mapdownloader.exe，安装完成后桌面上出现”GIS地图下载器“图标。 2、双击桌面图标打开”GIS地图下载器“ 3、在要下载的市或县 ......
excel导出datatable数据
使用NPPlus处理excel private void SaveToExcel(string excelPath, DataTable dataTable) { // excelPath 为excel文件路径，如果没有，需要使用 FileStream 来创建，而不是使用 FileInfo Exce ......
2、python脚本采集温州市数据开放平台数据
1、采集网址url：https://data.wenzhou.gov.cn/jdop_front/index.do 需求：获取数据资源-数据来源单位（龙湾区50）的信息 具体要获取的信息如下：名称、摘要、更新、数源单位、地址、联系方式、数据领域、访问次数、下载次数、更新日期、发布日期、数据量。 2、 ......
Mysql数据库查询之模糊查询
1，模糊查询有"明"这个字的数据。 2，模糊查询结尾是"明"的数据。 3，模糊查询开头是"明"的数据。 4，模糊查询以"明"为结尾的,长度为三个字的数据,如"李小明" 5，查询前三个字符为XX网,后面任意匹配。 6，可以用POSITION关键字进行模糊查询，等同于："like '%明%'" ......
数据库设计心得
数据库设计心得 我们的项目是合同智审平台，在设计数据库时最主要的就是找准三个关键的部分，用户，合同，法律，围绕这三个主体来设计表，建立相关的关系 表设计 下面是创建的表以及每个表的详细解释 1. 操作日志表：这个表用于记录用户的操作信息，包括操作提交时间、用户类型、操作内容和操作是否成功等。 ......
编程最佳外挂：批量数据分析与可视化，CodeGeeX工具箱一键完成
ChatGLM3代模型的Code Interpreter能力，本周已经在VSCode里的CodeGeeX插件产品中，以开发者工具箱的产品形态上线。 下图以VSCode插件为例：在CodeGeeX的侧边栏，和智能问答AskCodeGeeX并列出现的工具箱标签，用户登录后就可以直接打开使用。 Code ......
爬虫中间件和下载中间件，scrapy集成selenium，源码去重规则（布隆过滤器），分布式爬虫
1 爬虫中间件和下载中间件 ⏳ 1.1 爬虫中间件(一般不用) # 第一步：写个爬虫中间件类 class ScrapyDemoSpiderMiddleware: @classmethod def from_crawler(cls, crawler): # This method is used by ......
支持可视化呈现数据库字段级和血缘关系的工具，太强了吧！
1 简介 SQLFlow 可跟踪超过 20 种主要数据库(包括 Snowflake、Hive、SparkSQL、Teradata、Oracle、SQL Server、AWS Redshift、BigQuery 等)的字段级数据血缘。 从查询历史记录、ETL 脚本、Github/Bitbucket、本 ......
1.数据库三大范式
第一范式(1NF):列的原子性 数据库表中的每个字段都是原子性的，即不可再分的。 应拆分为 第二范式(2NF):消除部分依赖 满足一范式的前提下，表中不存在部分依赖。 在联合主键的情况下，非主键列不能只依赖主键的一部分。 联合主键：学生ID和课程ID，且满足1NF 依赖情况：学生ID和课程ID决定得 ......
数据泄露成LLM应用最大障碍，如何用RPA Agent智能体破解谜题？
大语言模型数据泄露堪忧，超自动化Agent成解决之道 数据泄露成LLM应用最大障碍，如何用RPA Agent智能体破解谜题？ 从RPA Agent智能体安全机制，看AI Agent如何破解LLM应用安全谜题 GPTs数据泄露大语言模型安全刻不容缓，如何用AI Agent提升LLM应用安全系数？ 文/ ......
node+express服务给前端提供markdown数据，前端渲染md文件在页面上
本文介绍后端怎么把markdown文件发给前端，前端又怎么渲染在页面中。 先看效果图 md文件代码： 前端网页渲染： 先介绍node+express怎么提供接口: const express = require("express"); const router = express.Router(); ......
11月13日js数据类型以及常见的方法
目录js数据类型1.动态类型2.数值（number类型）3.常用方法1.parseInt方法2.parseFloat方法特殊的地方3.字符串（string）4.常见的方法索引和切片的相同点以及不同点 js数据类型 1.动态类型 首先js是一种动态类型的语言，这意味着变量在运行时可以被赋予不同的数据类 ......
对数据类型进行补充——逻辑类型及运算
一.关于stdbool.h（布尔类型文件） (1)C语言标准（C89）没有定义布尔类型，使用true/false会出现错误； (2)头文件：#include<stdbool.h>； (3)输出仍然为整数，而不会是true/false的值； 二.逻辑运算（对逻辑量进行运算，结果只有0或1） ————— ......
人大金仓数据库的快速安装部署
人大金仓数据库的快速安装部署 说明 人大金仓数据库是 1999年以王珊教授为代表，中国人民大学一批最早在国内开展数据库教学、科研、开发的专家， 创立了我国第 一家数据库公司——人大金仓。 王珊教授师从萨师煊教授. 是中国人民大学的博士生导师 人大金仓的创立时间实际上是比武汉达梦还要早一些(达梦成立于 ......
使用 Chrome 开发者工具获取网站的 LCP 数据
Largest Contentful Paint（LCP）是一个重要的、用户感知性能的测量指标，它报告了在页面加载过程中，视口内最大可见元素呈现的时间。理想的 LCP 时间小于 2.5 秒。 那么，我们如何使用 Chrome 浏览器来度量一个网站的 LCP 呢？下面是一个详细的步骤说明。 首先，你需 ......
查询window开启的服务及命令跟踪服务器计算机 TCP/IP 数据包
一、要求在 DOS 窗口中使用一条命令查询服务器计算机查询该计算机开启了哪些服务 实现过程：1）WIN + R调出命令提示框；2）输入DOS命令：net start 二、在服务器计算机上通过命令跟踪服务器计算机 TCP/IP 数据包从该计算机到赛场云服务器所通过的路径。 实现过程：1）WIN + R ......
升讯威在线客服系统的并发高性能数据处理技术：高性能OSS文件存储
最近客服系统成功经受住了客户现场组织的压力测试，获得了客户的认可。客户组织多名客服上线后，所有员工同一时间打开访客页面疯狂不停的给在线客服发消息，系统稳定无异常无掉线，客服回复消息正常。消息实时到达无任何延迟。 ......
给层级目录添加分类父类(父类为临时组合节点,非数据库数据)
/** * Ztree树结构实体类 * * @author ctspn */@Datapublic class Tree implements Serializable{ private static final long serialVersionUID = 1L; /** 节点主键 */ pri ......
大型数据库实验六
实验六--熟悉Hive的基本操作 1、创建一个内部表，字段分隔符为英文逗号 2、创建一个外部分区表dividends（分区字段为exchange和symbol），字段分隔符为英文逗号 3、从stocks.csv向stocks导入数据 4、创建一个未分区的外部表dividends_unpartitio ......
使用GPT4进行数据分析，竟然被他骗了
上周，OpenAI开发者大会上OpenAI发布了一系列震撼人心的功能。而最让我感兴趣的，就是GPT4的数据分析功能了。话不多说，赶紧上号体验一下。 在最新登录GPT4的时候，都会有下面这个提示，目前已经支持联网，分析数据，生成图片的功能了。这是plus用户都可以使用的。 然后我们可以在上方很容易的选 ......
Innodb索引数据结构灵魂拷问
问题1：Innodb数据结构为什么要用B+树，如果比红黑树要好的话，为什么Java HashMap不用B+树而用红黑树？ 如果数据全在内存的话，红黑树要比B+树好，查找次数比B+树要少很多，B+树适合磁盘IO，因为一次IO可以加载很多节点数据，查找次数虽多但IO次数少。红黑树是瘦长的，B+树是矮胖的 ......
不会这5个Excel函数，别说你会做数据分析？
当涉及数据分析时，Excel是一个非常有用的工具，而掌握一些核心函数将大大提高你在数据处理和分析方面的能力。以下是我对五个重要的Excel函数的详细介绍： 1. VLOOKUP 函数 VLOOKUP 函数是 Excel 中最常用的查找函数之一。它允许你在一个范围内搜索特定的数值，并返回该数值所在行的 ......
为什么MySQL不建议使用delete删除数据？
DELETE操作的影响,MySQL使用delete删除数据,MySQL性能优化与数据清理,MySQL数据恢复与误操作,MySQL锁定和并发性能 ......
ES数据查询
要查询 Elasticsearch 的集群设置中的 cluster.routing.allocation.enable 和 cluster.routing.allocation.disk.watermark 参数，你可以使用 Elasticsearch 的 REST API 发起一个 GET 请求来 ......