数据 持久性 数据备份 分布式
C# EntityFramework+SQLite CodeFirst 创建数据库和数据表
1、安装NuGet包 System.Data.SQLite（System.Data.SQLite.Core、System.Data.SQLite.EF6、System.Data.SQLite.Linq ） SQLite.CodeFirst EntityFramework 2、配置App.config ......
分布式文件系统FastDFS
目录目前系统存在的缺点分布式文件系统FastDFS介绍概念架构文件上传文件下载 目前系统存在的缺点 目前是通过tomcat提供虚拟目录的方式供用户访问；当然也可以通过nginx实现静态资源访问的方式 文件冗余在tomcat挂了的情况下不能提供服务； 目前是单一文件服务的存储（依赖tomcat不能进行 ......
[MFC]过滤数组中重复的数据
之前在帮客户开发一个自动读取物理网卡地址功能的时候，获取到的网卡地址偶尔会出现重复，如下图，无论是单张网卡还是多张网卡都存在这个问题。由于我获取的网卡地址是存放于CStringArray中，所以我得对其中的数据进行去重才能正常地显示网卡地址。 为此，我在网上找到资料，用映射表类CMap的操作符[]来 ......
大型数据库实验三
实验三--熟悉常用的HBase操作 1、列出HBase所有表的信息，例如表名 2、在终端打印出指定的表的所有的就数据 3、向已经创建好的表中添加或者删除指定的列族或列 添加数据： 删除数据： 4、清空指定的表的所有的数据 5、统计表的行数 6、将下面的关系数据库，转换为合适的hbase格式将数据存储 ......
数据结构的两个层次
逻辑结构： 描述数据元素之间的逻辑关系 与数据的存储无关，独立于计算机 是从具体问题抽象出来的数学模型 2.物理结构（存储结构） 数据元素及其关系在计算机存储器中的结构（存储方式） 是数据结构在计算机的表示 关系： 存储结构是逻辑关系的映象与元素本身的映象 逻辑结构是数据结构的抽象，存储结构是数据结 ......
C#winform学习3(C#连接MySQL数据库)
需要引用MySQL.data.dll文件 1.右键引用，如果没有MySQL.data.dll文件则选择浏览 一般这个文件会存放在C:\Program Files (x86)\MySQL\Connector NET 8.0\Assemblies 如果没有，需要去官网自己下载即可，参考：visual s ......
mysql数据量过大，选择分表或分区
1. 水平分表：是对某张表同结构拆分多个表存储数据，对程序逻辑处理稍微麻烦，尤其项目后期优化或改造。例如order 分order_2022 order_2023 如果使用分表，可以用merge分表方式 2.分区：同一张表 分散存储不同磁盘上，来减轻单表数据量访问的压力。变动小，逻辑相对清晰，交给my ......
Xshell通过SSH连接阿里云报错“服务器发送了一个意外的数据包” xshell连接ubuntu
ubuntu连接旧版本就会显示报错 1.登录到阿里云服务器上 2.解决方法 命令： vim /etc/ssh/sshd_config 加到最后一行打开sshd_config并且将下面的复制进去保存，然后重启reboot即可。 KexAlgorithms curve25519-sha256@libss ......
【限流】Redis + Lua 实现分布式限流器
目录Redis + Lua 限流实现1. 导入依赖2. 配置application.properties3. 配置RedisTemplate实例4. 定义限流类型枚举类5. 自定义注解6. 切面代码实现7. 控制层实现8. 测试 Redis + Lua 限流实现 技术栈：自定义注解 + aop + ......
Excel删除重复行数据
要在Excel中删除重复行，可以按照以下步骤操作： 打开包含重复行的Excel文件。 选中你想要检查重复行的数据范围。可以是整个工作表或特定的列。 在Excel菜单栏中选择“数据”选项卡。 在“数据”选项卡中，找到并点击“删除重复项”按钮。这将打开“删除重复项”对话框。 在“删除重复项”对话框中，选 ......
数据类型
数值类型 整数类型表示没有小数部的数字，包含了正整数负整数和0 不可变的数据类型 浮点数类型表示带小数点的数值，整数部分和小数部分组成 int是整数类型 float是浮点数类型 两个浮点数相加结果有可能增加一些不确定的尾数 复数由实数部分和虚数部分组成 实数用部分.real表示 虚数部分用.imag ......
大型数据库实验1
实验环境：linux，Hadoop3.3.0 实验内容与完成情况： 1.熟悉常用的Linux操作 1）cd命令：切换目录 （1） 切换到目录“/usr/local” （2） 切换到当前目录的上一级目录 （3） 切换到当前登录Linux系统的用户的自己的主文件夹 2）ls命令：查看文件与目录 查看目录 ......
通过 MySQL Shell 8.2.0 工具进行数据复制/迁移
一、通过sysbench创造测试数据 1、创造测试数据 [root@hankyoon db_tools]# sysbench --mysql-user=root --mysql-password='xxxxxx' --mysql-socket=/data/mysql/3307/mysql.sock ......
indexDB数据库快速入门
indexDB简介 indexDB本质上就是存储数据，优点不受大小限制，当数据大于 > 5MB 时我们无法通过localStorage、cookie（只能存4k）存储 // 连接数据库 （连接的过程是一个异步的）window.indexedDB.open('库名称', '库版本号') >= 0 co ......
DataGridView绑定数据之后如何修改列值
private void dataGridView1_CellFormatting(object sender, DataGridViewCellFormattingEventArgs e) { if (e == null || e.Value == null || !(sender is Data ......
Python中使用sqlalchemy操作数据库遇到密码包含@的处理方法
欺骗性的oracle12514错误，这就有问题了,努力方向就不对了。。。 密码包含@的处理方法 使用sqlalchemy操作数据库的时候，遇到密码中包含@的时候会报错。因为它是通过@来链接IP地址的，遇到密码里有@就跟语法里的@混乱分不清了。编辑器就会报错。 比如下面这个例子： 用户名：XXXXX ......
你一定看过很多数据可视化示例，但是数据可视化是什么意思？
数据可视化是信息表达和交流的过程，通过使用图表、图形、地图和其他视觉元素，将复杂的数据和统计信息转化为易于理解和分析的图形形式。它有助于揭示数据中的模式、趋势、关联和异常，从而帮助人们更好地理解和解释数据。 数据可视化的目标是将数据呈现出来，使人们能够快速理解关键信息。它通过强调数据之间的关系和比较 ......
昇腾CANN DVPP硬件加速训练数据预处理，友好解决Host CPU预处理瓶
数据加载预处理由host CPU处理，而模型训练计算是在NPU或GPU上处理的，两者一般并行执行，因此训练一次迭代的时间通常是两个处理时间的最大值。 ......
智慧党建平台系统方案和党建大数据应用？
智慧党建平台系统方案和党建大数据应用的介绍说明 一、引言 智慧党建平台系统方案和党建大数据应用被视为推进党的建设工作现代化的重要手段之一。党的建设工作是党的基层组织和党员干部的关键工作内容，通过搭建智慧党建平台系统和应用党建大数据，可以提高党组织的组织能力、服务能力和领导水平，为党的事业发展提供有力 ......
从 SQL 查询优化技巧去看 h2 数据库查询原理
本文目标是：了解查询的核心原理，对比 SQL 查询优化技巧在 h2database 中的落地实现。前提：为了贴近实际应用，本文 Code Insight 基于 BTree 存储引擎。 ......
数据库（Oracle）序列（Sequence）的基本使用
1. Sequence 定义 在Oracle中可以用SEQUENCE生成自增字段。Sequence序列是Oracle中用于生成数字序列的对象，可以创建一个唯一的数字作为主键。 2. 为什么要用 Sequence 你可能有疑问为什么要使用序列？ 不能使用一个存储主键的表并每次递增吗？或者将列设置为AU ......
空间数据可视化之Entity
Cesium在空间数据可视化方面提供了两种类型的API，一种是面向图形开发人员的低级（原始）API，通过Primitive类实现，对于那些对计算机图形学知识很了解的同学可以采用Primitive API；另一种是用于数据驱动的高级（实体）API，通过Entity类实现，相对于Primitive AP ......
MySQL 单表数据最大不要超过多少行？为什么？
1 背景 作为在后端圈开车的多年老司机，是不是经常听到过，“mysql 单表最好不要超过 2000w”,“单表超过 2000w 就要考虑数据迁移了”，“你这个表数据都马上要到 2000w 了，难怪查询速度慢” 这些名言民语就和 “群里只讨论技术，不开车，开车速度不要超过 120 码，否则自动踢群”， ......
通过日志恢复SQL Server的历史数据
通过日志还原 方案一： 前提条件 1.必须有一个完整的备份，且这个备份必须是在修改、删除数据之前做的。 2.在更新、删除数据之后，做日志备份，该log备份将用于还原之前的数据 建议使用备份数据库进行还原操作，确认无误再对原库进行操作，或同步数据 开始还原操作： 此处使用SQL management界 ......
备份下启动springboot项目脚本文件 start.sh
1.将jar包放到和该脚本同级目录 2.记得chmod 777 ./start.sh 赋予执行权限 3.执行./start.sh文件即可 4.重启也可以直接执行此文件 5.如果没有打包配置文件可以在此脚本同级目录创建config目录将yml/properties配置文件放进去 . #!/bin/ba ......
高版本SqlServer数据库还原到低版本数据库
需求：SqlServer2017还原到SqlServer2008数据库 直接备份还原与拷贝文件还原均无法成功 解决方案：1、修改兼容性，再备份数据库，还原(推荐) 2、导出脚本、导入（即数据同步），大数据量不建议使用该方法 ......
linux/docker 版 Sql Server新建的数据库插入中文乱码问题解决方案
SqlServer 插入遇到乱码 原因：在英文系统中，SqlServer默认排序规则为英文字典顺序 解决方案一：容器版 Sql Server ，在创建容器时，可以加上环境变量-e MSSQL_COLLATION=Chinese_PRC_CI_AS -e TZ=Asia/Shanghai 把排序规则设 ......
windows下实现Mysql的本地备份，异地备份
两台服务器均为windows服务器 1、开启文件夹共享 开启异地备份服务器下的文件夹共享，实现本地备份的服务器可以访问到异地备份服务器下的指定文件夹 2、编写备份脚本 该脚本主要实现本地备份数据库脚本后，再将数据库脚本复制到指定服务器的共享文件夹下； @echo off rem 定义以当前日期，当前 ......