数据 数据备份freefilesync备份
Django 三板斧的使用 链接数据库
Django 三板斧的使用 全局配置文件 静态文件的配置 request对象的几个方法 pycharm链接数据库MySQL Django链接数据库MySQL ORM的使用 今日内容详细 三板斧的使用 三个方法： HttpResponse render redirect def index(reque ......
当前大数据时代的一个流式日志采集工具——Flume
1.什么是流式日志？ 大数据时代的数据大概的说可以分为流式的data以及批式的data 什么意思呢？ 顾名思义就是，对data进行处理的方式不一样，流式就是像流水一样，不断流入，它是每时每刻都有的，实时的都需要进行收集然后处理； 反观批式data，它是一批一批的来，等到收集到一批（达到某个阈值）da ......
大数据-笔记-1
大数据-笔记-1 文章地址： https://www.cnblogs.com/rabbit-dayi/ 1. 安装 2. 查看三台虚拟机IP 设置静态IP 3. 修改IPV4为manual IP 地址如下： gataway : 192.168.83.2 mask : 24 master: 192.1 ......
MySQL千万级数据库查询怎么提高查询效率
查询效率慢的原因： 1：没有加索引或者索引失效 where条件使用如下语句会索引失效：null、！=、<>、or连接、in（非要使用，可用关键字exist替代）和not in、'%abc%'； 使用参数：num=@num、表达式操作：where num/2=100、函数操作：where substr ......
自己写数据结构
#include<iostream> #include<array> template<typename T,size_t S> class Array { private: T m_data[S]; public: constexpr int Size()const { return S; } T ......
数据采集与融合技术实践四
一、作业内容 作业①: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站：东方财富网：http://quote.east ......
Linux 查看数据库和表
连接数据库 mysql -h localhost -u 用戶名 -p密碼 使用数据库use desk_show; 显示数据表show tables; 显示表结构describe desk6_0; mysql其他命令： 显示数据库 show databases; 创建数据库create databas ......
数据库设计心得
我们的项目是基于隐私包含的众包系统。在设计之前，我们先把需求搞清楚。 业务需求 雇主能发布需求，工人能接单，完成任务。哈哈，听上去还挺简单的，但涉及到雇主取消需求，雇主取消任务，工人根据标签查询需求，工人提交工作文件，工人取消订单这些功能。 初步设计 确定了工人，雇主，管理员，需求，订单，对话，这几 ......
mybatis使用id集合查询数据
dao层 int delUser(@Param("menuId") Integer menuId,@Param("idList") List<String> idList); xml层 <delete id="delUser" > delete FROM user_role_menu WHERE m ......
【故障公告】数据库服务器今年第六次 CPU 100% 故障
自9月第五次数据库服务器 CPU 100% 故障之后，今天下午又出现数据库服务器 CPU 100% 故障，是今年的第六次。自从园子2013年搬上阿里云，几乎每年都会遇到数据库服务器 CPU 100% 问题，但今年创造了新记录，一年还未结束，却已遭遇六次，最困难的一年，连故障也过来凑热闹。今天的故障发... ......
neo4j图数据库
目录neo4j说明docker-compose安装命令创建节点创建节点关系创建节点并建立关系更新节点和关系查询节点和关系删除节点及关系golang执行cypher命令--创建节点golang执行cypher命令2--创建节点+建立关系 neo4j说明 Neo4j是一个高性能的NOSQL图形数据库，它 ......
高级数据结构学习笔记
0. 普适技巧 动态开点：节省空间。 标记永久化：分块的块标记本质就是这个。可以节省空间。 1. 区间最值 & 历史区间最值 link 2. 二维线段树 二维区间静态：二维 ST 表 二维前缀动态：二维树状数组 二维区间动态：二维线段树 例题：Luck and Love 3. 可持久化线段树 可持久 ......
C# EntityFramework+SQLite CodeFirst 创建数据库和数据表
1、安装NuGet包 System.Data.SQLite（System.Data.SQLite.Core、System.Data.SQLite.EF6、System.Data.SQLite.Linq ） SQLite.CodeFirst EntityFramework 2、配置App.config ......
[MFC]过滤数组中重复的数据
之前在帮客户开发一个自动读取物理网卡地址功能的时候，获取到的网卡地址偶尔会出现重复，如下图，无论是单张网卡还是多张网卡都存在这个问题。由于我获取的网卡地址是存放于CStringArray中，所以我得对其中的数据进行去重才能正常地显示网卡地址。 为此，我在网上找到资料，用映射表类CMap的操作符[]来 ......
大型数据库实验三
实验三--熟悉常用的HBase操作 1、列出HBase所有表的信息，例如表名 2、在终端打印出指定的表的所有的就数据 3、向已经创建好的表中添加或者删除指定的列族或列 添加数据： 删除数据： 4、清空指定的表的所有的数据 5、统计表的行数 6、将下面的关系数据库，转换为合适的hbase格式将数据存储 ......
数据结构的两个层次
逻辑结构： 描述数据元素之间的逻辑关系 与数据的存储无关，独立于计算机 是从具体问题抽象出来的数学模型 2.物理结构（存储结构） 数据元素及其关系在计算机存储器中的结构（存储方式） 是数据结构在计算机的表示 关系： 存储结构是逻辑关系的映象与元素本身的映象 逻辑结构是数据结构的抽象，存储结构是数据结 ......
C#winform学习3(C#连接MySQL数据库)
需要引用MySQL.data.dll文件 1.右键引用，如果没有MySQL.data.dll文件则选择浏览 一般这个文件会存放在C:\Program Files (x86)\MySQL\Connector NET 8.0\Assemblies 如果没有，需要去官网自己下载即可，参考：visual s ......
mysql数据量过大，选择分表或分区
1. 水平分表：是对某张表同结构拆分多个表存储数据，对程序逻辑处理稍微麻烦，尤其项目后期优化或改造。例如order 分order_2022 order_2023 如果使用分表，可以用merge分表方式 2.分区：同一张表 分散存储不同磁盘上，来减轻单表数据量访问的压力。变动小，逻辑相对清晰，交给my ......
Xshell通过SSH连接阿里云报错“服务器发送了一个意外的数据包” xshell连接ubuntu
ubuntu连接旧版本就会显示报错 1.登录到阿里云服务器上 2.解决方法 命令： vim /etc/ssh/sshd_config 加到最后一行打开sshd_config并且将下面的复制进去保存，然后重启reboot即可。 KexAlgorithms curve25519-sha256@libss ......
Excel删除重复行数据
要在Excel中删除重复行，可以按照以下步骤操作： 打开包含重复行的Excel文件。 选中你想要检查重复行的数据范围。可以是整个工作表或特定的列。 在Excel菜单栏中选择“数据”选项卡。 在“数据”选项卡中，找到并点击“删除重复项”按钮。这将打开“删除重复项”对话框。 在“删除重复项”对话框中，选 ......
数据类型
数值类型 整数类型表示没有小数部的数字，包含了正整数负整数和0 不可变的数据类型 浮点数类型表示带小数点的数值，整数部分和小数部分组成 int是整数类型 float是浮点数类型 两个浮点数相加结果有可能增加一些不确定的尾数 复数由实数部分和虚数部分组成 实数用部分.real表示 虚数部分用.imag ......
大型数据库实验1
实验环境：linux，Hadoop3.3.0 实验内容与完成情况： 1.熟悉常用的Linux操作 1）cd命令：切换目录 （1） 切换到目录“/usr/local” （2） 切换到当前目录的上一级目录 （3） 切换到当前登录Linux系统的用户的自己的主文件夹 2）ls命令：查看文件与目录 查看目录 ......
通过 MySQL Shell 8.2.0 工具进行数据复制/迁移
一、通过sysbench创造测试数据 1、创造测试数据 [root@hankyoon db_tools]# sysbench --mysql-user=root --mysql-password='xxxxxx' --mysql-socket=/data/mysql/3307/mysql.sock ......
indexDB数据库快速入门
indexDB简介 indexDB本质上就是存储数据，优点不受大小限制，当数据大于 > 5MB 时我们无法通过localStorage、cookie（只能存4k）存储 // 连接数据库 （连接的过程是一个异步的）window.indexedDB.open('库名称', '库版本号') >= 0 co ......
DataGridView绑定数据之后如何修改列值
private void dataGridView1_CellFormatting(object sender, DataGridViewCellFormattingEventArgs e) { if (e == null || e.Value == null || !(sender is Data ......
Python中使用sqlalchemy操作数据库遇到密码包含@的处理方法
欺骗性的oracle12514错误，这就有问题了,努力方向就不对了。。。 密码包含@的处理方法 使用sqlalchemy操作数据库的时候，遇到密码中包含@的时候会报错。因为它是通过@来链接IP地址的，遇到密码里有@就跟语法里的@混乱分不清了。编辑器就会报错。 比如下面这个例子： 用户名：XXXXX ......
你一定看过很多数据可视化示例，但是数据可视化是什么意思？
数据可视化是信息表达和交流的过程，通过使用图表、图形、地图和其他视觉元素，将复杂的数据和统计信息转化为易于理解和分析的图形形式。它有助于揭示数据中的模式、趋势、关联和异常，从而帮助人们更好地理解和解释数据。 数据可视化的目标是将数据呈现出来，使人们能够快速理解关键信息。它通过强调数据之间的关系和比较 ......