数据结构 图形图像vtk单元
当前大数据时代的一个流式日志采集工具——Flume
1.什么是流式日志？ 大数据时代的数据大概的说可以分为流式的data以及批式的data 什么意思呢？ 顾名思义就是，对data进行处理的方式不一样，流式就是像流水一样，不断流入，它是每时每刻都有的，实时的都需要进行收集然后处理； 反观批式data，它是一批一批的来，等到收集到一批（达到某个阈值）da ......
大数据-笔记-1
大数据-笔记-1 文章地址： https://www.cnblogs.com/rabbit-dayi/ 1. 安装 2. 查看三台虚拟机IP 设置静态IP 3. 修改IPV4为manual IP 地址如下： gataway : 192.168.83.2 mask : 24 master: 192.1 ......
MySQL千万级数据库查询怎么提高查询效率
查询效率慢的原因： 1：没有加索引或者索引失效 where条件使用如下语句会索引失效：null、！=、<>、or连接、in（非要使用，可用关键字exist替代）和not in、'%abc%'； 使用参数：num=@num、表达式操作：where num/2=100、函数操作：where substr ......
自己写数据结构
#include<iostream> #include<array> template<typename T,size_t S> class Array { private: T m_data[S]; public: constexpr int Size()const { return S; } T ......
数据采集与融合技术实践四
一、作业内容 作业①: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站：东方财富网：http://quote.east ......
Linux 查看数据库和表
连接数据库 mysql -h localhost -u 用戶名 -p密碼 使用数据库use desk_show; 显示数据表show tables; 显示表结构describe desk6_0; mysql其他命令： 显示数据库 show databases; 创建数据库create databas ......
数据库设计心得
我们的项目是基于隐私包含的众包系统。在设计之前，我们先把需求搞清楚。 业务需求 雇主能发布需求，工人能接单，完成任务。哈哈，听上去还挺简单的，但涉及到雇主取消需求，雇主取消任务，工人根据标签查询需求，工人提交工作文件，工人取消订单这些功能。 初步设计 确定了工人，雇主，管理员，需求，订单，对话，这几 ......
mybatis使用id集合查询数据
dao层 int delUser(@Param("menuId") Integer menuId,@Param("idList") List<String> idList); xml层 <delete id="delUser" > delete FROM user_role_menu WHERE m ......
【故障公告】数据库服务器今年第六次 CPU 100% 故障
自9月第五次数据库服务器 CPU 100% 故障之后，今天下午又出现数据库服务器 CPU 100% 故障，是今年的第六次。自从园子2013年搬上阿里云，几乎每年都会遇到数据库服务器 CPU 100% 问题，但今年创造了新记录，一年还未结束，却已遭遇六次，最困难的一年，连故障也过来凑热闹。今天的故障发... ......
neo4j图数据库
目录neo4j说明docker-compose安装命令创建节点创建节点关系创建节点并建立关系更新节点和关系查询节点和关系删除节点及关系golang执行cypher命令--创建节点golang执行cypher命令2--创建节点+建立关系 neo4j说明 Neo4j是一个高性能的NOSQL图形数据库，它 ......
高级数据结构学习笔记
0. 普适技巧 动态开点：节省空间。 标记永久化：分块的块标记本质就是这个。可以节省空间。 1. 区间最值 & 历史区间最值 link 2. 二维线段树 二维区间静态：二维 ST 表 二维前缀动态：二维树状数组 二维区间动态：二维线段树 例题：Luck and Love 3. 可持久化线段树 可持久 ......
C# EntityFramework+SQLite CodeFirst 创建数据库和数据表
1、安装NuGet包 System.Data.SQLite（System.Data.SQLite.Core、System.Data.SQLite.EF6、System.Data.SQLite.Linq ） SQLite.CodeFirst EntityFramework 2、配置App.config ......
C语言中结构体struct与联合体union
struct（结构体）与union（联合体）是C语言中两种不同的数据结构，两者都是常见的复合数据类型。 定义 结构体（struct） 在C语言中，结构体（struct）指的是一种数据结构，是C语言中复合数据类型（aggregate data type）的一类。结构体可以被声明为变量、指针或数组等，用 ......
关于我半路又学起了单元测试这件事-mocha
学习mocha 大概结构 /** * @desc describe 是全局的入口函数 整个函数使用回调嵌套写法 * * 1.done 在非it函数调用时 若一个使用了 done 则全部函数都要使用 否则无法进入下一步 （迭代器规则），在it中形参声明了 done 就必须要调用 同理 * * 2. 像 ......
[MFC]过滤数组中重复的数据
之前在帮客户开发一个自动读取物理网卡地址功能的时候，获取到的网卡地址偶尔会出现重复，如下图，无论是单张网卡还是多张网卡都存在这个问题。由于我获取的网卡地址是存放于CStringArray中，所以我得对其中的数据进行去重才能正常地显示网卡地址。 为此，我在网上找到资料，用映射表类CMap的操作符[]来 ......
图像γ(指数)变换
指数变换 (伽马变换) 是用来图像加强, 提高暗部细节, 简单来讲就是经过非线性变换, 让图像从曝光强度的线性响应变得更接近人眼感觉的响应, 即将漂白 (相机曝光) 或过暗 (曝光不足) 的图片, 进行矫正。 1. 伽马变换 其中 c 和 γ 为正常数,r为输入值，范围为[0,1],常常先归一化，再 ......
大型数据库实验三
实验三--熟悉常用的HBase操作 1、列出HBase所有表的信息，例如表名 2、在终端打印出指定的表的所有的就数据 3、向已经创建好的表中添加或者删除指定的列族或列 添加数据： 删除数据： 4、清空指定的表的所有的数据 5、统计表的行数 6、将下面的关系数据库，转换为合适的hbase格式将数据存储 ......
数据结构的两个层次
逻辑结构： 描述数据元素之间的逻辑关系 与数据的存储无关，独立于计算机 是从具体问题抽象出来的数学模型 2.物理结构（存储结构） 数据元素及其关系在计算机存储器中的结构（存储方式） 是数据结构在计算机的表示 关系： 存储结构是逻辑关系的映象与元素本身的映象 逻辑结构是数据结构的抽象，存储结构是数据结 ......
C#winform学习3(C#连接MySQL数据库)
需要引用MySQL.data.dll文件 1.右键引用，如果没有MySQL.data.dll文件则选择浏览 一般这个文件会存放在C:\Program Files (x86)\MySQL\Connector NET 8.0\Assemblies 如果没有，需要去官网自己下载即可，参考：visual s ......
基于FPGA的图像sobel边缘提取算法开发,包括tb测试文件以及matlab验证代码
1.算法运行效果图预览 2.算法运行软件版本 vivado2019.2 matlab2022a 3.算法理论概述 图像边缘检测大幅度地减少了数据量，并且剔除了可以认为不相关的信息，保留了图像重要的结构属性。有许多方法用于边缘检测，它们的绝大部分可以划分为两类：基于查找一类和基于零穿越的一类。基于查找 ......
mysql数据量过大，选择分表或分区
1. 水平分表：是对某张表同结构拆分多个表存储数据，对程序逻辑处理稍微麻烦，尤其项目后期优化或改造。例如order 分order_2022 order_2023 如果使用分表，可以用merge分表方式 2.分区：同一张表 分散存储不同磁盘上，来减轻单表数据量访问的压力。变动小，逻辑相对清晰，交给my ......
《转-已验证》本地宿主机器显示Docker 容器中的图像（Docker容器可视化）
我们在Docker容器中运行程序，有的时候需要显示容器中的图像，或在容器中运行一些图形界面的软件、调用摄像头等，而Docker采用的是命令行的工作模式，那么docker容器中的输出图像等如何在宿主屏幕上显示呢，可以采用文件挂载或者网络通信的方式。 1、在本地宿主机器上安装X11界面工具，一般Linu ......
Xshell通过SSH连接阿里云报错“服务器发送了一个意外的数据包” xshell连接ubuntu
ubuntu连接旧版本就会显示报错 1.登录到阿里云服务器上 2.解决方法 命令： vim /etc/ssh/sshd_config 加到最后一行打开sshd_config并且将下面的复制进去保存，然后重启reboot即可。 KexAlgorithms curve25519-sha256@libss ......
Excel删除重复行数据
要在Excel中删除重复行，可以按照以下步骤操作： 打开包含重复行的Excel文件。 选中你想要检查重复行的数据范围。可以是整个工作表或特定的列。 在Excel菜单栏中选择“数据”选项卡。 在“数据”选项卡中，找到并点击“删除重复项”按钮。这将打开“删除重复项”对话框。 在“删除重复项”对话框中，选 ......
数据类型
数值类型 整数类型表示没有小数部的数字，包含了正整数负整数和0 不可变的数据类型 浮点数类型表示带小数点的数值，整数部分和小数部分组成 int是整数类型 float是浮点数类型 两个浮点数相加结果有可能增加一些不确定的尾数 复数由实数部分和虚数部分组成 实数用部分.real表示 虚数部分用.imag ......
大型数据库实验1
实验环境：linux，Hadoop3.3.0 实验内容与完成情况： 1.熟悉常用的Linux操作 1）cd命令：切换目录 （1） 切换到目录“/usr/local” （2） 切换到当前目录的上一级目录 （3） 切换到当前登录Linux系统的用户的自己的主文件夹 2）ls命令：查看文件与目录 查看目录 ......
通过 MySQL Shell 8.2.0 工具进行数据复制/迁移
一、通过sysbench创造测试数据 1、创造测试数据 [root@hankyoon db_tools]# sysbench --mysql-user=root --mysql-password='xxxxxx' --mysql-socket=/data/mysql/3307/mysql.sock ......
表单基本结构，控件
总结 1、表单的基本结构 二、表单的常用控件 1、文本输入框 2、密码输入框 3、单选框: 一定要写value 4、多选框:一定要写value 5、隐藏域 6、提交按钮 7、重置按钮 8、普通按钮 9、文本域 10、下拉框 11、禁用控件disabld 12、lable标签 13、fileldset ......