数据处理 字符串 脚本 字符
数据采集与融合技术实践四
一、作业内容 作业①: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站：东方财富网：http://quote.east ......
Linux 查看数据库和表
连接数据库 mysql -h localhost -u 用戶名 -p密碼 使用数据库use desk_show; 显示数据表show tables; 显示表结构describe desk6_0; mysql其他命令： 显示数据库 show databases; 创建数据库create databas ......
数据库设计心得
我们的项目是基于隐私包含的众包系统。在设计之前，我们先把需求搞清楚。 业务需求 雇主能发布需求，工人能接单，完成任务。哈哈，听上去还挺简单的，但涉及到雇主取消需求，雇主取消任务，工人根据标签查询需求，工人提交工作文件，工人取消订单这些功能。 初步设计 确定了工人，雇主，管理员，需求，订单，对话，这几 ......
mybatis使用id集合查询数据
dao层 int delUser(@Param("menuId") Integer menuId,@Param("idList") List<String> idList); xml层 <delete id="delUser" > delete FROM user_role_menu WHERE m ......
【故障公告】数据库服务器今年第六次 CPU 100% 故障
自9月第五次数据库服务器 CPU 100% 故障之后，今天下午又出现数据库服务器 CPU 100% 故障，是今年的第六次。自从园子2013年搬上阿里云，几乎每年都会遇到数据库服务器 CPU 100% 问题，但今年创造了新记录，一年还未结束，却已遭遇六次，最困难的一年，连故障也过来凑热闹。今天的故障发... ......
neo4j图数据库
目录neo4j说明docker-compose安装命令创建节点创建节点关系创建节点并建立关系更新节点和关系查询节点和关系删除节点及关系golang执行cypher命令--创建节点golang执行cypher命令2--创建节点+建立关系 neo4j说明 Neo4j是一个高性能的NOSQL图形数据库，它 ......
mysql字符串拼接的4种方式总结
前言 第一种： 第二种： 第三种： 第四种（运算，只对数字有效）： 附：MySQL group_concat()详解 总结 前言 总是记不住字符串拼接，每次都要百度去搜索，所以在这里记录一下，好方便后续的查找，如有错误和问题可以提出，谢谢。 字符串拼接分为几种方式，在这里会一一举例写出： 第一种： ......
高级数据结构学习笔记
0. 普适技巧 动态开点：节省空间。 标记永久化：分块的块标记本质就是这个。可以节省空间。 1. 区间最值 & 历史区间最值 link 2. 二维线段树 二维区间静态：二维 ST 表 二维前缀动态：二维树状数组 二维区间动态：二维线段树 例题：Luck and Love 3. 可持久化线段树 可持久 ......
C# EntityFramework+SQLite CodeFirst 创建数据库和数据表
1、安装NuGet包 System.Data.SQLite（System.Data.SQLite.Core、System.Data.SQLite.EF6、System.Data.SQLite.Linq ） SQLite.CodeFirst EntityFramework 2、配置App.config ......
[MFC]过滤数组中重复的数据
之前在帮客户开发一个自动读取物理网卡地址功能的时候，获取到的网卡地址偶尔会出现重复，如下图，无论是单张网卡还是多张网卡都存在这个问题。由于我获取的网卡地址是存放于CStringArray中，所以我得对其中的数据进行去重才能正常地显示网卡地址。 为此，我在网上找到资料，用映射表类CMap的操作符[]来 ......
大型数据库实验三
实验三--熟悉常用的HBase操作 1、列出HBase所有表的信息，例如表名 2、在终端打印出指定的表的所有的就数据 3、向已经创建好的表中添加或者删除指定的列族或列 添加数据： 删除数据： 4、清空指定的表的所有的数据 5、统计表的行数 6、将下面的关系数据库，转换为合适的hbase格式将数据存储 ......
数据结构的两个层次
逻辑结构： 描述数据元素之间的逻辑关系 与数据的存储无关，独立于计算机 是从具体问题抽象出来的数学模型 2.物理结构（存储结构） 数据元素及其关系在计算机存储器中的结构（存储方式） 是数据结构在计算机的表示 关系： 存储结构是逻辑关系的映象与元素本身的映象 逻辑结构是数据结构的抽象，存储结构是数据结 ......
pwn环境搭建脚本
目录pwn环境搭建脚本 pwn环境搭建脚本 分享在ubuntu系统上一站式搭建pwn环境的脚本。 安装脚本如下，挂着梯子的情况下可以直接使用国外的官方源，建议安装的ubuntu系统版本至少为ubuntu:18.04，用可使用sudo命令的普通用户安装而不建议直接使用root用户安装。 如果无法访问国 ......
C#winform学习3(C#连接MySQL数据库)
需要引用MySQL.data.dll文件 1.右键引用，如果没有MySQL.data.dll文件则选择浏览 一般这个文件会存放在C:\Program Files (x86)\MySQL\Connector NET 8.0\Assemblies 如果没有，需要去官网自己下载即可，参考：visual s ......
mysql数据量过大，选择分表或分区
1. 水平分表：是对某张表同结构拆分多个表存储数据，对程序逻辑处理稍微麻烦，尤其项目后期优化或改造。例如order 分order_2022 order_2023 如果使用分表，可以用merge分表方式 2.分区：同一张表 分散存储不同磁盘上，来减轻单表数据量访问的压力。变动小，逻辑相对清晰，交给my ......
Xshell通过SSH连接阿里云报错“服务器发送了一个意外的数据包” xshell连接ubuntu
ubuntu连接旧版本就会显示报错 1.登录到阿里云服务器上 2.解决方法 命令： vim /etc/ssh/sshd_config 加到最后一行打开sshd_config并且将下面的复制进去保存，然后重启reboot即可。 KexAlgorithms curve25519-sha256@libss ......
Excel删除重复行数据
要在Excel中删除重复行，可以按照以下步骤操作： 打开包含重复行的Excel文件。 选中你想要检查重复行的数据范围。可以是整个工作表或特定的列。 在Excel菜单栏中选择“数据”选项卡。 在“数据”选项卡中，找到并点击“删除重复项”按钮。这将打开“删除重复项”对话框。 在“删除重复项”对话框中，选 ......
数据类型
数值类型 整数类型表示没有小数部的数字，包含了正整数负整数和0 不可变的数据类型 浮点数类型表示带小数点的数值，整数部分和小数部分组成 int是整数类型 float是浮点数类型 两个浮点数相加结果有可能增加一些不确定的尾数 复数由实数部分和虚数部分组成 实数用部分.real表示 虚数部分用.imag ......
大型数据库实验1
实验环境：linux，Hadoop3.3.0 实验内容与完成情况： 1.熟悉常用的Linux操作 1）cd命令：切换目录 （1） 切换到目录“/usr/local” （2） 切换到当前目录的上一级目录 （3） 切换到当前登录Linux系统的用户的自己的主文件夹 2）ls命令：查看文件与目录 查看目录 ......
通过 MySQL Shell 8.2.0 工具进行数据复制/迁移
一、通过sysbench创造测试数据 1、创造测试数据 [root@hankyoon db_tools]# sysbench --mysql-user=root --mysql-password='xxxxxx' --mysql-socket=/data/mysql/3307/mysql.sock ......
indexDB数据库快速入门
indexDB简介 indexDB本质上就是存储数据，优点不受大小限制，当数据大于 > 5MB 时我们无法通过localStorage、cookie（只能存4k）存储 // 连接数据库 （连接的过程是一个异步的）window.indexedDB.open('库名称', '库版本号') >= 0 co ......
DataGridView绑定数据之后如何修改列值
private void dataGridView1_CellFormatting(object sender, DataGridViewCellFormattingEventArgs e) { if (e == null || e.Value == null || !(sender is Data ......
牛客[编程题] HJ29 字符串加解密
HJ29 字符串加解密 中等 通过率：25.47% 时间限制：1秒 空间限制：32M 描述 对输入的字符串进行加解密，并输出。 加密方法为： 当内容是英文字母时则用该英文字母的后一个字母替换，同时字母变换大小写,如字母a时则替换为B；字母Z时则替换为a； 当内容是数字时则把该数字加1，如0替换1，1 ......
Python中使用sqlalchemy操作数据库遇到密码包含@的处理方法
欺骗性的oracle12514错误，这就有问题了,努力方向就不对了。。。 密码包含@的处理方法 使用sqlalchemy操作数据库的时候，遇到密码中包含@的时候会报错。因为它是通过@来链接IP地址的，遇到密码里有@就跟语法里的@混乱分不清了。编辑器就会报错。 比如下面这个例子： 用户名：XXXXX ......
最长平衡子字符串
题目概述：给定一字符串s(只由字符0和1组成)，返回其平衡子串的最长的长度。所谓平衡子串就是指在该字串中所有的0都在1之前，且0的数量和1的数量相等 解题思路：由于数据范围比较小，所以直接暴力枚举所有子串，并判断是否为平衡子串更新答案即可。 时间复杂度：\(O(n^4)\) 代码： class So ......
打工笔记--------------------------------c#处理ZIP文件帮助类
一，代码 using System; using System.IO; using ICSharpCode.SharpZipLib.Checksums; using ICSharpCode.SharpZipLib.Zip; namespace Helper { public class ZipHel ......
9.找到字符串中所有字母异位词
题目概述：给定字符串s，p，找到s字符串子串中所有p的异位词，返回该字串的起始位置。异位词：由相同字母组成。 解题思路：由于其给定了p，所以枚举s中和p长度相同的子串，并判断是否为p的异位词(将p和子串都进行排序处理，再使用equals判断)。需要注意的是java中的substring(i,j)方法 ......