数据处理 字符串 脚本 字符
Python利用pandas进行数据合并
当使用Python中的pandas库时，merge函数是用于合并（或连接）两个数据框（DataFrame）的重要工具。它类似于SQL中的JOIN操作，允许你根据一个或多个键（key）将两个数据框连接起来。 merge函数的基本语法如下： pd.merge( left, # 要合并的左侧 DataFr ......
【GJOI 2023.11.13 T2】 字符串匹配
字符串匹配 题意：给出两个字符串 \(a,b\) ，求： \[\sum_{1 \le l \le r\le n} \sum_{l\le i \le j\le r}(a[l...r] 回文)(a[i...j]==b) \times (r-l+1) mod 2 \]其中 \(n,m \le 10^6\) ......
数据库相关知识整理
关系代数 U 并集 Union 结构相同 取所有部分 n 交集 取相同部分 - 差集 减掉相同的部分 x 笛卡尔积 列：R列数+S列数；行：R行数*S行数 关系代数运算 投影 选择 连接 除 Sql语言 DDL Data Definition Language，即数据定义语言.数据定义语言是由SQL ......
13、SpringMVC之异常处理器
13.1、环境搭建 创建名为spring_mvc_exception的新module，过程参考9.1节和9.5节 13.1.1、创建错误提示页 <!DOCTYPE html> <html lang="en" xmlns:th="http://www.thymeleaf.org"> <head> <m ......
js处理前端页面复选框多页复选同时生效的问题
虽然是后端开发，但在实际的工作中难免会碰到一些前端相关的任务需要自己处理，下面就是本人开发工作中处理的前端相关分页复选的问题。总结一下，以备日后重复遇到：<script type="text/javascript"> //初始化数据 $(function () { $('#queryButton') ......
HackerGPT 黑客技术、工具和策略的广泛数据库AI
黑客GPT HackerGPT 是您在黑客世界中黑客的数字伙伴。这款人工智能助手在设计时考虑到了黑客黑客的独特需求，黑客知识和帮助的最前沿。HackerGPT 配备了包含黑客技术、工具和策略的广泛的数据库，它不仅仅是一个信息资源，它还是您黑客之旅的积极参与者。无论您是想要学习技巧的初学者，还是寻求更 ......
Databend 与海外某电信签约：共创海外电信数据仓库新纪元
海外某电信，是某国的主要国有电信服务供应商，不仅致力于为民众和企业提供全面的电信服务，还肩负着推动国家通信基础设施和信息技术进步的重任。在数字化转型的关键时期，海外某电信选择与 Databend 携手合作，开启了数据驱动业务决策的新篇章。 为什么选择 Databend 海外某电信面临的主要挑战是随着 ......
数据采集与融合技术实践作业四
数据采集与融合技术实践作业四 码云链接 第三次作业 作业1： 要求：熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 代码如下所示 ......
Shell脚本编程
一、Shell脚本执行的几种方式 1.Shell脚本中用#表示注释，相当于C语言中的//注释，但如何#位于第一行开头，并且是#!（称为Shebang）则例外，它表示该脚本使用后面指定的解释器/bin/sh解释执行，如果把这个脚本文件加上可执行权限然后执行： 保存执行后： 上述脚本直接以./test. ......
shell脚本之“sort“、“uniq“、“tr“、“cut“、“split“、“paste“以及“eval“命令详解
一、sort命令 1.1、作用 以行为单位对文件内容进行排序 也可以根据不同的数据类型来排序 1.2、语法格式 sort [选项] 参数 cat file | sort 选项 1.3、常用选项 -f∶ 忽略大小写，会将小写字母都转换为大写字母来进行比较； -b∶ 忽略每行前面的空格； -n∶ 按照数 ......
Windows下如何快速移动MySQL/MariaDB数据库文件
近期遇到一个要迁移数据库的问题，用户说不希望数据库文件存在于C盘。查了一下资料，这里做个总结。这个方法适用于MySQL和MariaDB。 步骤如下： 1、停止数据库服务 2、将数据库移动到需要迁移的路径 3、修改安装路径data目录下的my.ini文件 4、将 datadir=xxx改成需要迁移的路 ......
替换文件中字符串的脚本
# 打开文件并读取内容 with open('/etc/network/interfaces.d/eth0', 'r') as file: file_content = file.read() # 将所有的字符串192.168.1.91替换为192.168.5.91 new_content = fi ......
如何使用excel对数据表单进行转置
要在Excel中对数据表单进行转置，可以按照以下步骤进行操作： 1. 打开Excel，并打开包含要转置的数据表单的工作簿。 2. 选中要转置的数据表单区域。确保选中的区域包含所有要转置的数据。 3. 在Excel的顶部菜单栏中找到“开始”选项卡，然后在“剪贴板”组中找到“剪切”按钮。 4. 单击“剪 ......
数据科学和计算密集型任务的10个主题
以下是数据科学和计算密集型任务中的十个主题： 1. 数据清洗和预处理：数据科学中的第一步通常是清洗和预处理数据，包括处理缺失值、异常值、重复值和噪声等。 2. 特征工程：特征工程是从原始数据中提取有用的特征，以供机器学习模型使用。这包括特征选择、特征变换和特征生成等技术。 3. 数据可视化：数据可视 ......
常用的脚本语言简介
常用的脚本语言有以下几种： 1. Python：Python是一种通用的高级编程语言，具有简洁、易读和强大的特点。它被广泛用于数据分析、机器学习、Web开发、自动化脚本等领域。 2. Bash：Bash是一种Unix Shell脚本语言，主要用于在Linux和Unix系统中编写和执行命令行脚本。它提 ......
加密数据如何进行模糊查询
一、简介 为了数据安全我们在开发过程中经常会对重要的数据进行加密存储，常见的有：密码、手机号、电话号码、详细地址、银行卡号、信用卡验证码等信息，这些信息对加解密的要求也不一样，比如说密码我们需要加密存储，一般使用的都是不可逆的慢hash算法，慢hash算法可以避免暴力破解（典型的用时间换安全性）。 ......
Python学习 —— 内置数据类型
写在前面 接上文《Python学习 —— 初步认知》，有需要请自取：Python学习 —— 初步认知 在这篇文章中，我们一起深入了解Python中常用的内置数据类型。Python是一种功能强大的编程语言，它提供了多种内置数据类型，用于存储和操作数据。这些数据类型包括数字、字符串、序列和映射等。熟练掌 ......
linux锁定脚本防止脚本重复运行
问题描述：设置在定时任务中的脚本一定要注意防止脚本重复执行，要不然会带来一些想象不到的结果。 方式一：使用锁定文件的方式来进行防止脚本重复运行，类似数据库socket文件，但是这种情况有一种弊端就是，如果脚本因为某些原因退出，但是lock文件没有被清理掉，就会导致下一次的脚本运行失败 # get s ......
python列表中的字符串转成整型的几种方法
python中在不同类型数据转换方面是有标准库的，使用非常方便。但是在开发中，经常在list中字符转成整形的数据方便遇到问题。这里就记录一下常用的几种方法。 方法一： 最基本的方法：通过轮训整个list来实现转换，具体代码如下： test_list=['1','3','2','6','8'] pri ......
数据采集与融合作业4
第四次作业 作业①: 要求： 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站：东方财富网：http://quote.e ......
springboot dto,entity中过滤字符串传入内容的空格
@Excel(name="商品编号") private String productCode; public String getProductCode(){// 过滤空格; return productCode.trim(); } ......
对MJ数据的统一处理流程
1.删前缀（用户名），删后缀（乱码），加统一标签，打开excel微调。（输入项为1.单个文件夹地址 2.） import os import openpyxl import re UNWANTED_UNITS = ["undefined", "皮皮", "zly324"] # 第一步：删名称 def ......
Windows Media Foundation读取摄像头数据
可以读取数据，设置分辨率 如果我们期望的数据格式与摄像头的数据格式不同，就需要设置 MF_SOURCE_READER_ENABLE_ADVANCED_VIDEO_PROCESSING 否则不需要 以下是代码：int ReadCameraData(UINT32 width, UINT32 height ......
SDL播放YUV数据
一、概述 上一节使用SDL2在窗口上显示了一张图片，本节使用SDL2播放YUV420P数据。 YUV420P一帧数据的长度=width*height*3/2 二、代码示例 下面这段示例代码读取YUV数据和现实YUV数据都是在同一个线程中的。播放是能播放，但是会很卡，不一会儿就会出现无响应的情况。下一 ......
MySQL基本数据类型简记
1、在MySQL整型数值范围 TypeStorage (Bytes)Minimum Value SignedMinimum Value UnsignedMaximum Value SignedMaximum Value Unsigned TINYINT 1 -128 0 127 255 SMALLI ......
数据库 常用，字符串类型 数据转换成date 类型数据
数据库中 时间是用 ： VARCHAR2 字符串类型数据：20231226 来显示 '20231226' char字符串转换成 date类型时间 select to_date(字段名, 'yyyy-MM-dd') from xx 转换后，显示成：'2023-12-26 00:00:00.000' ......
2023数据采集与融合技术实践作业4
2023数据采集与融合技术实践作业4 作业1 要求： ▪ 熟练掌握 Selenium 查找 HTML 元素、爬取 Ajax 网页数据、等待 HTML 元素等内容。 ▪使用 Selenium 框架+ MySQL 数据库存储技术路线爬取“沪深 A 股”、“上证 A 股”、“深证 A 股”3 个板块的股票 ......
python datetime对象转成字符串类型str
ptrada = dbutil.select(f"select trade_date from ...") print(type(ptrada),ptrada) # <class 'list'> [(datetime.datetime(2023, 8, 1, 0, 0),)] 一般从数据库中取到的日 ......
Python字符的编码encode和解码decode
https://www.cnblogs.com/Magiclala/p/17812328.html 进行编码str.encode("编码") 进行解码bytes.decode("编码") s = "周杰伦" bs1 = s.encode("gbk") # b'xxxx' bytes类型 bs2 = ......