数据处理 字符串 脚本 字符
数字图像处理
数字图像处理 常用于处理噪声和失真。 噪声 椒盐噪声:噪声的幅值基本上相同,但是噪声出现的位置是随机的;(中值滤波效果好) 高斯噪声:每一点都存在噪声,但噪声的幅值是随机分布的。 滤波器 空间滤波技术分类 一、根据空间滤波增强目的可分为:平滑滤波和锐化滤波; 二、根据空间滤波的特点可分为:线性滤波和 ......
cefsharp 循环从多个页面提取数据
foreach(var url in urls) { var loaded = false; Action<object, FrameLoadEndEventArgs> frameLoadEndProc = (s, args) => { if (args.Frame.IsMain && args.F ......
8088/8086微处理器与总线学习笔记总结
目录一、微处理器与总线1.微处理器的概述1.1 运算器1.2 控制器1.2.1 指令控制1.2.2 时序控制1.2.3 操作控制二、8086/8088微处理器1.8086/8088CPU的指令特点1.1 指令流水线1.2 内存的分段管理技术1.3 支持多处理器系统2.8088/8086的外部引脚及其 ......
数据结构
目录二、数据结构2.1 链表2.1.1 单链表2.1.2 双链表2.2 栈2.3 队列2.4 单调栈2.5 单调队列2.6 KMP算法2.7 Trie树2.8 并查集2.9 手写堆2.10 哈希2.10.1 整数哈希2.10.1.1 拉链法2.10.1.2 开放寻址法2.10.2 字符串哈希(解决字 ......
Apipost连接数据库详解
Apipost提供了数据库连接功能,在接口调试时可以使用数据库获取入参或进行断言校验。目前的Apipost支持:Mysql、SQL Sever、Oracle、Clickhouse、达梦数据库、PostgreSQL、Redis、MongoDB 8种数据库的连接操作 新建数据库连接: 在「项目设置」-「 ......
循序渐进介绍基于CommunityToolkit.Mvvm 和HandyControl的WPF应用端开发(7) -- 图标列表展示和选择处理
我们在WPF应用端的界面中,使用lepoco/wpfui 来做主要的入口框架,这个项目它的菜单内置了不少图标,我们需要在动态菜单的配置中,使用它作为图标的展示处理,本篇随笔介绍如何基于图标枚举集合进行图标的展示和选择处理。并扩展到Font-Awesome-WPF的处理进行展示和选择。 ......
hashcat charsets文件夹下 .hcchr自定义字符集
说明 通常我们使用的是 英文字符,abc123 这些,但是如果遇到 俄文、阿拉伯等一些非 ASCII 码的字符集,每次手动输入不现实。所以就可以保存到 .hcchr 文件中 一、先看看,hashcat提供內建字符集 ?l = abcdefghijklmnopqrstuvwxyz ?u = ABCDE ......
logstash数据无法写入到es
现象:偶发性某天应用服务日志数据丢失,查看es无数据 架构:filebeat >logstash >es logstash 上报错现象: 2023-10-13T13:05:14,161][WARN ][logstash.outputs.elasticsearch][main] Could not i ......
可以用于科学计算和数据分析项目的工具简介
在科学计算和数据分析项目中,有许多工具可以使用。以下是一些常用的工具和库: 1. Python:Python是一种功能强大的编程语言,它提供了众多用于科学计算和数据分析的库和工具,如NumPy、Pandas、Matplotlib、SciPy等。Python具有简单易学的语法和丰富的生态系统,非常适合 ......
数据清洗以及相关自动化工具
数据清洗是数据分析过程中非常重要的一步,它旨在准备数据以进行后续的分析和建模。数据清洗的步骤通常包括以下几个方面: 1. 缺失值处理:检测和处理数据中的缺失值,可以通过删除缺失值、插值填充或者使用其他合适的方法来处理。 2. 异常值处理:检测和处理数据中的异常值,可以通过删除异常值、替换为合适的值或 ......
探索性数据分析(EDA)简介及Python代码示例
当进行探索性数据分析(EDA)时,您可以使用各种统计和可视化工具来深入了解数据,并识别其中的模式和趋势。以下是一些常用的EDA技术和方法: 1. 描述性统计:计算每列数据的基本统计指标,例如均值、中位数、标准差等。这可以帮助您了解数据的集中趋势和离散程度。 2. 直方图:绘制每列数据的直方图,以展示 ......
seqkit软件根据染色体名称从fasta文件中批量提取数据
001、 [root@pc1 test1]# ls a.fa chr.list [root@pc1 test1]# cat a.fa ## 测试fasta >chr1 tttcccggg >chr2 tttggg ccc >chr3 cccttt >chr4 aaaaattt [root@pc1 t ......
Jenkins流水线(pipeline)、自动化脚本
1.Jenkins流水线任务介绍 之前采用的都是Jenkins的自由风格,每个流程都要通过不同的方式设置,并且构建过程中整体流程时不可见的,无法确认每个流程花费的时间,同时不方便问题的定位。 Jenkins的Pipeline可以让项目的发布整体流程可视化,明确执行的阶段,快速定位问题。让整个项目的生 ......
Loadrunner12 在谷歌浏览器录制https协议的脚本时,提示不是私密链接-解决办法
在谷歌浏览器下,录制https协议网址的脚本时,会出现如下提示: 接下来,教大家一招黑操作: 1、鼠标点击屏幕,聚焦在当前页面 2、输入thisisunsafe,点击回车,奇迹的事情发生了,可以打开https协议的网页正常录制了!!! 3、接下来就根据你的测试需求,来进行操作。(只要提示不是私密链接 ......
各个数据库存二进制大文件的性能测试
1前言 有个项目软件前端将二进制大文件存在了indexDB,每次给后端传文件(需要传到底层C++进行调用)都会导致内存占用飙升,想着使用前后端都能共同操作的数据库来解决这个内存占用的问题,并且希望这个更具尽可能的轻量,可以嵌入到程序中是最好的,通过一个安装包进行安装。 2各个数据库的性能比较 2 ......
如何把一个普通的字符串转化为可执行的sql中的in条件
## 应用场景 程序给geoserver传了一个in 条件的参数 ‘AA|BB|CC’, 需要把AA|BB|CC转化为 in(‘AA’,‘BB’,‘CC’) 思路: **方式1** 把原参数的|替换为逗号,并首尾拼接单引号, (select concat('''', replace( ‘AA|BB| ......
ORA-28001: the password has expired Smartbi配置数据连接
smartbi config配置数据库连接,报获取数据库连接失败 ORA-28001: the password has expired 密码超时 登录数据库服务器,使用 sqlplus / as sysdba命令,进入oracle数据库 使用:select * from dba_profiles ......
数据分析-数据可视化-matplotlib-01
matplotlib基本函数 2.2.1 函数调用:pyplot、pylab¶ pylot: 创建画板、示例图 pylab: 结合pyplot和numpy函数的调用,功能比较复杂,不建议使用 2.2.2 创建画板(操作对象)¶ plt.figure,设置图形大小,返回figure画板对象 plt.s ......
wireshark 抓包出现两包相同数据
最近在测试时,发现主机通过UDP发送1包数据,会出现wireshark抓到两包相同数据,但是目标处只接收到1包数据的问题。 反复排查,发现只要使用USB转网口,就会出现这个问题。 最后确认是使用混杂模式的原因 怀疑是转接板接收到主机msg后,会将该msg发送出去,不巧的是混杂模式抓到了这包数据,因此 ......
如何使用Python和Pandas处理SQLite数据库
代码: import sqlite3 import pandas as pd conn = sqlite3.connect('database.db') data = {'A':['x','y','z'],'B':[1000,2000,3000],'C':[10,20,30]} df = pd.Da ......
Python JSON 库对 UTF8 字符的处理方式分析
默认情况 在使用 json 模块的 json.dump 时,默认会将非 ASCII 字符(中文字符等)进行 Unicode 转义,保证最终文件只有 ASCII 字符。 例如下述代码: import json with open("text.json", "w") as f: data = {'1': ......
Sqoop不能正常导出文件到Mysql数据库的问题解决
之前在使用sqoop输入以下命令时 bin/sqoop export \ --connect jdbc:mysql://node1:3306/journal \ --username root \ --password 123456 \ --table top_courses_by_traffic ......
Python处理PDF——pdfplumber的安装与使用
Python处理PDF——pdfplumber的安装与使用 # -*- coding:utf-8 -*- """ @Time :2023/XX/XX @Auth :Stone @File :parse_online_pdf.py @DESC :在线解析PDF文档 """ import request ......
数据结构——左偏树/可并堆学习笔记
引入 作为树形数据结构的一员——堆,对于取极值拥有着优秀的复杂度,但是,合并两个堆却成为了一个问题。除了朴素算法外,还有什么算法可以合并两个堆呢? 正文 那么,可并堆是个啥呢?简单来说,它是一个支持合并操作的二叉堆(好像是废话)。 首先,简单介绍一下二叉堆的性质,学过的读者可自行跳过。 二叉堆是一棵 ......
java运行时数据区
Java运行时数据区域 众所周知,Java 虚拟机有自动内存管理机制,如果出现内存泄漏和溢出方面的问题,排查错误就必须要了解虚拟机是怎样使用内存的。 包含:程序计数器(PC)、堆、本地方法栈、虚拟机栈、元空间 下图是 JDK8 之后的 JVM 内存布局。 程序计数器(PC) 内存中一块较小的空间,每 ......
Python处理PDF——PyMuPDF的安装与使用
1、安装 PyMuPDF可以从源码安装,也可以从wheels安装。 对于Windows, Linux和Mac OSX平台,在PyPI的下载部分有wheels。这包括Python 64位版本3.6到3.9。Windows版本也有32位版本。从最近开始,Linux ARM架构也出现了一些问题——查找平台 ......