工具 报告 数据
数据清洗以及相关自动化工具
数据清洗是数据分析过程中非常重要的一步，它旨在准备数据以进行后续的分析和建模。数据清洗的步骤通常包括以下几个方面： 1. 缺失值处理：检测和处理数据中的缺失值，可以通过删除缺失值、插值填充或者使用其他合适的方法来处理。 2. 异常值处理：检测和处理数据中的异常值，可以通过删除异常值、替换为合适的值或 ......
探索性数据分析（EDA）简介及Python代码示例
当进行探索性数据分析（EDA）时，您可以使用各种统计和可视化工具来深入了解数据，并识别其中的模式和趋势。以下是一些常用的EDA技术和方法： 1. 描述性统计：计算每列数据的基本统计指标，例如均值、中位数、标准差等。这可以帮助您了解数据的集中趋势和离散程度。 2. 直方图：绘制每列数据的直方图，以展示 ......
seqkit软件根据染色体名称从fasta文件中批量提取数据
001、 [root@pc1 test1]# ls a.fa chr.list [root@pc1 test1]# cat a.fa ## 测试fasta >chr1 tttcccggg >chr2 tttggg ccc >chr3 cccttt >chr4 aaaaattt [root@pc1 t ......
各个数据库存二进制大文件的性能测试
1前言 有个项目软件前端将二进制大文件存在了indexDB,每次给后端传文件（需要传到底层C++进行调用）都会导致内存占用飙升，想着使用前后端都能共同操作的数据库来解决这个内存占用的问题，并且希望这个更具尽可能的轻量，可以嵌入到程序中是最好的，通过一个安装包进行安装。 2各个数据库的性能比较 2 ......
Vue3| create-vue 脚手架工具
create-vue 是 Vue 官方新的脚手架工具，底层切换到了 vite（下一代构建工具），为开发提供极速响应 使用 create-vue 创建项目： 1. 前提环境条件： 已安装 16.0 或更高版本的 Node.js（node -v） 2. 创建一个 Vue 应用：npm init vue ......
ORA-28001: the password has expired Smartbi配置数据连接
smartbi config配置数据库连接，报获取数据库连接失败 ORA-28001: the password has expired 密码超时 登录数据库服务器，使用 sqlplus / as sysdba命令，进入oracle数据库 使用：select * from dba_profiles ......
数据分析-数据可视化-matplotlib-01
matplotlib基本函数 2.2.1 函数调用：pyplot、pylab¶ pylot: 创建画板、示例图 pylab: 结合pyplot和numpy函数的调用，功能比较复杂，不建议使用 2.2.2 创建画板(操作对象)¶ plt.figure,设置图形大小，返回figure画板对象 plt.s ......
wireshark 抓包出现两包相同数据
最近在测试时，发现主机通过UDP发送1包数据，会出现wireshark抓到两包相同数据，但是目标处只接收到1包数据的问题。 反复排查，发现只要使用USB转网口，就会出现这个问题。 最后确认是使用混杂模式的原因 怀疑是转接板接收到主机msg后，会将该msg发送出去，不巧的是混杂模式抓到了这包数据，因此 ......
如何使用Python和Pandas处理SQLite数据库
代码： import sqlite3 import pandas as pd conn = sqlite3.connect('database.db') data = {'A':['x','y','z'],'B':[1000,2000,3000],'C':[10,20,30]} df = pd.Da ......
Sqoop不能正常导出文件到Mysql数据库的问题解决
之前在使用sqoop输入以下命令时 bin/sqoop export \ --connect jdbc:mysql://node1:3306/journal \ --username root \ --password 123456 \ --table top_courses_by_traffic ......
关于java开发项目中 使用上传文件 工具到 阿里云 时出现的 问题--工具类与properties文件中名字顺序不对应的问题
配置类文件中的 属性顺序 需要与 配置文件 中的属性顺序 保持一致 ......
三个ssh连接工具finalshell,windterm,mobaxterm使用体验对比及注意事项
可能现在用的比较多的是xshell吧,但鉴于之前收费而且不开源,所以一直没用过,现在用的这三个都是开源(或部分开源)的产品,下面说一下用下来的个人体检: 1.finalshell 官网:FinalShell官网 国产,开源,开发语言为Java,所以跨平台,开源协议是GPLv2 总体用户操作体验是不错 ......
槽加工专用数控刀具，成都工具研究所有限公司迎接2023年烟台鲁宝钢铁有限责任公司二方审核
成都工具研究所有限公司的前身是成都工具研究所，于1956年创建于北京，是原机械工业部的直属研究所，是我国机械工业的综合性工具科研机构。公司官网：http://www.ctri.com.cn/公司主要从事精密切削工具、精密测量仪器以及表面改性处理技术的技术研究、产品开发和应用服务。 2023年4月18 ......
数据结构——左偏树/可并堆学习笔记
引入 作为树形数据结构的一员——堆，对于取极值拥有着优秀的复杂度，但是，合并两个堆却成为了一个问题。除了朴素算法外，还有什么算法可以合并两个堆呢？ 正文 那么，可并堆是个啥呢？简单来说，它是一个支持合并操作的二叉堆（好像是废话）。 首先，简单介绍一下二叉堆的性质，学过的读者可自行跳过。 二叉堆是一棵 ......
java运行时数据区
Java运行时数据区域 众所周知，Java 虚拟机有自动内存管理机制，如果出现内存泄漏和溢出方面的问题，排查错误就必须要了解虚拟机是怎样使用内存的。 包含：程序计数器（PC）、堆、本地方法栈、虚拟机栈、元空间 下图是 JDK8 之后的 JVM 内存布局。 程序计数器（PC） 内存中一块较小的空间，每 ......
WPF中Image控件绑定数据源，解决图片被占用问题
WPF中Image控件的数据源如果设置为路径，或者后台通过Image.FromFile来绑定，该图片将被占用，如要进行图片压缩、删除等操作则会报错；所以可以从内存中加载图片进行绑定。 以下为MVVMLight模式，首先增加一个图片路径值转换的类 public class ImageConvert : ......
可观测性数据收集集大成者 Vector 介绍
如果企业提供 IT 在线服务，那么可观测性能力是必不可少的。“可观测性” 这个词近来也越发火爆，不懂 “可观测性” 都不好意思出门了。但是可观测性能力的构建却着实不易，每个企业都会用到一堆技术栈来组装建设。比如数据收集，可能来自某个 exporter，可能来自 telegraf，可能来自 OTEL， ......
BI工具：让数据分析井然有序一望而知
BI（Business Intelligence）工具是一类专门用于数据分析和决策支持的软件工具。 它们能够将企业内部和外部的数据进行整合、处理和可视化，帮助用户从海量数据中获取有价值的见解和洞察，并以直观、易懂的方式展示给决策者和相关人员。以下是对BI工具的详细介绍： 1. 数据整合和连接： BI ......
OpenHarmony社区运营报告（2023年9月）
●9月12日，由宁夏回族自治区教育厅、OpenAtom OpenHarmony（以下简称“OpenHarmony”）项目群工作委员会指导，北京新大陆时代科技有限公司主办，宁夏职业技术学院、OpenHarmony教育工作组协办的开源生态创新人才培养论坛在全国职业院校技能大赛赛场宁夏职业技术学院成功举办 ......
App:基于VsCode的批量Diff工具
1.效果预览 1.1 界面图 1.2 点击操作-Diff 2.下载包 https://pan.baidu.com/s/1Xe0vjtc-izAXYTXEfuOEcQ?pwd=Tidy 3.技术方案 3.1 技术架构 采用本地服务+React。 3.2 技术清单 3.2.1 服务框架是TidyHttp ......
转载 https://www.cnblogs.com/star521/p/13385181.html --PGSQL-脏数据清理，频繁delete\update高水位线问题,vacuum full 、vacuum
查看表大小 -- 查出所有表（包含索引）并排序 -- 查出所有表（包含索引）并排序 SELECT table_schema , table_name AS table_full_name, pg_size_pretty(pg_total_relation_size('"' || table_sche ......
Windows 远程时提示CredSSP 加密数据库修正
原文：Windows 远程时提示CredSSP 加密数据库修正 问题的简单处理. - 济南小老虎 - 博客园 (cnblogs.com) 使用windows远程桌面的时候出现异常如图示： 查了下 还是有比较简单的解决办法的 问题是需要在 自己的客户端机器上面进行设置 不需要修改服务器端的服务器. 被 ......
使用Apache POI往word模板中插入数据并转换文档格式
word模板报告数据插入及格式转换 1. 向模板内写入数据 1.1 单文本插入 //通过查询得到数据用参数或者对象接收后，与模板内参数对应完成文本插入 String code = usersService.findByCode().getCode(); TestUsers byCode = user ......
Jmeter连接Mysql数据库
一.下载mysql数据驱动 https://dev.mysql.com/downloads/connector/j/ 二、在Jmeter测试计划中添加驱动包 三、jmeter添加配置元件：JDBC Connection Configuration 四、Jmeter发送JDBC请求 ......
BLE_HID类设备连接上主机后发数据返回错误码解决方法
继上文HID设备的使用，BLE_HID例程增加报表描述符使用 我们在BLE_HID类蓝牙设备应用中调用HidDev_Report函数发送数据，如果出现了返回以下错误码时，应该是HID数据通道未能完全成功打开，我们可以在代码中添加处理以手动辅助开启， #define bleInvalidTaskID ......
如何下载全国DEM高程数据？
通过以下方法可以将全国DEM高程数据下载到本机。 方法/步骤 下载GIS地图下载器 http://www.geosaas.com/download/mapdownloader.zip，下载解压后，双击“GISSaaS.MapDownloader.Client.exe”文件。 2、在要下载的省级行 ......