时序 数据处理 云端 利器

Pandas数据处理:空值清洗、替换填充、级联与合并拼接

Pandas数据处理:空值清洗、替换填充、级联与合并拼接 针对空值的处理,首先要来了解一下空值的类型: 一、pandas中的None 和 NaN 有什么区别? type(None) --类型是 NoneType 空的对象类型 type(NaN) --类型是 float 浮点型 注意:Pandas中N ......
数据处理 数据 Pandas

pandas映射与数据转换

pandas映射与数据转换 在 pandas 中提供了利用映射关系来实现某些操作的函数,具体如下: replace() 函数:替换元素; map() 函数:新建一列; rename() 函数:替换索引。 一、replace() 用映射替换元素 在数据处理时,经常会遇到需要将数据结构中原来的元素根据实 ......
数据 pandas

Python中级之可变数据类型和不可变数据类型

【一】可变数据类型 对于可变类型(如字典、列表、集合),在函数中修改参数会影响原始对象。 当你对于可变类型进行修改操作,并不会返回内容,而是将原本的内容进行了更新 # 字典(dict) dict1 = {'a': 1, 'b': 2} dict1.update({'c': 2}) print(dic ......
类型 数据 Python

Python - pandas DataFrame数据的合并与拼接(merge、join、concat)

Python - pandas DataFrame数据的合并与拼接(merge、join、concat) 0 概述 pandas 包的merge、join、concat方法可以完成数据的合并和拼接。 merge方法主要基于两个dataframe的共同列进行合并; join方法主要基于两个datafr ......
DataFrame 数据 Python pandas concat

【数据结构和算法】搜索算法

① 搜索最小值 python的min函数返回列表中的最小项 1 def indexOfMin(lyst): 2 minIndex = 0 3 currentIndex = 1 4 while currentIndex < len(lyst): 5 if lyst[currentIndex] < ly ......
算法 数据结构 结构 数据

做一个数据可视化大屏需要多少预算?其实完全可以不花钱!

数据可视化大屏成为企业展示数据、决策分析的重要工具。然而,许多人认为制作这样的大屏成本高昂,其实根据我作为数据可视化设计师的经验,你可以达到这一目标却不用花一分钱。 ......
大屏 预算 数据

【数据结构和算法】排序算法

使用swap函数来交换列表中的两项的位置 1 def swap(lyst,i,j): 2 '''交换列表中两项的位置''' 3 temp = lyst[i] 4 lyst[i] = lyst[j] 5 lyst[j] = temp ① 选择排序 处于列表第一项,先找到最小项的位置,如果该位置不是列表 ......
算法 数据结构 结构 数据

稳了,终于可以通过外网访问 Sealos 中的数据库了!

喜大普奔,Sealos 中的数据库功能现已全面升级,支持外网访问! 现在你可以从互联网的任何地方访问 Sealos 中的数据库,无论您的应用部署在何种环境,现在都可以轻松通过外网连接到 Sealos 中的数据库,打破地理限制,提升工作效率和灵活性。 目前数据库是通过 NodePort 暴露到公网,集 ......
可以通过 数据库 数据 Sealos

数据库的一些操作

1. 表中添加字段语句 点击查看代码 alter table TableName add FileName varchar(36) 2. 修改表中字段长度 点击查看代码 ALTER TABLE SupplierLog ALTER COLUMN Remark varchar(1000); 3. 创建表 ......
数据库 数据

three.js 使用 sortObjects 和 renderOrder 处理网格修改后覆盖模型的问题

问题效果: 目标效果 处理此问题首先需要了解three的渲染机制: 渲染机制 threejs的渲染器是基于webGL的。它的渲染机制是根据物体离照相机的距离来控制和进行渲染的。也就是说,它根据物体的空间位置进行排序,然后根据这个顺序来渲染物体。对于透明的物体,是按照从最远到最近的顺序进行渲染。控制渲 ......
网格 sortObjects renderOrder 模型 问题

Python中级之数据类型的内置方法

常用方法概览 # 数字类型 int():类型强转 bin():转换二进制 hex():转换十六进制 oct():转换八进制 int(num,2/8/16) # 通过int()为其设置参数可进行机制转换 # 以下三种判断需在字符串类型下使用 .isdigit():判断是否均为整数数字[允许汉语数字] ......
类型 方法 数据 Python

Abp vNext 禁用数据库日志

Abp vNext 禁用数据库日志 使用Abp vNext 6.0 在abp创建的数据库里有四张表是跟日志有关的 AbpAuditLogs:审计日志,记录网络请求的 AbpSecurityLogs:安全日志,记录登录日志的 OpenIddictAuthorizations:OpenIddict记录登 ......
数据库 数据 vNext 日志 Abp

【解决方案】MySQL5.7 百万数据迁移到 ElasticSearch7.x 的思考

在日常项目开发中,可能会遇到使用 ES 做关键词搜索的场景,但是一般来说业务数据是不会直接通过 CRUD 写进 ES 的。 因为这可能违背了 ES 是用来查询的初衷,数据持久化的事情可以交给数据库来做。那么,这里就有一个显而易见的问题:ES 里的数据从哪里来? 本文介绍的就是如何将 MySQL ... ......

关于Winform+KitWare.VTK+PCL处理3D点云文件的编译环境

最近项目需求,在网上找了一个处理3D点云文件的源码,但是发现无法编译,研究了下原来是电脑环境问题,必须配置一个PCL库的环境才能使用,下面进入正题。 首先需要安装PCL环境,可以通过vcpkg安装(因为我没有成功,所以请自行查找),我是一直卡在装载pcl环节失败,网上搜了很多解决方法,包括重装VS英 ......
Winform KitWare 环境 文件 VTK

异常处理

异常是程序运行时可能发生的错误或意外情况。在Python中,异常是一种对象,表示程序执行期间发生的错误。 当出现异常时,程序的正常流程会被中断,而是跳转到异常处理流程。 异常的分类 内建异常Built-in Exceptions:由python内部定义的异常,例如ValueError KeyErro ......

数据库系列:MySQL不同操作分别用什么锁?

数据库系列:MySQL慢查询分析和性能优化 数据库系列:MySQL索引优化总结(综合版) 数据库系列:高并发下的数据字段变更 数据库系列:覆盖索引和规避回表 数据库系列:数据库高可用及无损扩容 数据库系列:使用高区分度索引列提升性能 数据库系列:前缀索引和索引长度的取舍 数据库系列:MySQL引擎M ......
数据库 数据 MySQL

数据库索引

1.什么是索引 MySQL的索引是一种数据结构,可以用于加快数据库中数据的查询速度。索引是基于表中一个或多个列的值排序的快速查找数据结构,可以大大提高查询效率。MySQL支持多种类型的索引,如B-tree索引、哈希索引、全文索引等。 索引可以在表创建时定义,也可以在表已经创建后通过ALTER TAB ......
索引 数据库 数据

.NET 6 使用Nlog 记录日志到本地并写入SQLserver数据库

1. 安装Nlog 对应Nuget包版本 NLog:5.0.4 NLog.Database:5.0.4 NLog.Web.AspNetCore:5.1.4 Microsoft.Data.SqlClient: 5.0.0 (写入SQLServer数据库用的) 2. 建表SQL CREATE TABLE ......
SQLserver 数据库 数据 日志 Nlog

数据资产入表在即,企业如何把握机遇,进行数据资产管理?

数据作为新时代重要的生产要素之一,数据资产化的相关工作正在提速。自今年10月1日起,中国资产评估协会制定的《数据资产评估指导意见》正式施行。同时,《企业数据资源相关会计处理暂行规定》近期转为正式稿,也将于明年1月1日起施行。 《暂行规定》规定:企业使用的数据资源,符合《企业会计准则第6号——无形资产 ......

pg数据库 定时备份脚本

!/bin/bash 使用环境变量设置pg密码 export PGUSER=xxxx export PGPASSWORD=xxxx pghost="xxxxx" logfile="/db/log/dump/pg_dump_backup_$(date '+%d').log" touch $logfil ......
脚本 备份 数据库 数据

解决Vue处理超过16位数字精度丢失问题

当我们使用MyBatis-Plus 使用 ID_WORKER 或者 ASSIGN_ID(雪花算法) 生成的id作为主键时,因为其长度,为19位,而前端一般能处理16位,如果不处理的话在前端会造成精度丢失,最后两位会变成00,如下图,感觉像是四舍五入后的效果。 处理这种问题有两种方案,要么后端出处理, ......
精度 数字 问题 Vue

vSAN集群添加宿主机报错问题处理

背景: 1、新增宿主机到vsan集群,服务器网口只有4个,所以规划vsan和管理关联到标准交换机(vsan的适配器MTU-9000、管理的适配器MTU-1500)--使用两个网口、vmotion和业务vlan关联到分布式交换机 使用两个网口;2、在往vsan集群添加宿主机的时候,新的宿主机HA状态一 ......
宿主机 宿主 集群 问题 vSAN

cerbos golang 内部policy check 处理简单说明

主要是想尝试实现一个rust 的check 方法,所以先研究下golang 的内部实现 CheckResources func (cs *CerbosService) CheckResources(ctx context.Context, req *requestv1.CheckResourcesR ......
cerbos golang policy check

数据库基础知识

DDL语言 DDL(Data Definition Language),数据定义语言,用来定义数据库对象(数据库,表,字段) 关于数据库操作 1.创建数据库 语法: create database 数据库名; 注意:数据库名需要满足命名规则 2.删除数据库 语法: drop database 数据库 ......
基础知识 数据库 基础 知识 数据

想快速解决数据问题?ETLCloud教你秒上手

产品介绍 ETLCloud是一款零代码ETL工具,可以快速对接上百种数据源和应用系统,无需编码即可快速完成数据同步和传输,企业IT人员只需简单几步即可快速完成各种数据抽取同步并配合BI工具实现数据的统计分析。 目标是简化和加速数据集成和转换过程,使用户能够更轻松地处理和管理大量数据。它提供了可视化的 ......
ETLCloud 数据 问题

《智能与数据重构世界》读后感1

这是我这学期阅读的最后一本书,叫《智能与数据重构世界》,这本书是最难的了,有大量的人工智能的知识,所以我放在了最后来学习。以下是章节介绍: 1.大数据和云计算:第一章主要介绍了大数据的特性,云计算平台以及去中心化的区块链数据库。讨论了大数据的体量、多样性、更新频率、准确性等特征,以及大数据工具和数据 ......
读后 读后感 智能 数据 世界

聊聊大数据框架的数据更新策略: COW,MOR,MOW

大数据框架下,常用的数据更新策略有三种: COW: copy-on-write, 写时复制; MOR: merge-on-read, 读时合并; MOW: merge-on-write, 写时合并; hudi等数据湖仓框架,常用的是前两种实现数据更新。而Doris则主要用后两种更新数据。 COW 在 ......
数据 框架 策略 COW MOR

《智能与数据重构世界》读后感2

这几天我读完了后几章,做如下总结: 4.智能与数据对制造业的重构:第四章以工业大脑为核心,介绍了工业4.0的概念、工业管理系统、工业互联网、智慧物流等。通过多个案例展示了智能技术在制造业的应用。 5.智能与数据对出行的重构:第五章探讨了智慧出行的概念、智能驾驶技术、智慧交通等,以及一些实际案例展示了 ......
读后 读后感 智能 数据 世界

《智能与数据重构世界》读后感3

在阅读《智能与数据重构世界》这本书之后,给我留下了深刻的印象和思考。这本书以通俗易懂的语言,深入浅出地探讨了人工智能和大数据如何正在改变我们的世界。首先,这本书的主题是关于人工智能和大数据的。在今天这个信息爆炸的时代,大数据已经成为一种新的资源,而人工智能则是一种新的能力。这两者的结合,正在对各行各 ......
读后 读后感 智能 数据 世界

pgsql数据库安装和初始化

!/bin/bash 获取当前目录的绝对路径 current_directory=$(readlink -f "$PWD") echo ' pgsql安装开始 ' 创建文件仓库配置 sudo sh -c 'echo "deb http://apt.postgresql.org/pub/repos/a ......
数据库 数据 pgsql
共20300篇  :75/677页 首页上一页75下一页尾页