随笔 数据
Python 数据类型转换 All In One
Python 数据类型转换 All In One Python 3 数据类型转换 |函数 | 描述| -- | -- int(x [,base]) | 将x转换为一个整数 float(x) | 将x转换到一个浮点数 complex(real [,imag]) | 创建一个复数 str(x) | 将对 ......
查询Postgres数据库中每个表的数据量大小
select relname as TABLE_NAME, reltuples as rowCounts from pg_class where relkind = 'r' and relnamespace = ( select oid from pg_namespace where nspname ......
CAD格式的数据如何导入和卫星图叠加
在城市规划、道路管线、林业、农业、地质和环境监测等各行各业的国民经济建设中，一般都会需要将CAD与卫星影像无偏移叠加配准。因为影像地图具有影像内容、线划要素、数学基础等，拥有比单纯的矢量线划地图丰富得多的信息量，具有直观易读的特点，从而提高了地理信息为人们的视觉直接感知的可视化表达程度及辅助决策的准 ......
redis cluster 故障后，主从位于相同节点的修复（丢失了部分数据）【转】
今天机房出现故障，有一个机器启动不起来，redis cluster集群丢失了一部分数据，拓扑图如下： 通过上图可以看到，192.168.1.122启动不起来后，其上的主1和从1因为在一个机器上，就全部丢失了。 这个布局非常危险，主和从不应该放在一个机器上。 我找运维，运维给我分配了一个全新的机器，并 ......
pandas中数据的删除
数据的删除 #删除空值所在的行 df = df.dropna(axis = 0,subset = ['测温探头编码'])#删除空值的行，不加subset就是删除所有的行或列 #del #使用del, 一次只能删除一列，不能一次删除多列 import pandas as pd data = pd.re ......
大数据经典论文解读 - GFS
GFS 重点是：高可用、可扩展性、透明 几个设计理念： 故障很常见，而非意外 存储内容为大文件，通常在几个GB 文件的修改方式是追加而非随机写，读多写少 增加系统灵活性，如放松对GFS的一致性要求 架构 GFS包括单节点Master、备用的shadow master、多个chunkserver、多个 ......
js中使用linq，为什么在groupBy之后看不到具体数据
1、js 中 let a = linq.from(Datas).groupBy(({ DeclineType }) => DeclineType) groupby分组之后是什么数据集合，为什么在a变量中看不到数据呢？ groupBy方法会将数据集合按照指定条件进行分组，返回一个键值对的集合。其中，键 ......
Flask框架 之flask_migrate数据库迁移
注意：flask_script与flask2.0不再兼容 一、安装 flask_migrate pip install flask-migrate==2.5.3 二、示例代码 flask：1.0.2 flask-migrate：2.5.3 from flask import Flask from f ......
云图说 | MSSI之应用业务模型ABM，搭建业务与技术的数据治理桥梁
摘要：应用业务模型ABM（Application Business Model）是MSSI为客户提供的统一模型管理服务。 本文分享自华为云社区《【云图说】 | 第274期 MSSI之应用业务模型ABM，搭建业务与技术的数据治理桥梁》，作者：阅识风云。 应用业务模型ABM（Application Bu ......
一个有效的图表图像数据提取框架
建立了可以有效地处理各种图表数据，而不需要做出启发式的假设的鲁棒 Box detector 系统；提出了一种网络来测量图例匹配阶段图例和检测元素之间的特征相似性；提供了一个关于从信息图表中获取原始表格的 baseline，并发现了一些关键的因素来提高各个阶段并发现了一些关键的因素来提高各个阶段的性能... ......
04735-数据库系统原理知识点
04735-数据库系统原理 人生最大的遗憾，往往并不是没有去做，而是没有坚持；明明只要再坚持努力一丢丢，却选择放弃，与成功失之交臂。 一、数据库系统概述 1. 数据库基本概念 1.1 数据 是描述事务的符号记录，是指用物理符号记录下来的、可以鉴别的信息。 多种表现形式包括数字、字母、文字、特殊字符组 ......
redis数据类型-sortedset类型
将元素及其分数加入到有序集合当中 常用场景 实时排行榜：积分榜、商品热销榜 优先级任务、队列 朋友圈文章点赞、取消 底层结构 Ziplist压缩列表或跳跃表 常用命令 ZADD key score1 member1 score2 member2, 向有序集合添加一个或多个成员，或更新现有成员的分数 ......
创建数据库display如何设置
转自：(17条消息) linux安装oracle DISPLAY设置问题_weixin_34013044的博客-CSDN博客 实测好用的 在Linux上安装Oracle时，经常会报以下错误：无法使用命令 /usr/X11R6/bin/xdpyinfo 自动检查显示器颜色。请检查是否设置了DISPLA ......
SQL解析json（包含单层解析、多层解析）解析的数据可直接存到表中
单层json解析 --声明变量 declare @JsonData nvarchar(max)= ' { "BillName":"12345765", "SendDate":"2022-11-10T00:00:00", "ShippingDate":"2022-11-10T00:00:00", "P ......
Linux 部署： canal (同步mariadb数据发往kafka)
参考文档：https://blog.csdn.net/weixin_55549435/article/details/123309631 1 节点规划 | 节点 | ip | deploy | | | | | | vm1 | 192.168.122.61 | zk + kafka + DB | | ......
大数据学习碰到的问题
1. nodes with inconsistent version 报错截图 网上搜索发现需要使用HBCK工具，但是发现有些参数不支持，报错如下 最终结论 在2.0.3和2.1.1之前的hbase不支持此修复工具 https://github.com/apache/hbase-operator-t ......
数据分析之营销管理方法论--SWOT分析法
参考网站：https://wiki.mbalib.com/zh-tw/SWOT%E5%88%86%E6%9E%90%E6%A8%A1%E5%9E%8B ......
postgresql + timescaledb离线安装笔记（zabbix数据库准备工作）
实验环境 操作系统：centos 7.6 PostgreSQL：14.6 timescaledb：2.8.1 网络：本地无网络 1 编译源码安装 1.1 准备工作 useradd postgres mkdir /usr/pgsql12/ chown -R postgres:postgres /usr ......
如何取消 SAP ALE 中已经配置的跨系统主数据验证
什么是 SAP ALE？ SAP ALE（Application Link Enabling）是SAP系统中用于异构系统集成的技术。它是一种基于事件驱动的通信机制，可以实现不同的SAP系统之间以及SAP系统和非SAP系统之间的数据交换和协作。 ALE技术利用了SAP系统内置的IDoc（Interme ......
如何用 SAP Commerce Cloud CMS API 批量返回多个 CMS Component 数据
使用 HTTP post： URI: https://{{host}}/occ/v2/{{storefront}}/cms/components 负载的例子： { "idList": [ "{{componentId1}}", "{{componentId2}}", ... ] } 要批量返回多个C ......
数据服务问题汇总
1.Incorrect integer value: '' for column 'groupname' at row 1; 原因：因为程序中groupname的字段类型和数据库中字段类型不一致导致 解决：修改数据库中类型和程序中保持一致 过程：更新新的jar包，先报了pmi文件修改的jar包版本错 ......
MySQL导入数据库1118错误解决方案[ERR] 1118 - Row size too large (＞ 8126). Changing some columns to TEXT or BLOB
MySQL导入数据库1118错误解决方案[ERR] 1118 - Row size too large (＞ 8126). Changing some columns to TEXT or BLOB 编辑sql文件，在开头设置一下innodb_strict_mode为0 SET innodb_str ......
SAP 系统里的中文数据，用 ABAP 导出成 Excel 文件时遇到乱码的分析和解决办法试读版
本教程前一篇文章，我们介绍了如何将 SAP ABAP 系统中的数据，以 Excel 文件的形式导出到本地： 90. 将 SAP ABAP 内表内容本地导出成 Excel 文件 这个方法确实比较实用。 关于 ABAP 处理 Excel 文件还有另外两篇教程文章： 42. 用 ABAP 新建本地 Exc ......
mysql数据库勒索恢复 mysql数据库被黑恢复 mysql数据库被.devos勒索病毒加密
mysql数据库勒索恢复 mysql数据库被黑恢复 mysql数据库被.devos勒索病毒加密 数据类型 mysql 5.7 数据容量 1 GB 故障类型 mysql被.devos勒索病毒加密，所有文件包含数据库ibd文件被勒索病毒加密 修复结果 使用极佳mysql数据库恢复工具从.devos勒索病 ......
命令行上的数据科学第二版：十一、总结
原文：https://datascienceatthecommandline.com/2e/chapter-11-conclusion.html 在这最后一章，这本书接近尾声。我将首先回顾我在前面十章中讨论的内容，然后给你三条建议，并提供一些资源来进一步探索我们触及的相关主题。最后，如果您有任何问题 ......
DSCI-553 数据挖掘应用
DSCI-553 Foundations and Applications of Data MiningAssignment 41. Overview of the AssignmentIn this assignment, you will explore the spark GraphFrame ......
命令行上的数据科学第二版：六、项目管理与`make`
原文：https://datascienceatthecommandline.com/2e/chapter-6-project-management-with-make.html 我希望现在您已经开始认识到命令行是一个非常方便的数据处理环境。您可能已经注意到，由于使用了命令行，我们： 调用许多不同的 ......
命令行上的数据科学第二版：九、建模数据
原文：https://datascienceatthecommandline.com/2e/chapter-9-modeling-data.html 在本章中，我们将执行 OSEMN 模型的第四步：数据建模。一般来说，模型是对数据的抽象或更高层次的描述。建模有点像创建可视化，因为我们从单个数据点后退 ......
命令行上的数据科学第二版：七、探索数据
原文：https://datascienceatthecommandline.com/2e/chapter-7-exploring-data.html 在所有这些艰苦的工作之后（除非你已经有了干净的数据），是时候享受一些乐趣了。现在您已经获得并清理了数据，您可以继续进行 OSEMN 模型的第三步，即 ......
命令行上的数据科学第二版：八、并行管道
原文：https://datascienceatthecommandline.com/2e/chapter-8-parallel-pipelines.html 在前面的章节中，我们一直在处理一次性处理整个任务的命令和管道。然而，在实践中，您可能会发现自己面临一个需要多次运行相同命令或管道的任务。例如 ......