数据 数据分析 消费者 案例
聚类可视化分析
import matplotlib.pyplot as pltimport numpy as npfrom sklearn.cluster import AffinityPropagationfrom sklearn.datasets import make_blobs centers = [[1, ......
Windbg抓取分析DMP文件
File-Symbol File Path 输入符号路径窗口；可以随便输入一个路径，这里我输入 .dmp 的存放路径 D:\dmp。 因若默认为空，后面 WinDbg 加载 .dmp 文件后会长时间无响应， 只有资源管理器杀死重开。 File - Open Crash Dump 选中当前 .dmp ......
综合能源系统优化 数据来源《考虑用户侧柔性负荷的社区综合能源系统日前优化调度_刘蓉晖》
综合能源系统优化 数据来源《考虑用户侧柔性负荷的社区综合能源系统日前优化调度_刘蓉晖》%% 风电+储能+电网交易+燃气轮机+燃气锅炉+电制冷机+（%燃料电池FC+溴化锂制冷机LBR+余热锅炉） 有电负荷+热负荷+冷负荷 加上环境成本简单 注释清楚 相对于大众版本，注释经过本人优化 MATLAB+ya ......
distcp同步数据时遇到 Operation category READ is not supported in state standby
所遇问题如标题 原因： 同步的目的集群IP处于standby状态。同步给到的目的集群在命令中填的是集群IP，由于配置了高可用，namenode出于其他原因切换到了另一台机器，所以该IP处于standby的状态，此时namenodeIP不是当前同步命令中的IP，更改使用中的namenode IP（ac ......
linux 安装神州通用数据库 V7
@(linux 安装神州通用数据库 V7.0) 操作系统、数据库 操作系统：debian 10 数据库：神州通用数据库 V7.0 1、官方下载链接 http://www.shentongdata.com/index.php/download/list-27 2、windows客户端下载链接 http ......
第1章 大数据概述
1.1 信息与数据 1、信息 人们对于客观事物属性和运动状态的反映。 信息所反映的是关于某一客观系统中，某一事物的存在方式或某一时刻的运动状态。 信息可以通过载体传递，可以通过信息处理工具进行存储、加工、传播、再生和增值。 在信息社会中，信息一般可与物质或能量相提并论，它是一种重要的资源。 2、数据 ......
el-table树形数据勾选框子父级联
element官网并没有配置树形数据勾选子父级联的配置，要想实现可以借助 select 、select-all事件和 toggleRowSelection 方法实现。 select 事件： onCheck(selection, row) { if (!this.isTreeData) return ......
从Spring源码分析@Autowired依赖注入实现原理
在平常项目开发中，使用@Autowired注解进行字段注入很常用，本篇就通过Spring源码，重点分析这种方式实现依赖注入的过程。 本篇Spring源码版本为5.1.7.RELEASE。 在源码中，关键类是AbstractAutowireCapableBeanFactory，这个类继承Abstrac ......
案例分享-full gc导致k8s pod重启
在之前的记一次k8s pod频繁重启的优化之旅中分享过对于pod频繁重启的一些案例，最近又遇到一例，继续分享出来希望能给大家带来些许收获。 问题现象 报警群里突然显示某pod频繁重启，我随即上去查看日志，主要分这么几步： 1.查看pod重启的原因，kubectl descirbe pod Last ......
Notepad整行编辑及行尾添加数据的操作
多行合并为一行： 1、按Ctrl+F，弹出“替换”的窗口；2、选择“替换”菜单；3、“查找目标”内容输入为：\r\n；4、“替换为”内容为空；5、“查找模式”选择为正则表达式；6、设置好之后，点击“全部替换”，即可将多行数据合并成一行。 多行行尾批量添加数据： 在查找目标（Find what）输入$ ......
Java中进行高精准度坐标数据计算使用BigDecimal（计算距离、开平方）
场景 Java中使用java.awt.geom.Point2D进行坐标相关的计算(距离、平方等)： https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/126072919 Java中使用JTS对空间几何计算(读取WKT、距离、点在面内、 ......
读取 k8s 存储在 etcd 上的数据
读取 k8s 存储在 etcd 上的数据 Etcd Assistant 是一款 Etcd 可视化管理工具，便捷高效地操作您的 etcd 集群；支持多种键的视图；管理租约、用户、角色和权限。 etcd是一个分布式KV存储系统，在分布式系统中被广泛使用，Kubernetes就是使用了etcd存储持久化数 ......
【算法设计与分析】期中复习
一、概论 什么是算法？ 算法是求解问题的一系列步骤，用来将输入数据转换成输出结果 算法设计应该满足以下目标（对使用算法的人来讲） 正确性：算法能正确地执行，能完成任务 可使用性：算法要能被方便地使用 可读性：算法应具有较好的可读性，易于理解 健壮性：要有异常处理，对不合理的数据进行检查，从而避免异常 ......
SpringMVC简介+入门案例+Controller加载控制
请求响应模式演进过程 SpringMVC 是一种基于Java实现MVC模型的轻量级Web框架 核心架构 入门案例 使用SpringMVC开发web和Servlet开发web的异同点 2.创建web容器启动类，加载SpringMVC配置（简化开发） public class ServletContai ......
Go坑：time.After可能导致的内存泄露问题分析
Go 中 time.After 可能导致的内存泄露 一、Time 包中定时器函数 go v1.20.4 定时函数：NewTicker，NewTimer 和 time.After 介绍 time 包中有 3 个比较常用的定时函数：NewTicker，NewTimer 和 time.After： New ......
RTThread使用DMA串口接收数据不连续的问题
RTThread使用DMA接收串口数据的问题 问题/现象 解决方式 解决方式① 解决方式② 其它疑问 问题/现象 使用RTThread的DMA接收串口数据,数据不连续,即IDLE中断没有起到作为一个frame的判定. 经过对serial和drv_uarts源码的分析,得出原因: graph LR R ......
java基于springboot+vue非前后端分离的网上商城购物系统、在线商城管理系统，附源码+数据库+文档+PPT
1、项目介绍 java基于springboot+vue非前后端分离的网上商城购物系统、在线商城管理系统，实现管理员：首页、个人中心、用户管理、商品分类管理、商品信息管理、订单评价管理、系统管理、订单管理，用户；首页、个人中心、订单评价管理、我的收藏管理、订单管理，前台首页；首页、商品信息、商品资讯、 ......
开源+实时+数据即服务的架构——唐建法受邀出席2023数据技术嘉年华【干货回顾】
依据现代数据栈的定义，Tapdata 是一个专注于数据集成和数据准备的现代数据栈工具，主要承担数据的采集、集成、准备和服务模块，其核心价值体现在数据集成上：将企业的数据进行联通，为新的数据业务提供新鲜的数据。 ......
pandas drop、loc和iloc函数对数据框进行操作
pandas.DataFrame.drop—从行或列中删除指定的标签 参考：https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.DataFrame.drop.html 语法格式 DataFrame.drop(labels ......
电子商务网站用户行为分析及服务推荐
# -*- coding: utf-8 -*- # 代码11-1 import os import pandas as pd # 修改工作路径到指定文件夹 os.chdir("D:/chapter11/demo") # 第一种连接方式 from sqlalchemy import create_en ......
【大数据】Hive 分区和分桶的区别及示例讲解
一、概述 在大数据处理过程中，Hive是一种非常常用的数据仓库工具。Hive分区和分桶是优化Hive性能的两种方式，它们的区别如下： 1）分区概述 Hive分区是把数据按照某个属性分成不同的数据子集。 在Hive中，数据被存储在HDFS中，每个分区实际上对应HDFS下的一个文件夹，这个文件夹中保存了 ......
举一个数据库死锁的例子，MySQL 怎么解决死锁？
转载：https://juejin.cn/post/7072000882128191518 分析&回答 在数据库中有两种基本的锁类型：排它锁（Exclusive Locks，即X锁）和共享锁（Share Locks，即S锁）。当数据对象被加上排它锁时，其他的事务不能对它读取和修改。加了共享锁的数据对 ......
volatility 3 内存取证入门——如何从内存中寻找敏感数据
volatility 3 内存取证入门——如何从内存中寻找敏感数据 上面说的思路，我自己在本机验证下，首先，我在虚拟机里使用IE登录我的qq邮箱，如下： 我自己登录IE的进程是2052，虚拟机dump vmem文件以后，vol3下： python .\vol.py -f "D:\Virtual Ma ......
关于如何使用pandas将不同的数据写入到同一个Excel的不同Sheet表中
笔者在之前使用python将数据写入到Excel表格中，一般都只需要写入一张Sheet表中就可以了 因最近一个小的需求，需要将不同的大列表数据写入到不同的Sheet表中 这样，再使用之前的 pandas.DataFrame(content_list)，然后.to_excel("./xxxxx.xls ......