思路 数据 问题

数据分析实例

1、导入用于分析和可视化作图的库 import pandas as pdimport matplotlib.pyplot as pltimport seaborn as sns #seaborn也很强大,可以小试一下 da=pd.read_csv('D:/datasource/mycrawldata ......
数据分析 实例 数据

python 数据可视化———电子商务销售分析

一、选题背景 随着互联网和移动互联网技术的不断发展,电子商务已经成为了一个全球性的发展趋势。越来越多的商家和消费者都开始使用电子商务平台进行线上交易,这在一定程度上改变了传统商业模式,并且对于消费者而言,电子商务平台也提供了更为便捷的购物体验。因此,对于电子商务销售的分析就显得尤为重要。通过对电子商 ......
电子商务 数据 python 商务 电子

大数据学习笔记hadoop、hive、java

HDFS伪分布式集群搭建 tar -zxvf hadoop-2.7.7.tar.gzecho $JAVA_HOME/root/software/jdk1.8.0_221​#查看loaclhostvim /root/software/hadoop-2.7.7/etc/hadoop/hadoop-env ......
笔记 数据 hadoop hive java

Kafka-数据出现积压的原因以及如何解决积压问题?

Kafka数据积压的原因有很多,比如消费端处理能力不足、生产端消息发送速度过快等。解决方法也有很多,以下是一些常见的解决方法 : 增加分区数:如果数据量很大,合理的增加Kafka分区数是关键。但是分区的数量并不是无限增大的,他是有上限的,一般分区的分区数的数不能大于kafka的broker数。 提高 ......
原因 数据 问题 Kafka

大数据分析python

# 导库import numpy as npimport pandas as pd # 读取数据data =pd.read_csv('logistics.csv')data.head(10) 思路:直接查看不同公司的数量即可 df1=data.groupby('货运公司名称').size().res ......
数据分析 数据 python

【解决了一个小问题】macbook m2 下交叉编译 musl-gcc 支持的 gozstd 库

**作者:张富春(ahfuzhang),转载时请注明作者和引用链接,谢谢!** * [cnblogs博客](https://www.cnblogs.com/ahfuzhang/) * [zhihu](https://www.zhihu.com/people/ahfuzhang/posts) * [G ......
musl-gcc macbook gozstd 问题 musl

数据同步智能化!利用ETLCloud自动化流程实现钉钉OA系统数据自动同步至数仓

钉钉数据同步需求 钉钉是一款企业级通讯和协同办公应用软件,钉钉为企业提供包括聊天、通讯录、日程安排、考勤打卡、审批、通知公告、文件共享、会议等功能,很多企业都在使用钉钉。 很多情况下我们需要把钉钉的数据拉取到数据库中,然后再通过报表工具进行统计分析,实现这种自动化流程通常的做法是写一段 python ......
数据 ETLCloud 流程 智能 系统

1元汽水,2空瓶换1瓶的问题

int main(){ //方案1 int pay = 0; int sum = 0; scanf("%d", &pay); while (pay) { sum += pay; pay /= 2; } sum = sum + 1; printf("%d\n", sum); //方案2 int mon ......
汽水 问题

Kali 用 Wireshark 抓取网络数据包

这个Wireshark是可视化操作工具,可以直接打开。 如下图所示,如果是中文版的,可以直接操作: 如果是英文版的,就点击 Capture 后,选择 Options 打开如下窗口: 以上,我们可以选择 eth0 或 Kiioback:io 进行抓包,这里每个人的接口可能不一样,选择好后点击开始(st ......
Wireshark 数据 网络 Kali

备份mysql全量数据库为sql文件

进入数据库bin目录,cmd运行mysqldump -utest -ptest --all-databases > all.sql 备注 -u后面接用户名 -p后面接密码 “>”是方向,这里指从左到右 备份结果:cmd命令行无提示错误即可, 备份结束的SQL文件才会显示文件大小,之前不显示文件大小。 ......
备份 数据库 文件 数据 mysql

【如何三行代码下载指定的股票或者基金数据到pandas中】用pandas做爬虫

import pandas url="http://vip.stock.finance.sina.com.cn/quotes_service/view/cn_bill_sum.php?num=100&page=1&sort=totalvolpct&asc=0&volume=1000000&type= ......
pandas 爬虫 代码下载 代码 基金

mac更新系统后git出现的一系列问题

1.xcrun: error: invalid active developer path (/Library/Developer/CommandLineTools), missing xcrun at: /Library/Developer/CommandLineTools/usr/bin/xcr ......
问题 系统 mac git

数据结构整理

数据结构模板整理,请自取。 ### 线段树 [$\operatorname{Sgt}$](https://www.luogu.com.cn/paste/870hl6p4) [$\operatorname{BIT}$](画大饼) ### 平衡树 [$\operatorname{Treap}$](htt ......
数据结构 结构 数据

mybatis拦截器实现数据权限

前端的菜单和按钮权限都可以通过配置来实现,但很多时候,后台查询数据库数据的权限需要通过手动添加SQL来实现。 比如员工打卡记录表,有id,name,dpt_id,company_id等字段,后两个表示部门ID和分公司ID。 查看员工打卡记录SQL为:`select id,name,dpt_id,co ......
权限 mybatis 数据

Chrome/Firefox 中头toFixed方法四舍五入兼容性问题

每个Number的toFixed()方法可把 Number 四舍五入为指定小数位数的数字。四舍五入顾名思义,4及以下舍去,5及以上加1。 四舍 1 2 3 4 1.31.toFixed(1) // 1.3 1.32.toFixed(1) // 1.3 1.33.toFixed(1) // 1.3 1 ......
兼容性 Firefox toFixed 方法 Chrome

解决vue项目在IE浏览器打不开的问题

问题:vue项目运行后,在IE浏览器打开,页面为空白。 解决方案: ## 一、首先安装babel-polyfill `npm install --save babel-polyfill` ## 二、在main.js里引入 `import 'babel-polyfill'` ## 三、在首页index ......
浏览器 项目 问题 vue

访问项目resource/static目录下的模板文件(解决Docker部署后访问不到的问题)

###使用ClassPathResource方式获取static下的文件(别的方式本地可以访问到,Docker部署后不行) ```java final String templatePath = "/static/dbManage_Template.xlsx"; ClassPathResource ......
resource 模板 文件 目录 项目

常见开发问题 --- 去除若依的首页菜单

0.将页面放置在views\system\index\index 1.将ruoyi-ui\src\router\index.js下的将 { path: '', component: Layout, redirect: 'index', children: [ { path: 'index', com ......
菜单 常见 问题

BBA EDI项目数据库方案开源介绍

近期为了帮助广大用户更好地使用 EDI 系统,我们根据以往的项目实施经验,将成熟的 EDI 项目进行开源。用户安装好知行之桥EDI系统之后,只需要下载我们整理好的示例代码,并放置在知行之桥指定的工作区中,即可开始使用。 今天的文章主要为大家介绍 BBA EDI 项目,了解如何获取开源的项目代码以及如 ......
数据库 方案 项目 数据 BBA

微信小程序picker-view滑动问题

## 问题 使用taro框架,微信小程序使用 picker-view 时,选择第一项或者最后一项时会有选择不到的问题, 原因是因为小程序官方设定了动画,动画结束之后才会触发 bingchange 事件。 ## 解决 在小程序官方后续的优化中,可使用 immediateChange 立即触发 chan ......
picker-view 程序 picker 问题 view

算法题总结-01背包问题

01背包问题基本可以用一句话描述,i件物品中挑选若干不重复放入容量V的背包中,使得价值最大 核心转移方程为 ```python F[i][v] = max(F[i-1][v],F[i − 1, v − Wi] + Ci) ``` 方程就一个意思,i件物品的最大价值,可以划分为 i-1件物品的最大价值 ......
算法 背包 问题 01

记一次清理docker文件占用磁盘的问题

公司测试环境是k8s,研发发布项目都是通过jenkins发布的,由于打包机器常年不清理没用的镜像以及缓存,导致docker镜像文件以及缓存文件将磁盘打满了,/var/lib/docker/overlay2目录将100G的磁盘直接干满了。现将清理过程记录如下: 先将机器上所有镜像都干掉 for i i ......
磁盘 文件 docker 问题

Python 基础数据类型

## 基础数据类型 ### 一、数字 ``` 2 是一个整数的例子。 长整数 不过是大一些的整数。 3.23和52.3E-4是浮点数的例子。E标记表示10的幂。在这里,52.3E-4表示52.3 * 10-4。 (-5+4j)和(2.3-4.6j)是复数的例子,其中-5,4为实数,j为虚数,数学中表 ......
类型 基础 数据 Python

Django连接mysql数据库

1、在settings.py文件中配置数据库 ,需要提前创建好库,并注册app【python manage.py startapp login 提前创建一个名为"login "的app应用】 2、在login文件夹的models.py中创建一个User表 3. 安装pymysql pip insta ......
数据库 数据 Django mysql

大数据可视化开源平台,一招让数据资源活泛起来!

在这里,推荐大家了解大数据可视化开源平台,这是可以为企业做好数据管理、实现流程化管理的低代码开发平台。 ......
数据 资源 平台

pandas 数据分组 -- groupby

groupby: import random import numpy as np random.seed() df = pd.DataFrame({'data':['a', 'a', 'b', 'b', 'a'], 'num':['one', 'two', 'one', 'two', 'one'] ......
groupby 数据 pandas

总结整理大全,69个后端技术头大问题

总结到位:https://blog.csdn.net/JavaShark/article/details/125912023 前言:工欲善其事,必先利其器;士欲宣其义,必先读其书。后台开发作为互联网技术领域的掌上明珠,一直都是开发者们的追逐的高峰。本文将从后台开发所涉及到的技术术语出发,基于系统开发 ......
大全 问题 技术

解决VUE+Springboot项目跨域问题

通常springboot项目端口为8080 VUE项目端口设置为8088 这样互不干扰,实现了前后端分离,但随之而来的就是跨域问题 网上解决方式很多,这里给一个类,复制后放在springboot项目中即可 位置 import org.springframework.context.annotatio ......
Springboot 项目 问题 VUE

JSR303数据校验:@Validated和@Vaild

在 SpringBoot项目开发中,有一个观点是不要相信前端传入的参数,因为你不知道用户是怎么操作我们接口的,所以在后端也需要对参数进行校验; 一、引入相关依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId> ......
Validated 数据 Vaild JSR 303

Mysql必知必会教程--数据过滤

关键字:where 这里只说明不匹配的用法,其他的较为简单,不予叙述。 select vend_id,prod_name from products where vend_id <> 1003; 输出结果: + + + | vend_id | prod_name | + + + | 1001 | . ......
教程 数据 Mysql