随笔 数据
Mysql中如何去除重复数据，只保留一条。
1、如果没有主键，则新增自增主键： -- 改变表结构，增加名为id的列 ALTER TABLE emp add id int first; -- 将id字段设置为主键自增； ALTER table emp MODIFY id int PRIMARY key auto_increment; 2、根据n ......
数据处理|批量提取ini文件中的数据
clear clc fileFolder=[pwd,]; dirOutput=dir(fullfile(fileFolder,'*.ini')); fileNames={dirOutput.name}'; num_files = length(fileNames); [filepath,foname ......
【SQL】将查询到的值转换为其它数据（如汉字）
方法一： -- 语法 case when 列名=条件 then 命名 else 命名 end 示例 select id, (case when class= 0 then "语文" when class= 1 then "数学" when class = 2 then "英语" end) as 学科 ......
系统工程（二十一）数据湖
数据湖是存储企业各式各样的原型数据的大型仓库，可供存取、处理、分析、传输。 数据湖里的数据包括结构化和非结构化的数据，结构化数据是数据表格等，非结构化数据是视频、音频等 数据湖可以做数据分析处理，也可以做业务分析处理 数据仓库仅仅支持数据分析处理 数据湖不但支持数据分析处理，也支持业务分析处理 数据 ......
记一次线上问题，Netty接收到的报文一次有数据一次没有数据
最近线上遇到一个问题，客户端发送的tcp报文第一次连接成功后没有数据，第二次连接后正常带数据，第三次又没有数据... 问题排查1：是否有负载均衡，其中有一台机器出现了异常，会出现一次成功一次失败的情况 经过排查，本服务是没有负载均衡的，排除 问题排查2：抓包分析 根据抓包数据，异常情况时，连接建立后 ......
基于对抖音短视频数据分析与可视化
1、选题背景 近年来互联网的逐渐发展，智能终端也迅速崛起，抖音短视频作为引领当下手机娱乐的佼佼者，优质内容创作者日益多元，用户群体结构日趋均衡成就了今天的抖音，本项目是大数据Python爬虫—基于抖音用户数据集的可视化分析。抖音作为当下非常热门的短视频软件，其背后的数据有极高的探索价值。本项目根据1 ......
python数据清理--缺失值与负值的处理
查看数据 可以看到省确诊数(province_confirmedCount)列存在空缺值和负值的情况 省治愈数(province_curedCount)列存在空缺值 市确诊数(city_confirmedCount)列存在负值的情况 数据处理 1.省确诊数(province_confirmedCou ......
数据传输指令
参考资料： L-1.8: Data Transfer Instructions in Computer Organisation and Architecture - YouTube 数据传输指令意味着需要传输数据，什么是源地址？什么是目的地址？ 准备好内存和寄存器组(与处理器进行工作的)，还需要准 ......
对粮食产量进行大数据分析
一、选题背景 近年来，我国各个省份的粮食总产量以及增量增速逐渐倍受关注，如何增加粮食产量也成为了人们关注的热点话题。通过互联网上的信息发布网站，我获取并整合了各省粮食产量数据。其中，“中国产业信息网”每年发布的国内新一年的粮食产量信息。网站发布的信息包括近些年的粮食产量、占比、走势、播种面积等。本课 ......
每日记录(数据结构 第二章 线性表() )
线性表的定义： 存在唯一一个“第一个”元素存在唯一一个“最后一个”元素除第一个元素外，每一个元素都有且只有一个前驱除最后一个元素外，每个元素都有且只有一个后继一、线性表顺序存储结构（顺序表）0.线性表的基本概念线性表强调元素在逻辑上紧密相邻，所以首先想到用数组存储。但是普通数组有着无法克服的容量限制 ......
每日记录(数据结构 第一章 绪论)
这些天准备学一下数据结构，面对越来越多的问题都需要使用设计一些算法，所以从网上摘抄总结的数据结构有关的知识 数据(data)是对客观事物的符号表示。在计算机科学中是指所有能输入到计算机中并被计算机程序处理的符号的总称。 数据元素(data element)是数据的基本单位，在计算机程序中通常作为一个 ......
数据分享|PYTHON用决策树分类预测糖尿病和可视化实例|附代码数据
全文下载链接：http://tecdat.cn/?p=23848 最近我们被客户要求撰写关于决策树的研究报告，包括一些图形和统计输出。 在本文中，决策树是对例子进行分类的一种简单表示。它是一种有监督的机器学习技术，数据根据某个参数被连续分割。决策树分析可以帮助解决分类和回归问题 （ 点击文末“阅读原 ......
对人力资源分析案例研究数据集进行数据分析
一.选题背景 近年就业面临着诸多挑战。一方面，经济的不景气和就业市场的不稳定性使得就业难度加大，就业形势越来越严峻。另一方面，高校毕业生的数量不断增加，而就业岗位的数量却没有相应增加，导致竞争激烈，难以找到合适的工作。此外，还有一些特殊的问题，如女性就业歧视、农村学生就业难等，使得就业问题更加复杂化 ......
数据库系统概论—关系理论、数据库设计
# 数据库系统概论— 设计与应用开发篇(1) ## 一.关系数据理论 主要是关系中**属性和属性之间的依赖关系** ### 1相关基本概念 - **第一范式**：表中无表(属性不可再分) - 数据依赖：是在一个关系内部属性间的约束，分为函数和多值依赖。 eg:学号决定姓名 ### 2.规范化 ### ......
Python爬取郑州安居客租房数据采集分析
一、选题背景 在现在，虽然我国实行楼市调控，使得总体的房价稳定下来，但是我国房价还是处于一个高水平之上。在这种情况下，大批在郑奋斗的年轻人选择租房，所以此次数据分析可以使在郑的年轻人了解郑州租房现状，让年轻人在租房时可以选到更加适合的房源。 二、爬虫设计方案 1、爬虫网址 郑州租房信息_郑州出租房源 ......
【网络基础】用了 TCP 协议，数据一定不会丢吗？
1 前言 TCP 是一个可靠的传输协议，那它一定能保证数据不丢失吗？这次，就跟大家探讨这个问题。 2 数据包的发送流程 首先，我们两个手机的绿皮聊天软件客户端，要通信，中间会通过它们家服务器。大概长这样。 但为了简化模型，我们把中间的服务器给省略掉，假设这是个端到端的通信。且为了保证消息的可靠性，我 ......
springboot+vue基于协同过滤算法商品推荐系统，附源码+数据库
**1、项目介绍** 项目分为普通用户和管理员两个角色。 用户的功能有：登录、注册、商品信息、加入购物车、直接购买、点击收藏、评论、商品资讯、个人中心、我的订单、我的地址、我的收藏 管理员的功能有：登录、个人中心、用户管理、商品类型管理、商品信息管理、轮播图管理、商品资讯管理、订单管理 # [项目获 ......
git 随笔
git用的还是不熟练。 head/index/work directory head是最新的commit index是待提交的commit work directory是写到磁盘的文件，还没add产生快照 `git diff`比较的是pwd工作目录的文件状态和commit（默认为HEAD）中的状态不 ......
【Python网络爬虫课程设计】B站up主——老番茄视频数据爬取+数据可视化分析
一、选题背景 1.背景 随着大数据时代的来临，网络爬虫在互联网中的地位将越来越重要。互联网中的数据是海量的，如何自动高效地获取互联网中我们感兴趣的信息并为我们所用是一个重要的问题，而爬虫技术就是为了解决这些问题而生的。对于身为数据科学与大数据技术专业的学生来说，网络爬虫成为必要的技能之一，结合自己的 ......
使用Getdata软件抓取曲线数据
1. 打开Getdata，点击“File” >“Open Image” 注：图片格式尽量为 jpg，当然 tif bmp pcx也可以。 2. 定义x，y坐标 光标点原点 > 右击 > "Set Xmin" > 设置Xmin值（这里我随便取的，如果要修改，可以：“Operations” > “Adj ......
计算机网络-----数据链路层
《数据链路层的几个共同问题》 《差错检测》 《点对点协议PPP》 《解决！ppp中的透明传输问题》 在PPP协议中帧的标志字段（表示一个帧的开始或结束）为0x7E（01111110） 转义字符为0x7D（01111101） 方法一：字节填充 ，适合于异步传输时 （1）数据字段遇到标志字段的编码则将0 ......
大数据分析--南瓜籽品种分类
大数据分析--南瓜籽品种分类 1.选题背景 南瓜籽为南瓜的种子，葫芦科南瓜属植物南瓜Cucurbita moschata Duch.的种子。一端略尖，外表黄白色，边缘稍有棱，表面带有毛茸。除去种皮，可见绿色菲薄的胚乳，具有健脑提神、降压镇痛、驱虫等功效。南瓜籽因其含有足量的蛋白质、脂肪、碳水化合物和 ......
「闲话随笔」期末考试与高考集训
不会 tarjan 怎么办？不会 exgcd 怎么办？不会 tarjan 怎么办？不会 exgcd 怎么办？不会 tarjan 怎么办？不会 exgcd 怎么办？不会 tarjan 怎么办？不会 exgcd 怎么办？不会 tarjan 怎么办？不会 exgcd 怎么办？ ......
数据结构（4天）
带权并查集： 维护一个数组，保存一个fa[x]与x之间的关系，路径压缩时直接要记得修改关系 int find(int x) { if(fa[x]==x) { return fa[x]; } int root=find(fa[x]); w[x]=f(w[x],w[fa[x]]);//关键 fa[x]= ......
数据结构小结
个人认为数据结构有点偏向理论知识点，从这些理论知识点，我们可以知道各种数据结构的特点，然后在特定的场景下使用对应的数据结构来存储。 基础的数据结构 从逻辑上来说基础的数据结构只有线性结构、非线性结构，也就是数组、链表。其他复杂一点的如队列、栈、树、图、hash table 都可以通过数组和链表的方式 ......
条件渲染，列表渲染，双向数据绑定，事件处理，checkbox单选，
条件渲染v-if,v-else-if,v-else: <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Title</title> <script src="/js/vue.js"></script> </he ......
数据结构第一天
数据 > 数据元素 > 数据项 数据项是构成数据元素的不可分割的最小单位 数据是由数据项组成的，数据项是由数据元素组成的 数据元素 组成数据的基本单位 与数据的关系：是集合的个体 数据对象 性质相同的数据元素的集合 与数据的关系：是集合的子集 数据元素之间的逻辑关系： 逻辑结构的种类 1）线性结构（ ......
Python生成器深度解析：构建强大的数据处理管道
# 前言 生成器是Python的一种核心特性，允许我们在请求新元素时再生成这些元素，而不是在开始时就生成所有元素。它在处理大规模数据集、实现节省内存的算法和构建复杂的迭代器模式等多种情况下都有着广泛的应用。在本篇文章中，我们将从理论和实践两方面来探索Python生成器的深度用法。 ## 生成器的定义 ......