数据库 笔记 数据mysql

MySQL 分表查询

分表是一种数据库分割技术,用于将大表拆分成多个小表,以提高数据库的性能和可管理性。在MySQL中,可以使用多种方法进行分表,例如基于范围、哈希或列表等。下面将详细介绍MySQL如何分表以及分表后如何进行数据查询。 基于哈希的分表 基于哈希的分表是一种将数据分散到多个子表中的数据库分表策略。这种方法通 ......
分表 MySQL

gopup:Python公开数据仓库

GoPUP 支持Python 3.7+,旨在使获取数据尽可能方便,主要用于学术研究目的。 GoPUP 项目所采集的数据皆来自公开的数据源,不涉及任何个人隐私数据和非公开数据。 同时本项目提供的数据接口及相关数据仅用于学术研究,任何个人、机构及团体使用本项目的数据接口及相关数据请注意商业风险。 部分接 ......
仓库 数据 Python gopup

学习笔记2

第9章 I/O库函数 摘要 本章讨论了I/O库函数的作用及优势;用程序说明了I/O库函数与系统调用的关系,解释了二者之间相似性和基本区别;详细介绍了I/O库函数算法:fread、fwrite、fclose,重点在于与read、write、close系统调用的交互;介绍了I/O库函数的不同模式;阐述了 ......
笔记

Base-admin笔记

令牌桶 令牌桶限流,在SpringCloud分布式下限流,需要把令牌桶放到一个公共的地方,如Zuul路由,guava里有现成的基于令牌桶的限流实现。 令牌桶算法的原理是系统会以一个恒定的速度往桶里放入令牌,而如果请求需要被处理,则需要先从桶里获取一个令牌,当桶里没有令牌可取时,则拒绝服务。 当桶满时 ......
Base-admin 笔记 admin Base

MySQL 安装配置

MySQL 是最流行的关系型数据库管理系统,由瑞典MySQL AB公司开发,目前属于Oracle公司。 MySQL所使用的SQL语言是用于访问数据库的最常用标准化语言。 MySQL由于其体积小、速度快、总体拥有成本低,尤其是开放源码这一特点,一般中小型网站的开发都选择MySQL作为网站数据库。 My ......
MySQL

读高性能MySQL(第4版)笔记09_创建高性能索引(下)

1. 覆盖索引 1.1. 设计优秀的索引应该考虑到整个查询,而不单是WHERE条件部分 1.2. 如果一个索引包含(或者说覆盖)所有需要查询的字段的值,我们就称之为覆盖索引 1.3. 只有B-tree索引可以用于覆盖索引 1.4. 如果查询只需要扫描索引而无须回表 1.4.1. 索引条目通常远小于数 ......
高性能 索引 笔记 MySQL 09

【小睿的ML之路】Pandas数据预处理(含泰坦尼克号数据分析案例实战)

import pandas food_info = pandas.read_csv("food_info.csv",encoding="gbk") print(food_info) 名称 价格(元) 糖分(g) 重量(kg) 含水量(mg) 0 苹果 200 20 10 30 1 香蕉 100 50 ......
数据 数据分析 实战 案例 Pandas

Docker Desktop 使用笔记

一、Docker Desktop是什么? Docker Desktop是适用于Windows的Docker桌面,是Docker设计用于在Windows 10上运行。它是一个本地 Windows 应用程序,为构建、交付和运行dockerized应用程序提供易于使用的开发环境。Docker Deskto ......
Desktop 笔记 Docker

Power BI: 如何进行数据模糊匹配

问题描述: 业务同事反馈,最近在做一个送赠品的活动。发现有相当一部分用户有薅羊毛的嫌疑。 询问是否有方法可以找快递地址的相似度,业务同事会设置几个相似度百分比级别,把达到相似度级别的地址找出然后进行人工鉴定。 由于相关分析报告前期都是在Power BI中完成,所以询问是否可以在Power BI中完成 ......
数据 Power BI

新人笔记-多态2.0

package com_black.duotai; public class Animal2 { public void eat(){ System.out.println("动物吃东西"); } } package com_black.duotai; public class Cat2 exten ......
新人 笔记 2.0

Webfunny大版本改造(mysql迁移至clickhouse)

Hello,大家好,欢迎使用Webfunny前端监控、Webfunny前端埋点系统。 最近一段时间,我们整个团队都在忙着改造webfunny的clickhouse版,改造的内容非常之多,工作量非常之大,大家都忙得焦头烂额的。所以很多小伙伴提的优化建议,在这段时间都搁置了,除非是比较严重的bug,基本 ......
clickhouse Webfunny 版本 mysql

数据结构之栈

1. 什么是栈? 栈是一种常见的数据结构,它遵循先进后出(LIFO)的原则。栈可以用来解决很多实际问题,比如函数调用、表达式求值、括号匹配等。 2. 特点 栈是一种线性数据结构,由一系列元素组成。 栈的插入和删除操作只能在栈的顶部进行。 栈的顶部元素是最后一个插入的元素,也是唯一可以访问的元素。 3 ......
数据结构 结构 数据

pandas中的dataframe使用loc取数据之后进行操作后对原来的dataframe产生影响的bug

相关问题: Python pandas.DataFrame在用ix, loc, iloc 索引的时候就相当于拷贝copy了一个对象_reachHigher的博客-CSDN博客 针对这样子的dataframe: 如果进行单列选取后得到的是series类型的数据: 那么对part_1进行修改后会对原来的 ......
dataframe 数据 pandas bug loc

学习笔记二

一、笔记 (一)I/O库函数 I/O库函数是在C和C++编程中广泛使用的文件操作函数,用于进行输入和输出操作。它们是构建在系统调用之上的高级接口,提供了更方便和高效的文件操作方法。 (二)I/O库函数与系统调用 I/O库函数与系统调用密切相关,它们封装了底层的系统调用,提供了更高级别、更易用的接口。 ......
笔记

PivotGridControl自定义行数据的统计公式

我们在使用PivotGridControl进行数据统计的时候,用时候需要在不同的行使用不同的汇总公式的情况,本文就是为了说明怎么实现此功能,如下图说明 数据源: 注意:此时数据列指定的SummaryType设置的是Sum;并且数据列指定了为double类型 SummaryType指定的几种聚合函数, ......
PivotGridControl 公式 数据

python网络爬虫——爬取东方财富网股票数据并分析

一、选题的背景: 股票数据分析是一个非常重要的领域,它可以帮助投资者做出更明智的投资决策。选取这个选题的背景主要有以下几点: 1. 市场波动:股票市场不断波动,价格的涨跌对投资者来说是一个重要的影响因素。通过对股票数据进行分析,可以揭示市场的走势和各种趋势,帮助投资者更好地了解市场状况,制定合理的投 ......
爬虫 财富 股票 数据 python

MySQL数据库

目录MySQL数据库1. 基本概念2. DBMS3. 发展史4. 主流数据库介绍5. 数据库分类5.1 关系数据库5.2 非关系型数据库6. SQL语句6.1 SQL语句分类:6.1.1 DDL:数据定义语言,用于管理数据库对象,如库、表、索引等6.1.2 DML:数据操纵语言,用于管理表数据6.1 ......
数据库 数据 MySQL

Python读取SQLite数据库文件并转csv(.sqlite 文件)

要读取一个SQLite数据库文件(.sqlite 文件),可以使用各种编程语言提供的SQLite库来执行数据库操作。 以下是一个Python的示例,演示如何使用sqlite3库来读取SQLite数据库文件: import sqlite3 # 连接到SQLite数据库文件 conn = sqlite3 ......
文件 数据库 数据 Python SQLite

msf扫描靶机上mysql服务的空密码

我们启动一台 Metasploitable2-Linux 靶机网络模式为桥接 IP:192.168.146.136 登录 Metasploitable2-Linux 系统用户名 root,密码:123456 输入 ip a 查看 ip 地址 登录 Kali 开始搜索模块 msf6 > search ......
靶机 密码 mysql msf

20230914-python爬取数据写入到excel

python爬取数据写入到excel 1。查看是否安装了相应的插件 pip list 2。查看是否安装了 pandas (安装命令在cmd中安装,pip install pandas) 3。查看是否安装 openpyxl pip install openpyxl ####写入excel import ......
20230914 数据 python excel

MySQL系列2:InnoDB存储引擎

1. 架构回顾 上一篇我们讲解了MySQL的逻辑架构,重新回顾一下,用一张新的图来认识一下该架构。 整体架构分为service层与存储引擎层,请求交给连接池后,由后台线程处理,并将请求转发给SQL接口,随后交给解析器执行,如果解析器发现命中缓存,直接从缓存读数据返回,如果没有,依次往下执行,直到从存 ......
引擎 InnoDB MySQL

MySQL的时间类型

目录🥇1.时间类型介绍🥈1.1 DATE🥈1.2 TIME🥈1.3 DATETIME🥈1.4 TIMESTAMP🥈1.5 YEAR🥇2.时间相关的函数🥈2.1 CURTIME()🥈2.2 DATE(expr)🥈2.3 DATEDIFF(expr1,expr2)🥈2.4 DATE ......
类型 时间 MySQL

MFAN论文阅读笔记(待复现)

论文标题:MFAN: Multi-modal Feature-enhanced Attention Networks for Rumor Detection 论文作者:Jiaqi Zheng, Xi Zhang, Sanchuan Guo, Quan Wang, Wenyu Zang, Yongdo ......
笔记 论文 MFAN

ubuntu22.04.3 安装postgresql 16 rc1数据库

ubuntu22.04.3 安装postgresql 16 rc1数据库 一、直接安装 # Create the file repository configuration: sudo sh -c 'echo "deb https://apt.postgresql.org/pub/repos/apt ......
postgresql 数据库 数据 ubuntu rc1

NoSQL数据库

1、什么是NoSQL NoSQL(Not only SQL)是对不同于传统的关系数据库的数据库管理系统的统称,即广义地来说可以把所有不是关系型数据库的数据库统称为NoSQL。 NoSQL 数据库专门构建用于特定的数据模型,并且具有灵活的架构来构建现代应用程序。NoSQL 数据库使用各种数据模型来访问 ......
数据库 数据 NoSQL

MySQL5.7安装超详细步骤(图文超详细教程)

一、首先下载MySQL Mysql官网下载地址: MySQL :: Download MySQL Installer (Archived Versions) 华为MySQL镜像站 : https://mirrors.huaweicloud.com/mysql/Downloads/ 网易云开源镜像站: ......
步骤 图文 教程 MySQL5 MySQL

HBase学习5(HBase java编程:创建项目,创建删除表,数据增删改查)

1.准备工作 1.1 创建IDEA Maven项目 其中名字为hbase_op,groupid为cn.itcast 然后导入pom依赖 <repositories><!-- 代码库 --> <repository> <id>aliyun</id> <url>http://maven.aliyun.c ......
HBase 项目 数据 java

人大金仓-国产数据库--九五小庞

1.人大金仓数据库官网介绍 人大金仓专注数据库领域20余载,具备出色的数据库产品研发及服务能力。曾先后承担国家“863”、电子发展基金、信息安全专项、国家重点研发计划、“核高基”等重大课题研究。核心产品金仓数据库管理系统 KingbaseES是具备先进水平的大型通用数据库。2018年人大金仓申报的“ ......
国产 数据库 数据

天翼云存储资源盘活系统HBlock,全面释放企业数据价值

9月6日,天翼云与科技媒体InfoQ联合举办的以“存储难题新解法,揭秘极/致易用的HBlock”为主题的线上技术分享会圆满落幕。天翼云国际业务事业部研发专家武志民与存储产品线总监魏玮以“天翼云存储资源盘活系统 HBlock,深挖独创技术亮点与实战演练”为主题,分享了HBlock在安装部署、数据可靠性... ......
价值 数据 HBlock 系统 资源

文献笔记

文献笔记 基础 对待复杂问题可以先考虑极限情形,从特殊到一般(一维,对角,边界); 对同一问题可切换视角从不同角度进行考虑加深理解(如数学、统计、信息论等); 注意通过添项、配方等方式整体换元简化问题(如利用正交性连乘转连加); 函数零点分布判断: 驻点(极值点或鞍点)\(f^\prime(x)=0 ......
文献 笔记