数据库 数据mysql平台
三维模型3DTile格式轻量化压缩处理的数据质量提升方法分析
三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作，从而实现三维模型轻量化。轻量化压缩比大，模型轻量化效率高，自动化处理能力高；采用多种算法对三维模型进行几何精纠正处理，精度高，... ......
MySQL 分表查询
分表是一种数据库分割技术，用于将大表拆分成多个小表，以提高数据库的性能和可管理性。在MySQL中，可以使用多种方法进行分表，例如基于范围、哈希或列表等。下面将详细介绍MySQL如何分表以及分表后如何进行数据查询。 基于哈希的分表 基于哈希的分表是一种将数据分散到多个子表中的数据库分表策略。这种方法通 ......
gopup：Python公开数据仓库
GoPUP 支持Python 3.7+，旨在使获取数据尽可能方便，主要用于学术研究目的。 GoPUP 项目所采集的数据皆来自公开的数据源，不涉及任何个人隐私数据和非公开数据。 同时本项目提供的数据接口及相关数据仅用于学术研究，任何个人、机构及团体使用本项目的数据接口及相关数据请注意商业风险。 部分接 ......
MySQL 安装配置
MySQL 是最流行的关系型数据库管理系统，由瑞典MySQL AB公司开发，目前属于Oracle公司。 MySQL所使用的SQL语言是用于访问数据库的最常用标准化语言。 MySQL由于其体积小、速度快、总体拥有成本低，尤其是开放源码这一特点，一般中小型网站的开发都选择MySQL作为网站数据库。 My ......
读高性能MySQL（第4版）笔记09_创建高性能索引（下）
1. 覆盖索引 1.1. 设计优秀的索引应该考虑到整个查询，而不单是WHERE条件部分 1.2. 如果一个索引包含（或者说覆盖）所有需要查询的字段的值，我们就称之为覆盖索引 1.3. 只有B-tree索引可以用于覆盖索引 1.4. 如果查询只需要扫描索引而无须回表 1.4.1. 索引条目通常远小于数 ......
【小睿的ML之路】Pandas数据预处理（含泰坦尼克号数据分析案例实战）
import pandas food_info = pandas.read_csv("food_info.csv",encoding="gbk") print(food_info) 名称 价格（元） 糖分（g） 重量（kg） 含水量（mg） 0 苹果 200 20 10 30 1 香蕉 100 50 ......
Power BI: 如何进行数据模糊匹配
问题描述： 业务同事反馈，最近在做一个送赠品的活动。发现有相当一部分用户有薅羊毛的嫌疑。 询问是否有方法可以找快递地址的相似度，业务同事会设置几个相似度百分比级别，把达到相似度级别的地址找出然后进行人工鉴定。 由于相关分析报告前期都是在Power BI中完成，所以询问是否可以在Power BI中完成 ......
Webfunny大版本改造（mysql迁移至clickhouse)
Hello，大家好，欢迎使用Webfunny前端监控、Webfunny前端埋点系统。 最近一段时间，我们整个团队都在忙着改造webfunny的clickhouse版，改造的内容非常之多，工作量非常之大，大家都忙得焦头烂额的。所以很多小伙伴提的优化建议，在这段时间都搁置了，除非是比较严重的bug，基本 ......
数据结构之栈
1. 什么是栈？ 栈是一种常见的数据结构，它遵循先进后出（LIFO）的原则。栈可以用来解决很多实际问题，比如函数调用、表达式求值、括号匹配等。 2. 特点 栈是一种线性数据结构，由一系列元素组成。 栈的插入和删除操作只能在栈的顶部进行。 栈的顶部元素是最后一个插入的元素，也是唯一可以访问的元素。 3 ......
pandas中的dataframe使用loc取数据之后进行操作后对原来的dataframe产生影响的bug
相关问题： Python pandas.DataFrame在用ix, loc, iloc 索引的时候就相当于拷贝copy了一个对象_reachHigher的博客-CSDN博客 针对这样子的dataframe： 如果进行单列选取后得到的是series类型的数据： 那么对part_1进行修改后会对原来的 ......
Xilinx平台以太网接口（二）系统架构
汇总篇： Xilinx FPGA平台以太网接口（汇总篇）_xilinx ethernet_子墨祭的博客-CSDN博客 一、系统架构 基于TOP-DOWN的设计思路，我们首先需要了解基于FPGA的以太网接口设计的系统模型： MAC是媒体访问控制器。以太网MAC由IEEE-802.3以太网标准定义。它实 ......
Xilinx平台以太网接口（一）TCP-IP基础
汇总篇: Xilinx FPGA平台以太网接口（汇总篇）_xilinx ethernet_子墨祭的博客-CSDN博客 本系列文章基于xilinx三速以太网IP进行学习介绍。 在完成以太网通信实验之前，必须要对以太网基础知识进行了解。时间充裕的可以看看《图解TCP/IP》作为扫盲。本文重点对以太网帧结 ......
PivotGridControl自定义行数据的统计公式
我们在使用PivotGridControl进行数据统计的时候，用时候需要在不同的行使用不同的汇总公式的情况，本文就是为了说明怎么实现此功能，如下图说明 数据源： 注意：此时数据列指定的SummaryType设置的是Sum；并且数据列指定了为double类型 SummaryType指定的几种聚合函数， ......
python网络爬虫——爬取东方财富网股票数据并分析
一、选题的背景： 股票数据分析是一个非常重要的领域，它可以帮助投资者做出更明智的投资决策。选取这个选题的背景主要有以下几点： 1. 市场波动：股票市场不断波动，价格的涨跌对投资者来说是一个重要的影响因素。通过对股票数据进行分析，可以揭示市场的走势和各种趋势，帮助投资者更好地了解市场状况，制定合理的投 ......
MySQL数据库
目录MySQL数据库1. 基本概念2. DBMS3. 发展史4. 主流数据库介绍5. 数据库分类5.1 关系数据库5.2 非关系型数据库6. SQL语句6.1 SQL语句分类:6.1.1 DDL:数据定义语言，用于管理数据库对象，如库、表、索引等6.1.2 DML:数据操纵语言，用于管理表数据6.1 ......
Python读取SQLite数据库文件并转csv（.sqlite 文件）
要读取一个SQLite数据库文件（.sqlite 文件），可以使用各种编程语言提供的SQLite库来执行数据库操作。 以下是一个Python的示例，演示如何使用sqlite3库来读取SQLite数据库文件： import sqlite3 # 连接到SQLite数据库文件 conn = sqlite3 ......
msf扫描靶机上mysql服务的空密码
我们启动一台 Metasploitable2-Linux 靶机网络模式为桥接 IP：192.168.146.136 登录 Metasploitable2-Linux 系统用户名 root，密码：123456 输入 ip a 查看 ip 地址 登录 Kali 开始搜索模块 msf6 > search ......
20230914-python爬取数据写入到excel
python爬取数据写入到excel 1。查看是否安装了相应的插件 pip list 2。查看是否安装了 pandas （安装命令在cmd中安装，pip install pandas） 3。查看是否安装 openpyxl pip install openpyxl ####写入excel import ......
MySQL系列2：InnoDB存储引擎
1. 架构回顾 上一篇我们讲解了MySQL的逻辑架构，重新回顾一下，用一张新的图来认识一下该架构。 整体架构分为service层与存储引擎层，请求交给连接池后，由后台线程处理，并将请求转发给SQL接口，随后交给解析器执行，如果解析器发现命中缓存，直接从缓存读数据返回，如果没有，依次往下执行，直到从存 ......
MySQL的时间类型
目录🥇1.时间类型介绍🥈1.1 DATE🥈1.2 TIME🥈1.3 DATETIME🥈1.4 TIMESTAMP🥈1.5 YEAR🥇2.时间相关的函数🥈2.1 CURTIME()🥈2.2 DATE(expr)🥈2.3 DATEDIFF(expr1,expr2)🥈2.4 DATE ......
ubuntu22.04.3 安装postgresql 16 rc1数据库
ubuntu22.04.3 安装postgresql 16 rc1数据库 一、直接安装 # Create the file repository configuration: sudo sh -c 'echo "deb https://apt.postgresql.org/pub/repos/apt ......
NoSQL数据库
1、什么是NoSQL NoSQL(Not only SQL)是对不同于传统的关系数据库的数据库管理系统的统称，即广义地来说可以把所有不是关系型数据库的数据库统称为NoSQL。 NoSQL 数据库专门构建用于特定的数据模型，并且具有灵活的架构来构建现代应用程序。NoSQL 数据库使用各种数据模型来访问 ......
MySQL5.7安装超详细步骤(图文超详细教程)
一、首先下载MySQL Mysql官网下载地址： MySQL :: Download MySQL Installer (Archived Versions) 华为MySQL镜像站 ： https://mirrors.huaweicloud.com/mysql/Downloads/ 网易云开源镜像站： ......
HBase学习5（HBase java编程:创建项目，创建删除表，数据增删改查）
1.准备工作 1.1 创建IDEA Maven项目 其中名字为hbase_op，groupid为cn.itcast 然后导入pom依赖 <repositories><!-- 代码库 --> <repository> <id>aliyun</id> <url>http://maven.aliyun.c ......
人大金仓-国产数据库--九五小庞
1.人大金仓数据库官网介绍 人大金仓专注数据库领域20余载，具备出色的数据库产品研发及服务能力。曾先后承担国家“863”、电子发展基金、信息安全专项、国家重点研发计划、“核高基”等重大课题研究。核心产品金仓数据库管理系统 KingbaseES是具备先进水平的大型通用数据库。2018年人大金仓申报的“ ......
天翼云存储资源盘活系统HBlock，全面释放企业数据价值
9月6日，天翼云与科技媒体InfoQ联合举办的以“存储难题新解法，揭秘极/致易用的HBlock”为主题的线上技术分享会圆满落幕。天翼云国际业务事业部研发专家武志民与存储产品线总监魏玮以“天翼云存储资源盘活系统 HBlock，深挖独创技术亮点与实战演练”为主题，分享了HBlock在安装部署、数据可靠性... ......
以太坊数据存证性能与膨胀率测试
我们基于区块链在企业中的应用最广泛的就是“存证”功能需求，这是利用了区块链不可篡改和数据共享的特点，存证的业务数据一方面可以保证留痕和追溯，另一方面也实现了多个节点（如果部署在不同企业和部门）之间的数据共享。如果要实现存证，我们最关心并不是图灵完备，也不是去中心化，而是 存证的性能（也就是TPS）和 ......
零拷贝技术：减少数据复制和上下文切换，提高网络传输效率（上）
在本次讨论中，我们确实只是提到了DMA技术在文件传输过程中的重要作用，并对零拷贝技术进行了简要介绍。然而，网络传输中存在的问题和优化方法是一个庞大的话题，涉及到诸多方面。因此，我决定将这些问题的详细讨论留到下一篇文章中，以便更全面地探讨网络传输的优化。我希望通过这样的讨论，能够为读者提供有益的信息和... ......
数据库更新效率测试
有个项目记录采集点的实时数据（mysql5.7），约5000条记录，在C#的DataTable更新好后，一次性Update到表中，但速度非常慢要4分钟左右，但程序定时更新为5分钟，经常超时，也找不到好的办法，最后把这个表改为Memory引擎后速度提高到5秒左右，总算解决了问题。 因为此，在本机做了些 ......
MySQL单表数据量
小结： 1、 数据页需要读写，写入到一半的过程中可能会发生了意外断电等情况，所以为了保证数据页的准确性，还引入了校验码； 我跟面试官说MySQL单表数据量不要超过两千万，面试官不信 https://mp.weixin.qq.com/s/C3VI2-pMkhkNIwxzQlhdLg 翻译 搜索 复制 ......