随笔 数据

Mysql数据库基础(2)

一、关系 将实体与实体的关系,反应到最终数据库表的设计上来: 将关系分成三种: 一对一 一对多(多对一) 多对多 所有的关系都是指的表与表之间的关系。 1、一对一 一对一:一张表的一条记录一定只能与另外一张表的一条记录进行对应;反之亦然。 学生表:姓名,性别,年龄,身高,体重,婚姻状况,籍贯,家庭住 ......
数据库 基础 数据 Mysql

Django向数据库添加数据

一、添家数据到数据库 一般通过shell 命令打开Python命令行: python manage.py shell 打开交付式命令行 >>> from pollsapp.models import Choice,Question >>> from django.utils import timez ......
数据 数据库 Django

语音数据增强

1. Specaugment https://ai.googleblog.com/2019/04/specaugment-new-data-augmentation.html 这是一篇来自google的工作,主要通过在时域和频域进行掩盖来进行数据增强; 自己写的可视化代码,使用torchlibros ......
语音 数据

【fastadmin】如何导入excel表格数据

需求 我想在fastadmin批量导入excel表格的数据 实现 第一步 在需要添加index.html中添加一个导入的代码 {:build_toolbar('refresh,add,delete,import')} 第二步 在对应的js文件中添加如下代码 import_url: 'data/imp ......
fastadmin 表格 数据 excel

【Sql Server】实现数据库定时自动备份详细一步步操作(图文)

https://blog.51cto.com/u_15654527/5736711 http://www.taodudu.cc/news/show-5345289.html 一、新建数据库(如:数据库定时备份) 二、新建存储过程,代码如下,注意3个地方需要改数据库名称 USE [数据库定时备份]GO ......
备份 图文 数据库 数据 Server

AWS 中的数据湖

AWS 中的数据湖 动手实践 – Glue、Athena、S3、ETL、Spark、Parquet、QuickSight、Kinesis、Lambda、Comprehend AI 课程英文名:Data Lake in AWS 此视频教程共1.12GB,中英双语字幕,画质清晰无水印,源码附件全 课程地 ......
数据 AWS

数据压缩、博弈与数据压缩,Kolmogorov复杂度

Kraft不等式 McMillan不等式 数据压缩的熵界 香农码 赫夫曼码 错误码 随机过程 平稳过程 竞争最优性 随机变量的生成 双倍率 最优双倍率 按比例投注是对数最优的 增长率 守恒定律 边信息 ......
数据 复杂度 Kolmogorov

数据结构和算法总览

1.数据结构 2.算法 3.数据结构脑图 4_1.算法脑图_上部分 4_2.算法脑图_下部分 5.算法--切题四件套 6.算法--五遍刷题法 ......
数据结构 算法 结构 数据

Python基础(五)图标和数据处理

机器学习里面有很多场景需要图标展示,这简单介绍一下一个图表库 图表库 # #折线图import matplotlib.pyplot as pltimport numpy as npplt.figure(figsize=(4,4)) #设置画布大小plt.title("i am title") ##标 ......
数据处理 图标 基础 数据 Python

mysql 两百万数据 深分页性能优化

-- ddlCREATE TABLE `student` ( `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主键', `user_no` varchar(50) DEFAULT '' COMMENT '学号', `user_name` varchar(5 ......
性能 数据 mysql

总结一下AEP渐进均分性和数据压缩的关系

渐进均分性AEP是和大数定律类似的概念,是弱大数定律的结果。而弱大数定律是指实验的重复次数不断增大时,某件事发生的频率越来越稳定,趋向于这件事发生的概率。 AEP的定义: 如果$X_1, X_2, …, X_n$是独立同分布(i.i.d.)序列,且服从$p(x)$,则有$-\frac{1}{n}lo ......
数据 AEP

ZooKeeper数据和集群特点,ZAB协议和选主过程解析

前言 本文讲述 ZooKeeper 集群架构特点、数据结构、事务ID、选主和ZAB协议具体执行过程。 服务保证 ZooKeeper 非常快速且非常简单。由于它的目标是构建更复杂的服务(如同步)的基础,因此它提供了一组保证: 【顺序一致性】来自客户端的更新将按发送顺序执行,因为只有唯一的主节点负责写请 ......
集群 ZooKeeper 特点 过程 数据

Docker 容器:数据持久化

Docker 容器:数据持久化 每当从镜像创建容器时,它都会创建一个新容器,除了镜像数据之外没有任何数据 意味着如果在提交更改之前删除容器,我们将丢失数据 Docker 应该存在一种将数据的文件系统与容器的文件系统分开的技术 每当创建容器时,也会创建一个文件系统【这是默认的 Linux 文件系统】 ......
容器 数据 Docker

Redis各种数据分片方式应用场景以及优缺点

前言 数据分片是指将数据按某种方式存储到不同的服务上来解决单机服务容量不足的问题。 本文围绕 Redis 讲述逻辑拆分、随机分配、哈希取模、一致性哈希等分片算法原理和使用场景。并在此基础上对比客户端分片、代理(Proxy) 和 Redis Cluster 各自的优缺点。 客户端分片 三种普通方式 逻 ......
优缺点 场景 方式 数据 Redis

nexus5获取csi数据

记录一下在阅读WiFi感知系列文章中对csi(信道状态信息)的获取过程 收集设备:nexus5 安卓版本6.0.1 版本号M4B302 root过 系统:虚拟机Ubuntu18.0.4 发送设备:小米路由器4C(R4CM){准备用别的路由器再测测,这2.4g的路由器收到的数据很怪} 首先sudo s ......
数据 nexus5 nexus csi

(数据科学学习手札151)速通pandas2.0新版本干货内容

本文示例代码已上传至我的Github仓库https://github.com/CNFeffery/DataScienceStudyNotes 1 简介 大家好我是费老师,前两天pandas正式发布了其2.0.0版本,作为一次大版本更新,pandas针对底层进行了大量的重构以优化性能和稳定性,其有关这 ......
干货 手札 pandas2 科学 内容

【算法数据结构专题】「延时队列算法」史上手把手教你针对层级时间轮(TimingWheel)实现延时队列的开发实战落地(上)

承接上文 承接之前的【精华推荐 |【算法数据结构专题】「延时队列算法」史上非常详细分析和介绍如何通过时间轮(TimingWheel)实现延时队列的原理指南】,让我们基本上已经知道了「时间轮算法」原理和核心算法机制,接下来我们需要面向于实战开发以及落地角度进行分析如何实现时间轮的算法机制体系。 前言回 ......

2021-12-30-Docker启动MySQL、MongoDB、Redis、Elasticsearch、Grafana,数据库

layout: post cid: 5 title: Docker启动MySQL、MongoDB、Redis、Elasticsearch、Grafana,数据库 slug: 5 date: 2021/12/30 16:57:00 updated: 2022/03/25 15:53:08 status ......

数据库连接池

#上下文管理和SQLHelper import pymysql from DBUtils.PooledDB import PooledDB class SqlHelper(object): def __init__(self): self.pool = PooledDB( creator=pymys ......
数据库 数据

flask蓝图/G对象/连接数据库/

蓝图使用 中大型项目推进使用蓝图来构建文件目录 1.导入蓝图类 from flask import Blueprint 2.实例化得到蓝图对象 order_bp = Blueprint('order', name) 3.在app中注册蓝图 app.register_blueprint(order_b ......
蓝图 对象 数据库 数据 flask

利用人工智能和大数据,宠物app为宠物提供更全面的健康管理

人们对宠物的关注和重视程度不断提高,越来越多的人开始选择养宠物。然而,宠物的健康管理一直是宠物主人们关注的重点。如何更好地管理宠物的健康,让宠物生活更加健康和幸福,成为了宠物主人们需要思考的问题。近年来,随着人工智能和大数据技术的迅速发展,宠物app已经成为了宠物健康管理的新选择。 一、人工智能技术 ......

宠物app如何借助大数据分析提供更贴心的宠物养护

宠物越来越成为了人们生活中不可或缺的一部分。越来越多的人开始养宠物,而宠物的养护也变得越来越重要。为了更好地照顾宠物,宠物app应运而生。但是,如何利用大数据分析来提供更贴心的宠物养护呢? 一、宠物健康监测 宠物健康监测是宠物app的一个重要功能。通过在app中记录宠物的体重、食欲、精神状态等信息, ......
宠物 宠物养护 数据分析 数据 app

在Linux部署Redis代理Twemproxy实现数据分片

前言 本文主要讲述 Redis 代理 Twemproxy 安装过程。 Twemproxy 是推特开源用于 Memcached 和 Redis 的轻量级代理。这里以0.5.0版本为例。 我们可以通过取模、随机、一致性哈希等算法将数据分散在多个 Redis 服务来实现水平扩展。但是客户端直连就需要跟每个 ......
Twemproxy 数据 Linux Redis

在Linux部署Redis代理Predixy实现数据分片

前言 本文以predixy-1.0.5为例,讲述 Redis 代理 Predixy 安装过程。 Predixy 是一款高性能全特征 Redis 代理,支持 Redis-sentinel 和 Redis-cluster。作者拿其它常用代理做了 性能测评,Predixy 在各个维度性能都是最优的,与其他 ......
Predixy 数据 Linux Redis

MYSQL大批量数据插入的性能问题

批处理 rewriteBatchedStatements=true 项目原来使用的大批量数据插入方法是Mybatis的foreach拼接SQL的方法。 我发现不管改成Mybatis Batch提交或者原生JDBC Batch的方法都不起作用,实际上在插入的时候仍然是一条条记录的插,速度远不如原来My ......
大批量 性能 数据 问题 MYSQL

yolov5训练自己的数据

前一篇文章写了如何的安装yolo5。基于上面的一章,记录下用yolo5来训练自己的数据。 split_train_val.py import os import random trainval_percent = 0.1 train_percent = 0.9 xmlfilepath = '/Use ......
数据 yolov5 yolov

442.数组中重复的数据

数组中重复的数据 给你一个长度为 n 的整数数组 nums ,其中 nums 的所有整数都在范围 [1, n] 内,且每个整数出现 一次 或 两次 。请你找出所有出现 两次 的整数,并以数组形式返回。 你必须设计并实现一个时间复杂度为 O(n) 且仅使用常量额外空间的算法解决此问题。 示例 1: 输 ......
数组 数据 442

labelme制coco数据集(新)

1. labelme标注完的json Labelme标注工具的JSON文件包含了标注信息、图片路径、以及图片的高度和宽度等信息, 2. coco的json COCO数据集格式包含了多个JSON文件,包括标注信息、图片信息、类别信息、图片与类别的关联信息等 3.怎么转换 有两种方式 使用 Labelm ......
labelme 数据 coco

INFS3200 先进数据库系统

INFS3200 Advanced Database SystemsPrac 2: Data Warehousing (5%)Semester 1, 2023Due time: 4:00pm, Friday, 21 April 2023 (Week 8)Submission: Submit your ......
先进 数据库 数据 系统 INFS

python flask 框架后端如何获取前端的表单数据 文本 单选框 多选框

文本 pyhon 后端用request.values.get("name") 去获取 if request.method == "POST": username = request.values.get("username") sex = request.values.get("sex") 二、多选 ......
表单 前端 框架 文本 数据