数据源 数据dremio nessie
基本数据类型及转换
基本数据类型及转换 代码 // example.go package test import "fmt" func BasicDataTypes() { fmt.Println("整数类型") var ( n1 = 0b0101 //二进制,默认为int n2 int8 = 0o77 //八进制 n ......
基于pandas的数据清洗 -- 异常值的清洗
博客地址：https://www.cnblogs.com/zylyehuo/ 开发环境 anaconda 集成环境：集成好了数据分析和机器学习中所需要的全部环境 安装目录不可以有中文和特殊符号 jupyter anaconda提供的一个基于浏览器的可视化开发工具 自定义一个1000行3列（A，B，C ......
基于pandas的数据清洗 -- 重复值的清洗
博客地址：https://www.cnblogs.com/zylyehuo/ 开发环境 anaconda 集成环境：集成好了数据分析和机器学习中所需要的全部环境 安装目录不可以有中文和特殊符号 jupyter anaconda提供的一个基于浏览器的可视化开发工具 df = DataFrame(dat ......
基于pandas的数据清洗 -- 缺失值（空值）的清洗
博客地址：https://www.cnblogs.com/zylyehuo/ 开发环境 anaconda 集成环境：集成好了数据分析和机器学习中所需要的全部环境 安装目录不可以有中文和特殊符号 jupyter anaconda提供的一个基于浏览器的可视化开发工具 丢失数据的类型 原始数据中会存在两种 ......
【9.0】Fastapi表单数据处理
【一】表单参数 【1】定义视图 from fastapi import APIRouter, status, Form from pydantic import BaseModel, EmailStr from typing import Optional, Union, List app04 = ......
【5.0】Fastapi路径参数和数据的解析验证
【一】小项目构建 【1】文档结构树 projects ├─coronavirus ├─__init__.py ├─....py ├─turtorial ├─__init__.py ├─chapter03.py ├─chapter04.py ├─chapter05.py ├─chapter06.py ......
【12.0】Fastapi中的数据库SQLAlchemy ORM 操作
【一】大型项目结构树 coronavirus ├─static # 静态文件 ├─templates # 前端页面 ├─__init__.py # 初始化文件 ├─database.py # 数据库操作 ├─models.py # 数据库表模型类 ├─schemas.py # 响应体模型类 ├─cu ......
利用PHP的数组splice方法进行高效数据删除和插入
PHP数组是一个非常强大的数据结构，它可以存储多个值，并按照需要对这些值进行添加、删除或修改。在PHP中，我们可以使用splice方法对数组进行删除和插入操作，以实现高效的数据操作。本文将介绍如何使用数组splice方法进行数据删除和插入，并给出示例代码。一、使用splice方法进行数据删除数组sp ......
【十分钟一个知识点】数据、信息、编码
数据 数据是对客观事物的符号表示 信息 没有统一的定义，但是我们日常生活中所认为的信息都只是信息的载体 特征： 载体依附性：信息无法独立存在，依附于载体 时效性：信息反映事物某一时间的状态、内容 共享性：信息可以共享，同一种信息可以同时被不同的接收者获取 可加工处理性、真伪性：信息有真伪，可以被人工 ......
Llama2-Chinese项目：2.3-预训练使用QA还是Text数据集？
Llama2-Chinese项目给出pretrain的data为QA数据格式，可能会有疑问pretrain不应该是Text数据格式吗？而在Chinese-LLaMA-Alpaca-2和open-llama2预训练使用的LoRA技术，给出pretrain的data为Text数据格式。所以推测应该pre ......
mongodb 导入导出数据
导入数据 C:\mongodb\bin>mongoimport --db chapterenglish --collection userTable--file c:\userTable.json C:\mongodb\bin>mongoimport --db junxin --collection ......
pandas 加载minio 文件数据
就是一个简单记录，基于s3 进行文件存储还是比较方便的 环境准备 docker-compose.yaml version: '3' services: minio: image: minio/minio ports: - "9002:9000" - "19001:19001" environment ......
Go每日一库之158：termtables（表格形式数据输出）
## 简介 今天学个简单点的，`[termtables](https://github.com/scylladb/termtables)`处理表格形式数据的输出。适用于随时随地的输出一些状态或统计数据，便于观察和调试。是一个很小巧的工具库。我在学习`[dateparse](https://darju ......
Go每日一库之153：categraf （数据采集 Agent）
## 简介 Categraf 是夜莺监控的默认数据采集 Agent，主打开箱即用和all-in-one，同时支持对metrics、log、trace 的收集，由夜莺监控核心开发团队开发。 Categraf的代码托管在两个地方： - 中国计算学会确实开源平台： - [https://www.gitli ......
Go每日一库之155：go-spew（输出 Go 数据结构）
对于应用的调试，我们经常会使用 fmt.Println来输出关键变量的数据。或者使用 log 库，将数据以 log 的形式输出。对于基础数据类型，上面两种方法都可以比较方便地满足需求。对于一些结构体类型数据，通常我们可以先将其序列化后再输出。 如果结构体中包含不可序列化的字段，比如 func 类型， ......
机器学习之数据可视化库Matplotlib
简介 用Python做可视化展示是非常便捷的，现成的工具包有很多，不仅可以做成一个平面图，而且还可以交互展示。Matplotlib算是最老牌且使用范围最广的画图工具了。 常规绘图方法 import matplotlib.pyplot as plt import numpy as mp %matplo ......
机器学习之数据处理及分析库Pandas
简介 Pandas工具包是专门用作数据处理和分析的，其底层的计算其实都是由Numpy来完成，再把复杂的操作全部封装起来，使其用起来十分高效、简洁。在数据科学领域，无论哪个方向都是跟数据打交道，所以Pandas工具包是非常实用的。 数据预处理 import pandas as pd df = pd.r ......
如何下载全国建筑轮廓(基底)数据？
通过以下方法可以将全国建筑轮廓(基底)数据下载到本机。 方法/步骤 下载GIS地图下载器 http://www.geosaas.com/download/mapdownloader.zip，下载解压后，双击“GISSaaS.MapDownloader.Client.exe”文件。 2、在要下载的 ......
如何下载全国POI兴趣点数据？
通过以下方法可以将全国POI兴趣点数据下载到本机。 方法/步骤 下载GIS地图下载器 http://www.geosaas.com/download/mapdownloader.zip，下载解压后，双击“GISSaaS.MapDownloader.Client.exe”文件。 2、在要下载的县级 ......
数据库、数据表的基本操作
1.数据库的基本操作 创建一个数据库 创建数据库就是在数据库系统中划分一块空间存储数据，语法如下： create database alice2; 创建一个叫alice2的数据库MySQL命令; show create database alice2; 创建数据库后查看该数据库基本信息MySQL命令 ......
pandas -- 处理非数值型数据 -- 数据分析三剑客(核心)
博客地址：https://www.cnblogs.com/zylyehuo/ 为什么学习pandas numpy已经可以帮助我们进行数据的处理了，那么学习pandas的目的是什么呢？ numpy能够帮助我们处理的是数值型的数据，当然在数据分析中除了数值型的数据还有好多其他类型的数据（字符串，时间序列 ......
Vue双向数据绑定原理-下
Vue双向数据绑定原理-下这一篇文章主要讲解Vue双向数据绑定的原理，主要是通过Object.defineProperty()来实现的，这里我们手写Vue双向数据绑定的原理。 首先我提出一个需求，我的需求是，快速监听对象中所有属性的变化。 首先得要有一个对象，对象的定义代码如下： <script> ......
Vue双向数据绑定原理-中
defineProperty方法 defineProperty除了可以动态修改/新增对象的属性以外, 还可以在修改/新增的时候给该属性添加get/set方法, 从而实现数据劫持。 defineProperty get/set方法特点 只要通过defineProperty给某个属性添加了get/set ......
数据库事务
DROP TABLE IF EXISTS account;-- 创建account表CREATE TABLE account( id INT primary key auto_increment, name VARCHAR(40), money FLOAT);-- 向表中插入数据INSERT INT ......
numpy -- 数据分析三剑客
博客地址：https://www.cnblogs.com/zylyehuo/ NumPy(Numerical Python) 是 Python 语言中做科学计算的基础库。重在于数值计算，也是大部分Python科学计算库的基础，多用于在大型、多维数组上执行的数值运算。 开发环境 anaconda 集成 ......
python提取论文图片波形数据：pyautogui键盘移动鼠标，跨模块全局变量使用，cv2局部放大窗口，matplotlib图片在pyQT5lable显示,坐标变换，多线程同时使用
最近写了一个python提取论文图片波形数据的脚本，代码如下。 涉及新知识点：pyautogui键盘移动鼠标，跨模块全局变量使用，cv2局部放大窗口，matplotlib图片在pyQT5lable显示,坐标变换，多线程同时使用。搜索相关关键字去对应代码区看注释就可以了。 gui窗口： 1 # -*- ......
给PG数据库已有表，已存在列添加序列并设置序列当前值为自增列的最大值
CREATE OR REPLACE FUNCTION "public"."add_sequence_to_table"("p_table_name" text, "p_column_name" text) RETURNS "pg_catalog"."void" AS $BODY$ DECLARE m ......
jupyter -- 数据分析可视化开发工具
博客地址：https://www.cnblogs.com/zylyehuo/ jupyter介绍 jupyter就是anaconda提供的一个基于浏览器的可视化开发工具 jupyter的基本使用 启动 在终端中录入：jupyter notebook的指令，按下回车 新建 python3：anacon ......
golang 使用 gorm 查询数据 demo
内容来自对 chatgpt 的咨询 题目 假设你有一张学生数据库表，需要通过golang 的gorm查询某个id的学生实体 查询 demo 在这段代码中，"student"变量是一个Student类型的结构体，用于存储查询结果。我们通过调用gorm.DB的Where方法和 First 方法，将第一个 ......
Python 汇总列数据到行
Python汇总Excel列数据到行（方法一） import pandas as pd # 读取Excel文件 df = pd.read_excel('C:\\Users\\liuchunlin2\\Desktop\\测试数据\\员工.xlsx') # 选择您要处理的列 column_data = ......