数据分析 学习方法 实例 做法
SQLServer BCP批量导入导出数据
SQLServer BCP批量导入导出数据 语法 bcp [database_name.] schema.{table_name | view_name | "query"} {in data_file | out data_file | queryout data_file | format nu ......
读算法霸权笔记12_数据科学
1. 公平与公正 1.1. 公平大多数时候只是副产品 1.2. 由贪婪或偏见导致的不公正一直发生在我们身边 1.2.1. 如果承认法律面前人人平等，或者作为选民的大众应该被平等对待，我们就不能允许模型把我们分为不同的群体进行区别对待 1.3. 对于数学模型来说，公平和公共利益也是如此，其价值难以用数 ......
[转帖]mysql8 ALGORITHM=INSTANT 亿级数据秒速增加字段
一、概述登录后复制 在线DDL之快速增加列（秒级别的），并不会造成业务抖动。该功能自 MySQL 8.0.12 版本引入，是由腾讯游戏DBA团队贡献，此功能只适用于 InnoDB 表。实际上MySQL 5.7就已支持 Online DDL，虽说大部分 DDL 不影响对表DML操作，但是依然会消耗非常 ......
QQ2012协议报文分析【网络转载仅供爱好者学习，无实际价值】
[NO.1 2012-06-28 12:17:11 948 SEND 111字节] 02 2E 4B 00 91 33 AC 8C BA 02 56 02 00 00 00 01 01 01 00 00 65 74 4D 38 64 C9 CA 67 1F FC 47 F7 A1 20 1D E4 ......
数据库有故障怎么了？
数据库故障是不可避免的，任何软件，无论是开源类还是商业类，只要是人创造的，就一定会存在产品缺陷（bug），软件越复杂，承载任务越繁多，触发bug的概率就越大，这是IT人的基本常识。 快速定位能力的关键性 真正重要的是，在出现故障时，如何迅速而有效地应对故障，定位故障根因并给出有效的解决方案，这才是确 ......
hudi数据湖
字节跳动基于 Hudi 的实时数据湖平台 https://developer.volcengine.com/articles/7220345269954003004 数仓实时化改造：Hudi on Flink 在顺丰的实践应用 https://www.logclub.com/articleInfo/ ......
python-数据解析-bs4介绍
一、数据解析方式-bs4 1、 爬虫数据的解析常用方式有三种： 1、正则表达式 2、bs4 3、xpath解析 2、本次主要学习bs4，首先要先准备好环境，即要安装使用beautiful Soup，这里已经安装好了bs4模块，如下： pip install bs4 和 pip install lxm ......
numpy学习笔记1
numpy 介绍 NumPy(Numerical Python) 是 Python 语言的一个扩展程序库，支持大量的维度数组与矩阵运算，此外也针对数组运算提供大量的数学函数库。 NumPy 是一个运行速度非常快的数学库，主要用于数组计算，包含： 一个强大的N维数组对象 ndarray 广播功能函数 ......
机器学习-决策树系列-Adaboost算法-集成学习-29
目录1. adaboost算法的基本思想2. 具体实现 1. adaboost算法的基本思想 集成学习是将多个弱模型集成在一起 变成一个强模型 提高模型的准确率，一般有如下两种： bagging: 不同的base model可以并行计算，输出预测结果少数服从多数，回归问题则对多个模型输出的结果求平均 ......
数据仓库、数据湖、湖仓一体的区别？
https://www.cnblogs.com/miketwais/articles/data_lakehouse.html 数仓：存储结构化数据，基于指标需求，面向主题组织数据，协助经营者进行决策； 数据湖：存储结构化，半结构化，非结构化，二进制数据，强调的是对于原始数据的存储，保留数据的完整性。 ......
在MFC中使用CArchive进行串行化数据
使用CArchive进行数据串行化非常的方便。 CArchive持有一个CFile对象，通过此对象进行读写，那么所有基于CFile的子类，都可以使用CArchive来进行串行化。 示例： CFile file(_T("1.txt"), CFile::modeReadWrite); CArchive ......
Servlet(JSP)学习笔记
目录IDEA配置JSP基本语法page指令ScriptLet标签注释包含跳转JSP四大作用域applicationsessionrequestpageJSP九大内置对象responseoutpageContextconfigexceptionJavaBean组件JavaBean组件引入创建JavaB ......
nmon文件过大的处理方法
nmon的文件存在过大的问题 获取第一个ZZZZ之前的内容，大概在2000行之前 root@ruichi-Default-string:/chia# head -n 2000 ruichi-Default-string_210428_2224.nmon |grep -n "ZZZZ" 1288:ZZ ......
语义通信——概念与方法
通信的三个层面的问题： 层面A(技术问题):通讯符号如何准确地加以传输? 层面B(语义问题):传输的符号如何精确地传达含义? 层面C(效用问题):收到的含义如何以期望的方式有效地影响行为? 语义通讯泛指不同的智能体之间进行的以“ 达意” 为目的的通讯.这里的“ 智能体” 可以指人类、智能机器甚至其它 ......
Python Pandas 数据清洗
1、处理缺失数据 处理缺失数据是数据清洗过程的一个重要部分。缺失数据可以以多种方式出现，最常见的是作为 NaN（Not a Number）。处理缺失数据涉及使用 isna() 或 isnull() 检测缺失值，fillna() 填充缺失值，dropna() 删除包含缺失值的行或列，以及 inte ......
mysql数据库（2）
一、B树、B+树 官方文档里说到，B树根节点指向叶子节点，但是人们忘了叶子节点可以互相指向，于是B+。 create table t1( a int primary key, b int, c int, d int, e varchar(20) )engine=InnoDB; 操作系统页单位4KB， ......
2023-2024-1 20231307 《计算机基础与程序设计》第七周学习总结
作业信息 这个作业属于哪个课程2023-2024-1-计算机基础与程序设计 这个作业要求在哪里 2023-2024-1计算机基础与程序设计第七周作业 这个作业的目标 数组与链表、基于数组和基于链表实现数据结构、无序表与有序表、树、图、子程序与参数 作业正文 https://www.cnblogs.c ......
win11(含win10)自带的一键镜像备份与还原方法
winxp和win7时代小伙伴们备份或恢复系统时大都采用类似一键ghost类的软件制作系统盘的映像，当遇到故障时再恢复，但win10和win11其实自带有这种映像制作和还原功能，我们就再也不需要额外安装这类ghost软件了，省得奸商们偷偷给我们加入些调料。下面我就详细讲解下怎样利用windows自带 ......
09_数据-拓展知识
数据拓展知识 整数拓展 进制 / 二进制：0b/ 十进制 / 八进制：0 / 十六进制：0x 浮点数拓展 银行业务用 BigDecimal（数学工具类）表示 最好完全避免使用浮点数进行比较！！！（重要） 用 == 输出两个是否相等 字符拓展 所有字符本质还是数字 （int）字符：强制转换为编码 编码 ......
【THM】Burp Suite：Extensions(Burp Suite扩展·更新版)-学习
本文相关的TryHackMe实验房间链接：https://tryhackme.com/room/burpsuiteextensions 本文相关内容：了解如何使用Extensions模块来扩展Burp Suite的功能。 简介 在本文中，我们将学习Burp Suite的Extensions(扩展)功 ......
C语言学习随笔-05 变量
变量：其值在其作用域内可以改变的量交变量，变量在使用前必须定义，每一个变量都有地址。 1、变量的命名 ● 变量名由大小写字母、数字和下划线组成，必须以大小写字母或下划线开头，不能以数字开头。 ● C中也允许定义各种其它类型的变量，如枚举、指针、数组、结构体、共同体等。 2、变量定义：数据类型 变量名 ......
【Python&RS】栅格数据/图片位深度（bit）转换
关于栅格数据/图片的位深度（eg.8bit、16bit、32bit）转换之前我就发过一篇文章，【Python&RS】基于GDAL栅格数据/图片位深度（bit）转换。但是最近在使用的时候发现好像效果不行，有时候转换不成功，所以自己又研究了一下原理重新写了一份代码。今天就和大家分享一下如何使用Pyth... ......
方法补充issubclass和isinstance
issubclass和isinstance方法补充 isinstance查看对象的类型 """isinstance检查对象的类型""" print(isinstance('name', str)) # True print(isinstance('name',int)) # False class ......
多进程启动方法"spawn"、"fork"的选择
官方指导 实践 使用官方的例子： python版本为3.9.6 根据官方的说法，3.8开始默认就是spawn了，而不是fork。 from multiprocessing import Process, Lock def f(l, i): l.acquire() try: print('hello ......
学习python自动化——re正则
re（正则）一、正则表达式作用正则表达式匹配指定规则的字符串二、re常用方法 findall(pattern, string, flags=0)：使用正则表达式，匹配所有符合条件的字符串，返回匹配到的所有子串，返回list pattern：正则表达式 string：匹配的字符串 flags=0：自定 ......
C语言学习随笔-04 数据类型
C中的数据类型 ：在C语言中，数据类型指的是用于声明不同类型的变量或函数的一个广泛的系统。 变量的类型决定了变量存储占用的空间，以及如何解释存储的位模式。 常用的四中基本数据类型：int 、char、float、double ▶ 基本类型：它们是算术类型，如int、char、float、double ......
Golang如何进行数据库查询
Golang是一门高效、快速、强大的编程语言，可用于构建各种应用程序，尤其是在Web开发中表现突出。当与数据库结合使用时，Golang提供了一些强大的工具，帮助开发人员操作数据库。在本篇文章中，我们将重点介绍Golang如何进行数据库查询。 一、Golang数据库查询 Golang中的数据库查询主要 ......
vue前端代码npm install报错的解决方法
npm install，报错： npm WARN tarball tarball data for has-bigints@https://registry.npmmirror.com/has-bigints/-/has-bigints-1.0.2.tgz (sha512-tSvCKtBr9lkF0 ......
三菱电梯IC卡系统数据库备份与恢复
查看msde2000的登录方式 sa密码lonele 64位操作系统下 reg query "HKEY_LOCAL_MACHINE\SOFTWARE\WOW6432Node\Microsoft\Microsoft SQL Server\LONELE2\MSSQLServer" /v LoginMod ......