数据 王者 电子书 免费下载
Hadoop集群迁移(元数据及HDFS数据）
1.背景 老集群采用的腾讯emr集群，使用过程中磁盘扩容成本费用高且开源组件兼容性存在问题，因此决定采用自建hadoop集群，需要将emr的元数据和hdfs基础数据迁移过来。 EMR版本：3.1.2 自建Hadoop版本：3.1.3 2.集群迁移步骤 2.1 数据迁移 nohup hadoop di ......
数据库（DDL）学习历程一
数据定义语言（DDL） 数据库操作 【1】数据库的创建 语法：create database <数据库名>;样例：create database study; 【2】数据库的展示 show databases; 【3】数据库的删除 语法：drop database <数据库名>样例：drop dat ......
数据结构习题24/12/24
这道题目可以考虑，如果前缀是一样的长度，那么只需要两个链表同时向后检索，直到找到一样的元素为止。所以应该先找到两个链表的长度，然后将较长的一个链表的多出来的前缀部分删掉，也就不去看这一部分。因为后缀都是一样的，所以长度的差异只可能来自前缀。 解决代码： typedef struct Node{ ch ......
Go 语言学习指南：变量、循环、函数、数据类型、Web 框架等全面解析
学习基础知识 掌握 Go 语言的常见概念，如变量、循环、条件语句、函数、数据类型等等。深入了解 Go 基础知识的好起点是查阅 Go 官方文档 文章链接：Go 编程语言详解：用途、特性、与 Python 和 C++ 的比较 基本语法 了解 Go 语言的基本语法，包括 Go 程序的执行方式、包引入、主函 ......
postgresql存储时序、轨迹数据
需求 轨迹查询 查询车辆一天的指标（轨迹、速度） 业务： 1、一天有1800万条指标数据 pg分区功能、最好每个设备数据存在一个分区 pg array类型、或者中间表，来解决行数太多的问题。 表太大时，btree会有性能瓶颈。块级索引就适合这个场景https://zhmin.github.io/po ......
数据分析涉及的标准库及导入形式
import pandas as pd import numpy as np import matplotlib.pyplot as plt import datetime from dateutil.parser import parse import seaborn as sns %matplo ......
redis数据类型及指令
...... 1、list 队列（先进先出） 2、set 无序、两端取值、可遍历 3、zset 有序set、两端取值、可遍历 String常用指令 1、set key value 2、get key 3、mset key1 val1 key2 val2 ..... 4、mget key1 key2 ......
电子书开源
开源内容包括Markdown文章、ReadtheDocs网站、Python工具等。 在过去，想阅读电子书内容，必须关注公众号，发送电子书三个字，获取验证码后，方可解锁全文。 而现在，在开源项目中即可阅读所有内容。 这份开源项目的源码，是我在别人项目基础上，二次开发而来的。既能作为个人知识库，又能为公 ......
PEMs数据集
交通流量数据PEMs数据集说明 distance_df_filename (str): path of the csv file contains edges information tuple: two adjacency matrix. adj_PEMS07.pkl np.array: conn ......
python网站创建013：jQuery的下载安装
jQuery：相当于别人做的一个库，模块，里面包含了DOM和BOM所需要的功能， 既然有了DOM和BOM那为什么还会有jQuery呢？ DOM和BOM是属于比较底层的代码，可以用，但是比较繁琐， 所以出现了jQuery，代码更为简洁，之后也建议使用jQuery。 jQuery下载：https://j ......
java接口自动化系列（05）：测试数据注入到测试方法
注入测试数据 这里我们是数据驱动方式，把数据注入到测试方法 上一篇我们已经把用例数据封装到对象并放到list中，这里我们把用例对象list中的对象分别放到Object类型的一维数组中，再把一维数组添加到新对象类型一维数组的list中 然后我们在测方法中打印获取到的用例数据，看获取到的数据对不对 修改 ......
性能测试之Mysql数据库调优
一、前言 性能调优前提：无监控不调优，对于mysql性能的监控前几天有文章提到过，有兴趣的朋友可以去看一下 二、Mysql性能指标及问题分析和定位 1、我们在监控图表中关注的性能指标大概有这么几个：CPU、内存、连接数、io读写时间、io操作时间、慢查询、系统平均负载以及memoryOver 2、介 ......
网络与数据安全领域的框架模型
1.PDR模型 PDR模型是由美国国际互联网安全系统公司（ISS）提出，它是最早体现主动防御思想的一种网络安全模型。 保护（Protection）就是采用一切可能的措施来保护网络、系统以及信息的安全。保护通常采用的技术及方法主要包括加密、认证、访问控制、防火墙以及防病毒等。 检测（Detection ......
6.PG数据库管理
1.PG数据库库属主 PG中的数据库属主属于创建者，只要有cretedb权限就可以创建数据库，数据库属主不一定拥有存放在该数据库中其它用户创建的对象的访问权限。 数据库在创建后，允许public角色连接，即允许任何人连接 数据库在创建后，不允许除了超级用户和owner之外的任何人在数据库中创建sch ......
1982-2022年GIMMIS-NDVI数据获取
1982-2022年GIMMIS-NDVI数据获取方法: https://mp.weixin.qq.com/s?__biz=MzkyNjMzNTQ2Mw==&mid=2247485197&idx=1&sn=9da0449f4dc8241fd40f70ab22dc3f0d&chksm=c239af85 ......
各种分辨率的DEM数据获取
各种分辨率的DEM数据获取方法: https://mp.weixin.qq.com/s?__biz=MzkyNjMzNTQ2Mw==&mid=2247485184&idx=2&sn=f11297321901fe473cd141d40a0877a4&chksm=c239af88f54e269e8e50 ......
Java语言学习第一步：JDK下载与安装教程（超详细）
一、简介 JRE(Java Runtime Environment) Java程序运行时的环境，包含JVM和运行时所需的核心类库。若想运行一个已有的Java程序，只需要安装JRE即可。 JDK(Java Development Kit) Java程序开发工具包，包含JRE和开发人员使用的工具。其中的 ......
Python下载与安装教程（很详细）
前言 一、打开python官网点击下载 打开官网，进入页面后点击导航中的Downloads进入下载页面 二、选择要下载的python版本 最新版本的python不能在Windows7的电脑上使用，如果你的系统是win10及以上可以直接下载3.10.x的版本，如果你系统是win7请往下拉 在Looki ......
Python数据科学手册笔记:IPython
目录Ipython帮助文档用符号?来查来文档用??来获取源代码补全方法利用tab利用*加?来补全Ipython快捷键Ipython魔法命令粘贴代码块执行外部代码计算代码运行时间内存分析魔法函数帮助错误和调试控制异常:%xmode调试模型:%debug输入输出历史禁止输出历史输入Ipython和she ......
Linux：vscode扩展无法下载，报错：Error while fetching extensions : XHR failed
在Linux系统上下载安装好vscode以后，发现扩展里面无法下载安装，报错：Error while fetching extensions : XHR failed 解决办法：修改 hosts 文件 1.sudo cp /etc/hosts /etc/hosts.bak 2.sudo vi /et ......
tdsql(mysql版)数据库参数修改
首先考虑赤兔管理系统修改参数；如果在赤兔管理系统无法修改参数，则需要修改mysql的参数文件 一、在赤兔管理系统修改参数： 1.在赤兔管理台主界面，单击左侧菜单【实例管理】>单击所需实例 ID>【数据库管理】>【数据库参数】，进入数据库参数子界面。 2.勾选需要更改的参数，并在对应【当前值】下拉框中 ......
【MySQL】SQL通用语法、SQL分类、约束、数据库设计、多表查询、事务
SQL通用语法、SQL分类（DDL：操作数据库、表等；DML：对表中的数据进行增删改；DQL：对表中的数据进行查询；DCL：对数据库进行权限控制）、约束、数据库设计、多表查询、事务 ......
el-upload批量上传，获取第一个数据返回参数并在后面的上传中进行传递；递归
fileChange(file, fileList) { const { raw } = file; if (file.status != 'ready') return; if (file.size / 1024 / 1024 > 100) { this.$message.error('文件大小不 ......
数据类型转换的坑
请求其他服务的接口，返回的数据类型为Map<String, Object> 其中的某个key对应的Object中的类型为Double, 于是在解析时直接用(Double) value进行强制类型转换 然而啊然而 后来被调用服务有所改动，Double类型变为Integer，于是出现强制类型转换错误 为 ......
几个远程软件，免费的
1、影子(Radmin),外网需要映射端口，较不安全，内网远程无敌 2、深蓝远程(Dbadmin)，无需做端口映射，也无需安装，给对方远程码即可 深蓝远程 https://slsup.com/ 3、向日葵远程，十年老品牌，功能强大，速度快，无需映射端口，可手机直接远程，方便快捷,下载完以绿色版运行 ......
2024数据治理新工作规划
回望2023年的数据治理工作，更多的事在公司内部满足控股集团对数据合规和安全的要求，我们发布了自己公司的数据分级分类管理办法和数据安全管理办法，那么2024年，我们希望做的就是数据治理工作的落地实现，不仅是为了满足集团对数据合规的要求，也是我们自身存在这些数据方便的痛点，需要合力的改进数据治理工作。 ......
23.自动化关键数据记录
目录 行为日志 截图 页面源码 行为日志 使用 python 自带的 logging 模块 使用 pytest.ini 配置日志开关与格式 参考链接 [pytest] ;日志开关 true false log_cli = true ;日志级别 log_cli_level = info ;打印详细日志 ......
MySQL数据库
MySQL数据库 基本概念 数据库体系 分两类：关系型数据库SQL 非关系型数据库NOSQL 关系型数据库：典型代表 MySQL MariaDB , PostgreSQL（pgdb) , Oracle SQL server , DB2 信创 国产数据库：阿里云 RDB ，华为 高斯 ，阿里 Ocea ......
初始MySQL数据库
MySQL的安装 在官网中下载MySQL的安装包到opt目录下 yum安装依赖环境 `yum -y install gcc gcc-c++ ncurses ncurses-devel bison cmake openssl-devel` 使用tar命令解压MySQL安装包 useradd命令创建my ......
PLC与上位机传递数据
1、我这里使用的是HslCommunication 假如传递的是word类型，PLC以16进制封装数组，它有预留，我扩充 PLC博图上是 word[5] 上位机接收 ushort[] Data1=new ushort[5] Data1[0] = byteTransform.TransUInt16(r ......