笔记 数据hadoop hive

引论 项目 项目的特点级作用：独特行、临时性 项目的启动背景：满足倒金字塔型条件 项目相关方管理 项目预算 三大指标 在指定时间点： 计划价值 PV: 计划要完成的工作量 挣值 EV: 已完成有效工作量 实际成本 AC: 当前实际花费了多少成本 计算 成本偏差 Cost Variance CV = ......

十大管理： 人： 进度管理 成本管理 范围管理 事： 沟通管理 资源管理 干系人管理 人/事： 质量管理 采购管理 风险管理 五大过程： 启动、计划、 执行、监督、 收尾 # PDCA: 计划(Plan)、实施(Do)、检查(Check)、处理(Act) ITO: 三从： 从过程想结果 从结果知输入 ......

一、背景 这里的要求是将数据库文件移动或重新定位到其他位置。因此，这里有 2 种情况，1. 重新定位所有数据库文件——数据文件、在线重做日志和控制文件（这需要数据库处于挂载模式）2. 重新定位非系统数据文件——这可以在最小中断的情况下重新定位. 下面的示例使用 /data02/oradata 作为新 ......

Date: 2023-03-08 18:35:12 尚硅谷 TypeScript 教程（李立超老师 TS 新课） TS 没什么难的，一种写法罢了 P1 TS简介 JS 是一种轻量型语言，很难报错，所以很难去写大型项目，维护性很低。有报错难以及时发现，比如写函数类型的参数，无需定义类型。这既是好处也是 ......

Date: 2023-03-12 17:28:46 尚硅谷Vue2.0+Vue3.0全套教程丨vuejs从入门到精通 记录遵循费曼学习法，让外行也能看懂。 Vue 总体大纲 MarkDown 引用快速查找 模板语法 内置指令 computed 和 watch P1 Vue介绍 P2 Vue简介 P3 ......

2.3 个人开发流程 个人开发流程PSP（Personal Software Process） 特点：（1）不局限于某一种软件技术，而是着眼于软件开发的流程，这样，开发不同应用的软件工程师可以互相比较。 （2）不依赖于考试，而主要靠工程师自己收集数据，然后分析、提高。 （3）在小型、初创的团队中，很 ......

背景 今天尝试备份完整数据库时，我遇到了错误，提示 RMAN 无法访问其中一个数据文件。我发现数据文件没有任何用处，因此我已将数据文件脱机删除，但 RMAN 仍然不允许我备份数据库。当您确定数据文件没有任何用处时，这是解决此类问题的解决方案之一。 解决方案 RMAN> backup database ......

Java EasyExcel带格式多线程导出百万数据 1. 背景说明 2. 方案概述 （1）大数据量导出问题主要是以下三个地方： （2）将写入导出Excel等功能单独分开成一个微服务： （3）注意： （4）方案设计： 标注说明 （5）maven依赖： 3. 详细设计 4. 缓存 5. 可行性验证 6 ......

12种数据量纲化处理方式 - 知乎 (zhihu.com)【转载】 在进行数据分析时，数据具有单位是非常常见的，比如说GDP可以以亿作为单元，也可以以百万作为单位，那么此时就会出现由于单位问题导致的数字大小问题；这种情况对于分析可能产生影响，因此需要对其进行处理，但是处理的前提是不能失去数字的相对意 ......

《构建之法》第一章介绍了软件工程的概念、理论、知识点和软件工程和计算机科学的关系。具体来说是让我认识到了以下几个概念：源代码管理，配置管理，质量保证，软件测试，需求分析。程序理解，软件维护，服务运营，合称为软件的生命周期。另外读到"将软件与程序分隔开来的就是用户体验 " 这个理念是不由的联想到我的代 ......

一、制品获取 1.安装及配置插件 配置插件(jenkins项目中) 2.选择对应的制品 3.修改jenkins file // 新增以下代码 String artifactUrl = "${env.artifactUrl}" // 下载制品，当前需要制品匿名用户可访问，后续可以通过shell或者an ......

表格示例： 编辑模式下： 生成Json: 生成Class: 运行时数据读取： 以下是代码： Json数据读取器以及泛型基类 using UnityEngine; public class JsonDataManager : Singleton<JsonDataManager> { public Js ......

前言： String 字符串就是一串固定长度的字符连接起来的字符序列。Go的字符串是由单个字节连接起来的，本质是只读的字符型数组。 Go语言的字符串UTF-8编码标识Unicode文本,当字符为 ASCII 码表上的字符时则占用 1 个字节，其它字符根据需要占用 2-4 个字节 （中文占3个字节） ......

整型： 整型就是存放整数的，数据分为2类，有符号和无符号两种类型 。 有符号整型： int, int8, int16, int32, int64 可存正负数 无符号整型： unsigned uint, uint8, uint16, uint32, uint64, byte 只能存正整数 int类型和 ......

这篇笔记将介绍 reverse、distinct、values 和 values_list 的用法。 本篇笔记目录如下： reverse() values() values_list() distinct() using() 1、reverse() 对 QuerySet 返回的结果进行反转，使用方法 ......

软件=程序+软件工程,软件企业=软件+商业模式,软件开发的不同阶段：玩具阶段→业余爱好阶段→探索阶段→成熟的产业阶段,软件所具有的特殊性：复杂性、不可见性、易变性、服从性、非连续性（由软件的本质所决定的） “代码规范”可以分成两个部分:1.代码风格规范。主要是文字上的规定，看似表面文章，实际上非常重 ......

数据准备和质量控制 对原始数据进行质量控制，包括检查质量值、长度、GC含量等。 对原始数据进行去除低质量reads，过滤低复杂度reads，去除adapter序列等预处理。 序列比对和基因计数 使用HISAT2等工具将去除低质量和过滤后的reads比对到人类基因组上。 使用featureCounts ......

Servlet 创建步骤 创建web项目导入依赖 <dependency> <groupld>javax.servlet</groupld> <artifactld>javax.servlet-api</artifactld> <version>3.1.0</version> <!-- 排除运行环境 ......

第十一章软件设计与实现的学习； 分析和设计方法 典型的开发流程，常见的分析和设计方法：ERD，DFD，UML，开发阶段的一些管理方法：每日构建，小强地狱，构建大师； 分析和设计方法包括以文字为主的文档，以图形为主构造的模型，用数学语言的描述，用类自然语言+代码构造的描述，原代码加注释也能描述； 图形 ......

import pymysql from sqlalchemy import create_engine from sqlalchemy.orm import sessionmaker from sqlalchemy import Column, String, Integer from sqlalc ......

一、redis基础 1、关系数据库与非关系型数据库概述 1.1、关系型数据库 关系型数据库是一个结构化的数据库，创建在关系模型（二维表格模型）基础上，一般面向于记录。 SQL 语句（标准数据查询语言）就是一种基于关系型数据库的语言，用于执行对关系型数据库中数据的检索和操作。 主流的关系型数据库包括 ......

###1. 数据库配置 # 1. 安装mysql数据库驱动 mysqlclient pip install mysqlclient # 如果安装失败就手动下载: https://www.lfd.uci.edu/~gohlke/pythonlibs/ # 黑窗口 python 查看python版本 和 ......

https://www.51doit.com/archives/1166.html ......

大数据开发涵盖了图中从下到上各层的实现，其中主要的部分是采集层、储存层、计算层、模型层和接口层，核心部分是储存层和计算层。 各层中功能模块的技术实现会根据实际业务场景不同而有所变化，但仍然是围绕着储存数据和数值计算这两大核心功能来进行的。 因此，大数据开发的作用主要集中在以下几个方面 1. 资源配置 ......

db.tempdata.insertMany([ { name: "AAA", age: 14, country: "us" }, { name: "BBB", age: 13, country: "us" }, { name: "CCC", age: 12, country: null }, { ......

@Column(name ="`exc_status`") @ApiModelProperty(value = "执行状态：字典（0101020302）") private String excStatus; @Column(name ="`exc_status`", insertable = fa ......

超详细【入门精讲】数据仓库原理&实战 一步一步搭建数据仓库 内附相应实验代码和镜像数据和脚本，参考B站up主哈喽鹏程视频撰写而成，感谢！！！ ......

#include<stdio.h> int main(void) { int sum,b,c,d,e; int a = 0x12345678; b = (a &0xff) ; c = ((a>>8)&0xff); d = ((a>>16) &0xff); e = ((a>>24) &0xff); s ......

import com.peony.common.enums.PlanStatus; import org.apache.poi.ss.formula.functions.T; import javax.persistence.AttributeConverter; import javax.pers ......

存储引擎 一. MySQL体系结构 MySQL Server 连接层：连接的处理、认证授权、安全方案、检查是否超过最大连接数等。 服务层：SQL接口、解析器、查询优化器、缓存 引擎层：引擎是数据存储和提取的方式，引擎层有许多引擎可供使用，也可以自定义引擎。索引是在存储引擎层实现的。 存储层：存储数据 ......