总结性 题目 对象 程序
个人总结
个人总结 回顾本学期开学第一周的计划，基本大部分完成了当时定下来的目标，计划为在本学期能够独立的完成一个Mis系统的制作，学习Android的App开发，补上上学期落下的基础知识，具体的实现过程和实例，从学习掌握开学测试的一个增删改查的Mis系统开始，通过询问同学和上网自学实现了独立完成一个增删改查 ......
数据库原理课后题总结
第一章 1. 数据是描述事物的符号记录，是数据库储存的基本单位 数据库是存储在计算机内的大量的可共享的数据集合 数据库管理系统是管理数据库及其功能的软件 数据库系统是由数据库管理系统、数据库、应用程序、数据库管理人员共同构成的系统 5.文件管理不能提供数据的共享、安全性等功能，不能提供数据的独立性 ......
微信小程序upload多张图片同时上传
//上传图片，选择图片 chooseImage: function(e) { var that = this; wx.chooseImage({ sizeType: ['original', 'compressed'], // 可以指定是原图还是压缩图，默认二者都有 sourceType: ['al ......
Go排序算法小总结
# Go-排序算法 参考整理：[1.0 十大经典排序算法 | 菜鸟教程 (runoob.com)](https://www.runoob.com/w3cnote/ten-sorting-algorithm.html) [shell排序 - Mohuishou (lailin.xyz)](https: ......
【博学谷学习记录】超强总结，用心分享 | Hadoop
【博学谷IT技术支持】 # 一、介绍 ## 概念 [Apache™ Hadoop®](https://hadoop.apache.org/) 项目为可靠、可扩展的分布式计算开发开源软件。允许简单的编程模型在大量计算机集群上对大型数据集群进行分布式处理。 项目包含以下模块： - `Common`: 支 ......
【博学谷学习记录】超强总结，用心分享 | Zookeeper
【博学谷IT技术支持】 # 一、Zookeeper 基础知识 Zookeeper地址：https://zookeeper.apache.org/ ## 介绍 Zookeeper是一个开源的分布式协调服务，用来给分布式应用提供一致性服务。Zookeeper本质是一个分布式的小文件存储系统。是Chubb ......
【博学谷学习记录】超强总结，用心分享 | shell基础
【博学谷IT技术支持】 # 一、shell简介 - `shell` 是一种编写脚本程序的语言，常用于`linux`， - `shell`是解释型语言，相对于其他的语言更加好学，它的语法和结构也比较简单 - 通过编写脚本，能显著的提高开发的效率 # 二、shell的基础知识 每个`sh`文件都有这个开 ......
博学谷学习记录】超强总结，用心分享 | 发送邮件-yagmail
【博学谷IT技术支持】 # 一、介绍 [yagmail](https://yagmail.readthedocs.io/en/latest/)是一个 GMAIL/SMTP 客户端，旨在使发送电子邮件尽可能简单。在项目中或多或少都需要使用的它，比如监控，比如用户提示等。 # 二、项目使用 ## 使用流 ......
【博学谷学习记录】超强总结，用心分享 | Django简易开发指南
【博学谷IT技术支持】 # 一、介绍 Django是python语言写的开源web开发框架，遵循MVC设计。Django的主要目的是简便、快捷的开发数据库驱动的网站。但是Django有一个专有名词：MVT - M:Model,负责数据处理，内嵌了ORM框架 - V:View,接收HttpReques ......
遇到的问题之“对象不为空，字段为空，取出使用时报空指针异常【特例场景：Optional的使用】”
一、场景 二、原因 目前找到的原因是：使用Optional.of()方法对其判空后直接报错了，就没有走orElse了 Optional.of()源码 Optional.java /** * Returns an {@code Optional} with the specified present ......
【博学谷学习记录】超强总结，用心分享 | hive
【博学谷IT技术支持】 # 一、介绍 `hive`是基于`hadoop`的数据仓库工具，用来进行数据的提取、转化、加载，是一种可以存储、查询和分析存储在`hadoop`中的大规模数据机制。`hive`将结构化的数据文件映射为一张数据库表，并提供`SQL`查询功能，将SQL语句变成`MapReduce ......
【博学谷学习记录】超强总结，用心分享 | MapReduce
【博学谷IT技术支持】 # 一、介绍 MapReduce是一种编程模型，用于大规模数据集的并行运算。是指定一个Map(映射)函数，用来把一组键值对映射成一组新的键值对，指定并发的Reduce(规约)函数，用来保证所有映射的键值对中的每一个共享相同的键组。 ## 特点与局限性 mapReduce特点： ......
【博学谷学习记录】超强总结，用心分享 | HDFS
【博学谷IT技术支持】 # HDFS HDFS又称分布式系统，采用了主从（Master/Slave）结构模型，一个HDFS集群是由一个NameNode和若干个DataNode组成的。其中NameNode作为主服务器，管理文件系统的命名空间和客户端对文件的访问操作；集群中的DataNode管理存储的数 ......
【博学谷学习记录】超强总结，用心分享 | HDFS读写流程
【博学谷IT技术支持】 # HDFS写流程  上图是HDFS的写流程图 主要步骤如下 - client向服务器发起上传请求（RPC） - NameN ......
博学谷学习记录】超强总结，用心分享 | hive的内置函数
【博学谷IT技术支持】 # 操作 ## 内置函数 ### 数学函数 - 取整函数round ``` -- 取整函数 第一个为值，第二个为保留几位小数，取证规则四舍五入 select round(2.2222); -- 2 select round(2.5); 3 select round(2.555 ......
【博学谷学习记录】超强总结，用心分享 | hive 查询、分组、join
【博学谷IT技术支持】 ## 查询 ### 常用函数 - 常用函数 ``` 常用函数 -- 求总行数（count） select count(1) from score; -- 36 -- 求分数的最大值（max） select max(sscore) from score; 99 -- 求分数的最 ......
【博学谷学习记录】超强总结，用心分享 | Linux 赋值和读取相关命令
【博学谷IT技术支持】 # 一、linux命令 linux命令是对liunx系统进行管理的命令。通过命令使linux系统能正常运行。liunx命令在系统中有两种类型：内置shell命令和linux命令。 # 二、赋值和读取相关命令 **cp 赋值文件命令** - cp -a a4 a5: 该命令会赋 ......
Ubuntu 20.04.2 设置程序开机自启动
Ubuntu 20.04.2 设置程序开机自启动 Ubuntu 20.04.2 设置程序开机自启动 关于Jar包设置开机自启动乌班图20 放置开机启动文件的目录改变了 首先是进入放置起动脚本的目录 cd /etc/profile.d root@dell3640:/home/uadmin/huimv. ......
【博学谷学习记录】超强总结，用心分享 | 数据倾斜
【博学谷IT技术支持】 # 什么是数据倾斜？ 这个概念在百度百科中解释为在分布式缓存的集群中，不同节点负责处理一定范围的缓存数据。如果缓存数据分散度不够，导致大量的缓存数据集中到一台或者几台服务节点上，称为数据倾斜。一般来说数据倾斜是由于负载均衡实施的效果不好引起的。 简单的讲就是单个计算节点的计算 ......
【博学谷学习记录】超强总结，用心分享 | hadoop的组成
【博学谷IT技术支持】 公众号: 积雷山摩云洞，欢迎关注！！！ # hadoop的构成 hadoop集群主要包含：HDFS集群、MapReduce、YARN集群。HDFS集群复制海量数据的存储，MapReduce负责海量计算，Yarn集群存在数据运算时的资源调度。 - hdfs集群主要包含了角色na ......
【博学谷学习记录】超强总结，用心分享 | yarn的执行流程
【博学谷IT技术支持】 # yarn的组成部分 hadoop是由Common、HDFS、YARN、MapReduce等核心模块组成，yarn负责解决资源调度问题，这里介绍下yarn的业务执行流程。 - yarn是Master/Slave结构，主要包含ResourceManage、NodeManage ......
【博学谷学习记录】超强总结，用心分享 | hive 日期函数与条件函数
【博学谷IT技术支持】 公众号: 积雷山摩云洞，欢迎关注！！！ # 操作 ## 日期函数 - 获取当前时间 ``` -- 获取当前时间 -- 获取年月日 select `current_date`(); -- 2022-10-30 -- 获取年月日时分秒 select `current_timest ......
【博学谷学习记录】超强总结，用心分享 | hive分区与分桶的区别
【博学谷IT技术支持】 公众号: 积雷山摩云洞，欢迎关注！！！ # 概念 - 分区表： 将数据分散到多个子目录中，在执行查询是，可以根据条件加快查询效率 - 分桶表：是相对分区更细的颗粒度划分，分桶表是将表查分到不同的文件中，根据数据表某列的hash值进行分区，对某列数据分区就是对该列属性值的has ......
【博学谷学习记录】超强总结，用心分享 | MapReduec编程
【博学谷IT技术支持】 # 一、介绍 MapReduce是将一个大的计算任务拆分成一个个小任务，让小任务在不同的计算机中进行处理，最后将任务的结果进行汇总的过程。 MR的工作流程可以分为三个阶段，分别是map、shuffle、reduce # 二、编程 ## Mapper阶段 自定义一个类来集成Ma ......
【博学谷学习记录】超强总结，用心分享 | jupyter常用功能
# jupyter 安装 文档地址https://jupyter.org/install ```js pip install notebook ``` 启动命令 ```js jupyter notebook ``` # jupyter-themes 修改主题 安装主题 https://github. ......
【博学谷学习记录】超强总结，用心分享 | hbase基础操作
【博学谷IT技术支持】 # HBase的介绍 - HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式操作系统。 - 它是建立在HDFS之上的数据库系统，HBase是不支持SQL的，没有表关系，也无法join，不支持事务。 - HBase是基于google发布BigTable这篇论文而产生的， ......
【博学谷学习记录】超强总结，用心分享 | 系统资源监控-psutil
【博学谷IT技术支持】 # 一、 介绍 [psutil](https://psutil.readthedocs.io/en/latest/#install-1)（python 系统和进程实用程序）是一个跨平台库，用于 在**Python中检索有关正在运行的** **进程**和**系统利用率**（CP ......
博学谷学习记录】超强总结，用心分享 | mongodb基础用法
【博学谷IT技术支持】 # 数据库连接 后端数据库连接语法： ```js mongodb://[username:password@]host1[:port1][,host2[:port2],...[,hostN[:portN]]][/[database][?options]] ``` 1. mon ......
【博学谷学习记录】超强总结，用心分享 | python基础学习（数据类型，运算符）
【博学谷IT技术支持】 # 基础数据类型 Python 中的变量不需要声明。每个变量在使用前都必须赋值，变量赋值以后该变量才会被创建 ## 赋值方式 1. 直接赋值 ```js a = 1 #整型变量 b = 1.0 #浮点型变量 c = 'abc' #字符串 ``` 2. 多个赋值 ```js a ......
【博学谷学习记录】超强总结，用心分享 | 集合
【博学谷IT技术支持】 # 集合 - 集合根据存储分为单列集合**java.util.Collection**和双列结合**java.util.Map**， - 集合的长度是可变的， - 集合只能存引用数据类型,如果要存基本数据类型,需要存对应的包装类。 - 数组可以存基本数据类型和引用数据类型 # ......