神器 英语学习 服务器anki
防火墙和docker服务
查看防火墙命令 systemctl status firewalld service iptables status 暂时关闭防火墙 systemctl stop firewalld service iptables stop 永久关闭防火墙 systemctl disable firewalld ......
[C++学习] 整型常量
C++中二进制以0b开头，如0b00001011（值为11）； 八进制以0开头，如0013（值为11）； 十六进制以0x开头，如0x001a（值为26）； 注意： C++中cout是默认将数据以十进制输出，如果要将数据以八进制，十六进制输出应在前面加oct或hex； 如：cout<<oct<<012 ......
【转载】英语语法：一般疑问句
一般疑问句主要分为三类，第一，be动词类型；第二，情态动词can、may、should、must；第三，行为动词类型。 1.be动词类型（am/is/are） I am a student.（陈述句） I am not a student.（否定句） Are you a student？（一般疑问句 ......
简历技能的四种学习程度
# 简历技能的四种学习程度 最近秋招，一致忙碌于投递，在简历撰写过程中，一些细节没有太关注到，后来反复观看总感觉有些问题。原来是技术学习程度用词有些模糊，比如一般写四种程度：了解、熟悉、掌握、精通。自己很容易把熟悉和掌握搞糊涂了，通过搜索一些受众博主，特此做些总结，方便自己回忆。 ## 了解 ### ......
微服务架构基本原理学习笔记（二）
上一篇：微服务架构基本原理学习笔记（一） 三、微服务架构 从一个已有的单体架构的应用程序开始进行微服务架构的重构往往是一个不错的选择。随着业务量和功能的增加，我们可以考虑使用微服务架构来扩充应用程序中原有的功能，或者每次添加新功能时，都为其创建一个新的微服务。这比从一开始就选择使用微服务架构进行设计 ......
Go后端入门学习路径
## 1. Go语言基础 入门看这个： 《Head First Go》、《Go语言编程》以及图片额外书籍任选一本都可以，跟着书籍多敲敲代码，go语言相对C++，java来说，简单很多  项目为可靠、可扩展的分布式计算开发开源软件。允许简单的编程模型在大量计算机集群上对大型数据集群进行分布式处理。 项目包含以下模块： - `Common`: 支 ......
【博学谷学习记录】超强总结，用心分享 | Zookeeper
【博学谷IT技术支持】 # 一、Zookeeper 基础知识 Zookeeper地址：https://zookeeper.apache.org/ ## 介绍 Zookeeper是一个开源的分布式协调服务，用来给分布式应用提供一致性服务。Zookeeper本质是一个分布式的小文件存储系统。是Chubb ......
【博学谷学习记录】超强总结，用心分享 | shell基础
【博学谷IT技术支持】 # 一、shell简介 - `shell` 是一种编写脚本程序的语言，常用于`linux`， - `shell`是解释型语言，相对于其他的语言更加好学，它的语法和结构也比较简单 - 通过编写脚本，能显著的提高开发的效率 # 二、shell的基础知识 每个`sh`文件都有这个开 ......
博学谷学习记录】超强总结，用心分享 | 发送邮件-yagmail
【博学谷IT技术支持】 # 一、介绍 [yagmail](https://yagmail.readthedocs.io/en/latest/)是一个 GMAIL/SMTP 客户端，旨在使发送电子邮件尽可能简单。在项目中或多或少都需要使用的它，比如监控，比如用户提示等。 # 二、项目使用 ## 使用流 ......
【博学谷学习记录】超强总结，用心分享 | Django简易开发指南
【博学谷IT技术支持】 # 一、介绍 Django是python语言写的开源web开发框架，遵循MVC设计。Django的主要目的是简便、快捷的开发数据库驱动的网站。但是Django有一个专有名词：MVT - M:Model,负责数据处理，内嵌了ORM框架 - V:View,接收HttpReques ......
SVN版本服务器搭建
SVN 的下载地址如下 http://tortoisesvn.net/downloads.html 【1】使用SVN，首先要安装TortoiseSVN，就是上面的SVN下载地址。 【2】 安装VIsualSVN。 ＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝ Vis ......
【博学谷学习记录】超强总结，用心分享 | hive
【博学谷IT技术支持】 # 一、介绍 `hive`是基于`hadoop`的数据仓库工具，用来进行数据的提取、转化、加载，是一种可以存储、查询和分析存储在`hadoop`中的大规模数据机制。`hive`将结构化的数据文件映射为一张数据库表，并提供`SQL`查询功能，将SQL语句变成`MapReduce ......
【博学谷学习记录】超强总结，用心分享 | MapReduce
【博学谷IT技术支持】 # 一、介绍 MapReduce是一种编程模型，用于大规模数据集的并行运算。是指定一个Map(映射)函数，用来把一组键值对映射成一组新的键值对，指定并发的Reduce(规约)函数，用来保证所有映射的键值对中的每一个共享相同的键组。 ## 特点与局限性 mapReduce特点： ......
【博学谷学习记录】超强总结，用心分享 | HDFS
【博学谷IT技术支持】 # HDFS HDFS又称分布式系统，采用了主从（Master/Slave）结构模型，一个HDFS集群是由一个NameNode和若干个DataNode组成的。其中NameNode作为主服务器，管理文件系统的命名空间和客户端对文件的访问操作；集群中的DataNode管理存储的数 ......
【博学谷学习记录】超强总结，用心分享 | HDFS读写流程
【博学谷IT技术支持】 # HDFS写流程  上图是HDFS的写流程图 主要步骤如下 - client向服务器发起上传请求（RPC） - NameN ......
博学谷学习记录】超强总结，用心分享 | hive的内置函数
【博学谷IT技术支持】 # 操作 ## 内置函数 ### 数学函数 - 取整函数round ``` -- 取整函数 第一个为值，第二个为保留几位小数，取证规则四舍五入 select round(2.2222); -- 2 select round(2.5); 3 select round(2.555 ......
【博学谷学习记录】超强总结，用心分享 | hive 查询、分组、join
【博学谷IT技术支持】 ## 查询 ### 常用函数 - 常用函数 ``` 常用函数 -- 求总行数（count） select count(1) from score; -- 36 -- 求分数的最大值（max） select max(sscore) from score; 99 -- 求分数的最 ......
【博学谷学习记录】超强总结，用心分享 | Linux 赋值和读取相关命令
【博学谷IT技术支持】 # 一、linux命令 linux命令是对liunx系统进行管理的命令。通过命令使linux系统能正常运行。liunx命令在系统中有两种类型：内置shell命令和linux命令。 # 二、赋值和读取相关命令 **cp 赋值文件命令** - cp -a a4 a5: 该命令会赋 ......
【博学谷学习记录】超强总结，用心分享 | 数据倾斜
【博学谷IT技术支持】 # 什么是数据倾斜？ 这个概念在百度百科中解释为在分布式缓存的集群中，不同节点负责处理一定范围的缓存数据。如果缓存数据分散度不够，导致大量的缓存数据集中到一台或者几台服务节点上，称为数据倾斜。一般来说数据倾斜是由于负载均衡实施的效果不好引起的。 简单的讲就是单个计算节点的计算 ......
【博学谷学习记录】超强总结，用心分享 | hadoop的组成
【博学谷IT技术支持】 公众号: 积雷山摩云洞，欢迎关注！！！ # hadoop的构成 hadoop集群主要包含：HDFS集群、MapReduce、YARN集群。HDFS集群复制海量数据的存储，MapReduce负责海量计算，Yarn集群存在数据运算时的资源调度。 - hdfs集群主要包含了角色na ......
【博学谷学习记录】超强总结，用心分享 | yarn的执行流程
【博学谷IT技术支持】 # yarn的组成部分 hadoop是由Common、HDFS、YARN、MapReduce等核心模块组成，yarn负责解决资源调度问题，这里介绍下yarn的业务执行流程。 - yarn是Master/Slave结构，主要包含ResourceManage、NodeManage ......
【博学谷学习记录】超强总结，用心分享 | hive 日期函数与条件函数
【博学谷IT技术支持】 公众号: 积雷山摩云洞，欢迎关注！！！ # 操作 ## 日期函数 - 获取当前时间 ``` -- 获取当前时间 -- 获取年月日 select `current_date`(); -- 2022-10-30 -- 获取年月日时分秒 select `current_timest ......
【博学谷学习记录】超强总结，用心分享 | hive分区与分桶的区别
【博学谷IT技术支持】 公众号: 积雷山摩云洞，欢迎关注！！！ # 概念 - 分区表： 将数据分散到多个子目录中，在执行查询是，可以根据条件加快查询效率 - 分桶表：是相对分区更细的颗粒度划分，分桶表是将表查分到不同的文件中，根据数据表某列的hash值进行分区，对某列数据分区就是对该列属性值的has ......
【博学谷学习记录】超强总结，用心分享 | MapReduec编程
【博学谷IT技术支持】 # 一、介绍 MapReduce是将一个大的计算任务拆分成一个个小任务，让小任务在不同的计算机中进行处理，最后将任务的结果进行汇总的过程。 MR的工作流程可以分为三个阶段，分别是map、shuffle、reduce # 二、编程 ## Mapper阶段 自定义一个类来集成Ma ......
【博学谷学习记录】超强总结，用心分享 | jupyter常用功能
# jupyter 安装 文档地址https://jupyter.org/install ```js pip install notebook ``` 启动命令 ```js jupyter notebook ``` # jupyter-themes 修改主题 安装主题 https://github. ......
【博学谷学习记录】超强总结，用心分享 | hbase基础操作
【博学谷IT技术支持】 # HBase的介绍 - HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式操作系统。 - 它是建立在HDFS之上的数据库系统，HBase是不支持SQL的，没有表关系，也无法join，不支持事务。 - HBase是基于google发布BigTable这篇论文而产生的， ......
【博学谷学习记录】超强总结，用心分享 | 系统资源监控-psutil
【博学谷IT技术支持】 # 一、 介绍 [psutil](https://psutil.readthedocs.io/en/latest/#install-1)（python 系统和进程实用程序）是一个跨平台库，用于 在**Python中检索有关正在运行的** **进程**和**系统利用率**（CP ......
k8s存储服务解析
卷访问模式 卷的subpath设置 存储卷的动态供给 因为storage自动创建pv需要经过kube-apiserver,所以需要授权 创建动态供给的deployment 需要一个deployment来专门实现pv与pvc的自动创建 创建业务Pod使用storageclassname来自动创建和挂载 ......