笔记spark

匿名方法 前面的情况是方法被某个结构或者类的成员, 可以调用方法 如果方法只调用一次, 用来实例化委托, 在这种情况下, 除了创建委托的语法需要, 没有必要创建独立的具名方法, 使用匿名方法即可 匿名方法是实例化委托时内联声明的方法. class Program { delegate int Oth ......

变量类型：整型int，字符串str，浮点型float； 算术运算：+、-、*、/、%、**（乘方）、//（整除）； 逻辑运算：not、and、or； 布尔类型：True、False； 比较运算：>、>=、<、<=、==、!=； 变量命名规则：字母+数字+下划线、区分大小写、数字不开头、不能用空格、不 ......

[toc] # 基础知识 ## 斜体强调行内容 使用标签 \ 和 \ 来包裹它。 ## 着重强调 使用标签 \ 和 \ 来包裹它。 ## 空元素 不是所有元素都拥有开始标签、内容和结束标签。一些元素只有一个标签，通常用来在此元素所在位置插入/嵌入一些东西。这些元素被称为空元素。例如：元素 \ 是用来 ......

# 读书笔记 > 种树最好的时间是十年前，其次是现在 #### 简介： - 我决定从今天开始记录我读书的过程（也可能是从几天前），记录我读的`书`，书的相关`信息`，我的读书`方法`，一些`好句`，我的`心得`。 #### 三分读书法： - 这是我从up主**[阿鱼爱学习本人](https://sp ......

概述 简介：用于设置文本内容，图片外形，版面的布局和外观显示样式。 组成：css由选择器及声明两个重要部分组成 语法：选择器{声明}，声明为键值对形式，选择器分为 基础选择器 复合选择器 引入方式： 行内样式表（行内式）：在标签内部的 style 属性中设定css样式 内部样式表（嵌入式）： 单独放 ......

委托 1、什么是委托 委托是持有一个或多个方法的对象, 委托与典型的对象不同, 可以执行委托, 这时候委托会执行它所持有的方法 2、概述 委托和类一样是一种用户定义类型, 但类表示的是数据和方法的集合, 而委托则持有一个或多个方法, 以及一系列预定义操作 可以把delegate看作一个包含有序方法列 ......

1.简介 简介：linux是一套免费使用，支持多用户、多任务、支持多线程和多个核心CPU的操作系统。 2.Linux发行版 Linux发行版：将Linux内核与应用软件做一个打包，可供用户安装和配置。目前市场比较知名的发行版有：Ubuntu,ReadHat,CentOS等。 3.Linux特点 (1 ......

最近在学习spark，上周将spark集群搭建起来了，今天在idea中创建了一个测试程序读取hive库中的数据，程序很简单，但是踩到一些坑，卡了四五个小时，做个记录。 搭建Spark集群比较简单： 1、安装scala，scala版本要和spark使用的scala版本一致（因为这个问题卡了五六个小时） ......

# 写在前面 ​ 作为一名程序员，发现要学习的东西实在是太多了，光靠自己的脑子记录实在太难，所以选择用markdown记录一下，先学习一下markdow的基本语法。以后还要学习latex这样的文本编辑器。 # markdown语法 ​ 下面开始正式记录markdown语法。 ## 1.标题 # ## ......

> 本文首发于公众号：Hunter后端 > 原文链接：[Python连接es笔记一之连接与查询es](https://mp.weixin.qq.com/s/smp3VvWD6ChuFVuotQ9_zg) 有几种方式在 Python 中配置与 es 的连接，最简单最有用的方法就是定义一个默认的连接，如 ......

第八章讲述了用户故事的分解。当一个大的用户故事过于复杂或难以实现时，需要将其分解为较小的任务或子用户故事。这样可以使开发工作更加可管理和可控，同时也有助于更好地理解用户需求。 第九章介绍了团队与客户之间的沟通。开发团队需要密切与客户沟通，以确保开发过程中的用户故事与最终用户需求一致。同时，团队还需要 ......

（一）Spark介绍 Spark是一个通用的分布式数据处理引擎。 通用：通用指的是Spark可以做很多事情。包括机器学习，数据流传输，交互分析，ETL，批处理，图计算等等等等都是Spark可以做到的。甚至可以说，你需要用数据实现的任何事情，你都可以用Spark试试看。 分布式：指的是Spark处理数 ......

通过继续阅读《人件集》了解到在一般情况下，大家都认为技术决策所依据的都是技术性因素，诸如事实、可测量的数值、应用中需要考虑的事项等。 但实际情况是，诸如感觉、意见、直觉、偏见等，都会对决策的制定或者问题的解决产生影响，这些都是人在做事情时所不可避免的因素。 尽管有些人试图否认、控制、压制这些非理性的 ......

第九章 项目经理 9.1PM是啥 软件团队里除了能写代码、测试代码和画图做设计的成员，还有一类角色，不做上面这些事情但也很重要，我们叫他们项目经理——PM PM的M就是Manager，但是P有这几种：Product Manager、Project Manager、Program Manager，在不 ......

第八章 需求分析 8.1 软件需求 ①获取和引导需求：软件团队需要找到软件的利益相关者，了解和挖掘他们对软件的需求，引导他们表达出对软件的需求；需求还可以来自各种管理机构；需求不仅来自外界，还可以来自软件企业本身；需求还可以来自技术团队本身；有些需求的目的是要更好地了解用户的行为和需求。 ②分析和定 ......

第六章 敏捷流程 6.1 敏捷的流程 ①敏捷开发原则： （1）尽早并持续地交付有价值的软件以满足顾客需求 （2）敏捷流程欢迎需求的变化，并利用这些变化来提高用户的竞争优势 （3）经常发布可用的软件，发布间隔可以从几周到几个月，能短则短 （4）业务人员和开发人员在项目开发过程中应该每天共同工作 （5） ......

第七章 MSF 微软公司中关于软件开发的思想和宣言有一个方法论——微软解决方案框架（Microsoft Solution Framework，MSF），也就是微软推荐的软件开发方法 7.2 MSF基本原则 1. 推动信息共享与沟通（Foster open communications） 2. 为共同 ......

这是一篇 text to 3D 方向的突破性的文章，效果确实非常棒，据说一作的朋友圈中也说“他们将这个领域从20分提升到了70分的水平”，预测之后会有许多基于该方法的优秀文章与产品出现，毕竟之前 SDS follow 的文章也有很大一批。本阅读笔记就简要去记录一下这篇论文的主要方法和思想。 ![im ......

**一、HTML是谁发明的?** 1990年Tim Berners Lee发明了www（world wide web万维网），为了方面人们于阅读网页，与此同时自己又发明了HTML、HTTP、URL；用自己写的浏览器去访问自己写的服务器，这就是如今人们上网访问网页的起源和雏形。 **二、HTML起手应 ......

# PID算法  **速度与位置串级PID** ![image](https://img2023.cnblo ......

## 什么是后缀数组 后缀数组主要是用来处理字符串的，分为两种方法：倍增法以及 DC3，但由于倍增法通俗易懂，码量小，常数小，所以今天这篇文章我就只介绍倍增法~~（不可能是因为我不会 DC3）~~ ## 前缀知识 ### No.1 基数排序 跟桶排序差不了多少，思想就是：将整数按位数切割成不同的数字 ......

# SVN 简介和安装 ## SVN是什么？ - 代码版本管理工具 - 它能记住你每次的修改 - 恢复到任何历史版本 - 恢复已经删除的文件 ## SVN跟Git相比，有什么优势？ - 使用简单，上手快 - 目录级权限控制，企业安全必备 - 子目录Checkout，减少不必要的文件检出 ## SVN ......

**笔记来源视频链接**： [黑马程序员Git全套教程，完整的git项目管理工具教程，一套精通git_哔哩哔哩_bilibili](https://www.bilibili.com/video/BV1MU4y1Y7h5/?spm_id_from=333.999.0.0&vd_source=5b692 ......

一、atrace命令解析 1. 帮助信息 # atrace -h 用法：usage: atrace [options] [categories...] 选项包括： -a appname 为逗号分隔的 cmdlines 列表启用应用程序级跟踪； * 是匹配任何进程的通配符 -b N 使用大小为 N K ......

# 什么是最小生成树 一个图中可能存在多条相连的边,我们从一个图中挑出一些边生成一棵树（树就是指一个无向连通图不包含回路(连通图中不存在环)）。 这仅仅是生成一棵树,还未满足最小,当图中每条边都存在权重时,这时候我们从图中生成一棵树(n - 1 条边)时,生成这棵树的总代价就是每条边的权重相加之和。 ......

目的：一致性算法，允许一组机器作为一个一致的组来工作，这些组可以承受某些成员的故障，提高可用性 领导选举，日志同步，快照，集群变动 复制状态机用于解决分布式系统中的各种容错问题，会出现共识算法 共识和复制状态机通过保持复制日志的一致性 raft是一种日志复制算法 Raft通过首先选举一个领导者，然后 ......

今日默写：1.强制类型转换2.Scanner 类的使用步骤3.基本if选择结构4.if-else选择结构5.多重if选择结构6.嵌套if选择结构7.switch选择结构8.手写main函数9.自动类型转换10.描述下switch和if多重分支的区别 得分：100分 补充： 1.if else分支中存 ......

# 状压DP 状压 $DP$ 是一种基于二进制数的 $DP$。 # T1 ## 题目大意 将一个整数 $N$ 分解成若干个小整数的乘积，满足： + 分解出的整数必须来自集合 $S$。 + 分解出的整数必须互不相同，且两两互质。 求有多少种分解方法。 ## 算法分析 将 $N$ 进行质数分解，然后将集 ......

MP4包含3大box。 一、ftyp file type box，包含视频文件使用的mp4标准，也作为probe mp4的标志； 二、moov 包含媒体的元数据信息，包含一个mvhd（也就是header box）和若干个trak（track）。trak包含一条音/视频轨道信息和音视频数据的编码格式、 ......

**数学期望：** 在概率论和统计学中，数学期望(mathematic expectation)（或均值，亦简称期望）是试验中每次可能结果的概率乘以其结果的总和，是最基本的数学特征之一。它反映随机变量平均取值的大小。——摘自百度百科 不懂？~~太正常了，百度百科就是不写人话。~~ 举个栗子解释一下： ......