笔记spark
Python学习笔记一：列表
一. 列表 1. 定义 列表，是由一系列按照特定顺序排列的元素组成的一个有序集合。其中可以包含字母，数字，或者其他任何元素，每一个元素之间不一定有关系。不过，在创建列表时，建议还是将相同类型的元素或者相互之间有关联的元素放在一个列表中。 鉴于包含的元素的数量，通常在给列表起名的时候，一般会以复数的形 ......
[深入推导]CS231N assignment 2#4 _ 卷积神经网络 学习笔记 & 解析
卷积神经网络 基本算法实现 卷积神经网络应该算是图像处理中绝对的主流了, 关于算法得基本思想我在之前也学的比较懂了, 这点如果不了解网上有很多教程. 不过我并没有用代码亲自实现它. 我们首先确定怎么编写. 前面搞全连接网络总是会想着怎么去简化运算, 现在我们接触了新的网络, 要实现基础版本反而又不大 ......
解决Spark读取tmp结尾的文件报错的问题
业务场景 flume采集文件到hdfs中，在采集中的文件会添加.tmp后缀。一个批次完成提交后，会将.tmp后缀重名名，将tmp去掉。 所以，当Spark程序读取到该hive外部表映射的路径时，在出现找不到xxx.tmp文件的问题出现。 解决思路： Hdfs提供了读取文件筛选的接口PathFilte ......
笔记
1.课程大纲-springboot框架 1. 什么是Springboot以及Springboot的特点。 2. 快速搭建springboot项目 3. springboot常用的配置文件类型. 4. 读取springboot配置文件的内容 5. 多环境配置 6. springboot整合数据源。 7 ......
mysql笔记
1.3、数据库分类 关系型数据库：（sql） MySql，Oracle，SqlServer,DB2，SQLlite 通过表和表之间，行和列之间的关系进行数据的存储，学员信息表，考勤表，。。。。。 非关系型数据库：（NoSQL）Not Only Redis,MongDB 非关系型数据库，对象存储，通过 ......
Go笔记(六)：切片
切片是对数组的拓展，在Go中数组的长度一旦定义无法被修改，切片的长度是不固定的，可以理解为切片是一个可变长度数组，是一个有相同类型元素的可变长度序列。 1、声明切片 1.1、显示声明切片 1、语法 声明切片语法如下： var sclicename []type 2、示例代码 1 package ma ......
读SQL进阶教程笔记11_关系数据库基础
1. 1969年 1.1. 关系模型的创始人E.F. Codd（1923—2003） 1.1.1. 牛津大学数学专业 1.1.2. 一己之力奠定了关系模型的基础 1.2. 论文《大型数据库中关系存储的可推导性、冗余与一致性》 2. 1970年 2.1. 权威学术杂志Communications of ......
pytest学习笔记
pytest是python的一种单元测试框架，与python自带的unittest测试框架类似，但是比unittest框架使用起来更简洁，效率更高。根据pytest的官方网站介绍，它具有如下特点： 非常容易上手，入门简单，文档丰富，文档中有很多实例可以参考 能够支持简单的单元测试和复杂的功能测试 支 ......
概率论与数理统计（专属笔记）
X服从参数n、p的二项分布记作 ： X~b(n,p); 泊松定理 ： n*p=$\lambda$ $$ \lim_{n \to +\infty} {k \choose n}P_0^\infty {k \choose n}(1-p_n)^(n-k) $$ 松柏分布 ：$X$~$P$$(\lambda> ......
Spring 笔记
1.认识Spring 1.1简介 Spring是一个开源免费的框架 , 容器 Spring是一个轻量级的框架 , 非侵入式的 控制反转 IoC , 面向切面 Aop 对事物的支持 , 对框架的支持 一句话概括：Spring是一个轻量级的控制反转(IoC)和面向切面(AOP)的容器（框架）。 1.2组 ......
Django笔记二十三之case、when操作条件表达式搜索、更新等操作
本文首发于公众号：Hunter后端 原文链接：Django笔记二十三之条件表达式搜索、更新等操作 这一篇笔记将介绍条件表达式，就是如何在 model 的使用中根据不同的条件筛选数据返回。 这个操作类似于数据库中 if elif else 的逻辑。 以下是本篇笔记的目录： model 和数据准备 Wh ......
烘焙笔记
贝壳边  标准 头大尾小 大小均匀，纹路清晰 收口要圆不留缝 ......
虚幻引擎 4 学习笔记 [1] ：蓝图编程 Demo
虚幻引擎 4 学习笔记 [1] ：蓝图编程 Demo 最近学习虚幻引擎，主要看的是 Siki 学院的课，课程链接：Unreal蓝图案例 - 基础入门 - SiKi学院|SiKi学堂 - unity|u3d|虚幻|ue4/5|java|python|人工智能|视频教程|在线课程 (sikiedu. ......
ROS学习笔记（二）- 提供服务和调用服务
书接上回 - https://www.cnblogs.com/lihan829/p/17315435.html 前面展示了ROS节点发布和订阅消息，这次展示如何提供服务和调用服务。 提供服务和调用服务很好理解，概念和行为上并不深奥，就是远程过程调用，可类比为http接口的远程调用，grpc接口的远程 ......
Serre算术教程Chapter 4笔记
考虑在交换环上的模$V$ Definition of module 相当于向量空间的扩展形式，不要求在域上面定义. module包含一个交换群$(M,+)$向量 以及$\cdot:R\times M\rightarrow M$标量乘法. 满足：结合律，分配律和$1_R\cdot x=x$ 定义一个函 ......
GAMES101笔记-01
前言：这篇以及未来的一系列随笔是根据b站上的GAMES101现代计算机图形学入门课程所写的笔记，但笔记的篇章并非和课程一一对应。比如这篇对应的是第二课~第三课的内容。并且整理时不一定会将推导过程全部列出，做成只有总结概括的内容也不是没有可能。 1.向量叉乘的矩阵表示： 这是向量叉乘后得到的结果 用矩 ......
算法笔记-1
种一颗树的最好时间是十年前，或者现在 刷算法小一个月，觉得有必要写点东西来记录有意义的算法题 力扣 312 戳气球 非常有含金量的题目 难点是：1.dp数组的定义；2.遍历顺序的思考 根据题目的表述：便边界点按1算，其实表明这也是个子问题。可以用动归方法解决。 能使用动归的前提条件是子问题相互独立， ......
ROS学习笔记-发布和订阅
学习一下ROS系统。 记录一下实现发布和订阅的详细步骤。 前提是ROS已经在ubuntu 18.04上安装好了。 cd ~ mkdir -p ros-learning/src cd ros-learning catkin_make cd src catkin_create_pkg lesson001 ......
Python程序笔记20230306
判断闰年 初始版本 year = input('请输入一个年份：') while not year.isdigit(): year = input("抱歉，您的输入有误，请输入一个整数：") year = int(year) if year % 400 == 0: print(year, "是闰年！ ......
老冯笔记MyBatisPlus&lombok
1.MyBatis-Plus介绍 参考资料 官方指南：https://baomidou.com/pages/24112f/#%E7%89%B9%E6%80%A7 官方配置：https://baomidou.com/pages/56bac0/ GitHub：https://github.com/bao ......
2023手机做笔记的软件哪个好
在2023年还有谁在使用纸质的笔记本做笔记呀？现在越来越多的网友都更加习惯于直接使用手机来做笔记了。而用手机做电子笔记的有点确实很多：支持随时随地记录文字、图片、视频等多种格式内容；对笔记内容进行分类整理；通过关键词快速搜索需要的笔记内容；能够手机、电脑多端实时云同步笔记内容；方便修改、删除、分享笔 ......
狂神Vue笔记
1. 前端核心分析 1.1 Vue 概述 Vue (读音/vju/, 类似于view)是一套用于构建用户界面的渐进式框架，发布于2014年2月。与其它大型框架不同的是，Vue被设计为可以自底向上逐层应用。Vue的核心库只关注视图层，不仅易于上手，还便于与第三方库(如: vue-router: 跳转， ......
Spark高级
Spark 宽依赖和窄依赖 窄依赖(Narrow Dependency)： 指父RDD的每个分区只被 子RDD的一个分区所使用， 例如map、 filter等 宽依赖(Shuffle Dependency)： 父RDD的每个分区都可能被 子RDD的多个分区使用， 例如groupByKey、 redu ......
学习笔记——图的联通性问题
割点与割边 定义 连通分量：在一张无向图中的极大连通子图即为该图的连通分量。 割点：去掉这个点后，这张无向图的连通分量数量增加，则这个点称为这个图的割点。 割边：去掉这条边后，这张无向图的连通分量数量增加，则这条边称为这个图的割边。 求割点 主要思路 以下提到的有关树的内容，全部指的是对连通分量做 ......
Vuex笔记
Vuex有state，mutation，actions，getter四种 用法如下： 1、state（存储数据）： state{ count: 0 //全局数据 } 获取state数据两种方式： this.$store.state.全局数据名称 利用辅助函数mapstate Import {mapS ......
Cadence应用笔记：调整栅格
说明 栅格是在设计中非常常用的工具，修改栅格大小和显示可以通过如下操作： 空白处右键选择设置Grid 设置层叠各层的栅格大小或者全局大小 通过该按键可以隐藏或者显示栅格 ......
Cadence应用笔记：器件对齐
说明 一般设计时需要讲元件进行对齐摆放，操作如下： 将应用模式设置为布局 随后选中要对齐器件，右键选择对齐 根据需求进行对齐和等间距布置 需要注意的是对齐的中心时元器件封装的中心，如果要焊盘对齐，那可以用过滤器只选中焊盘。或者是通过栅格方式来对齐（推荐） ......
CS231N assignment 2#3 _ dropout 学习笔记 & 解析
dropout 定义 & 作用 & 基本实现 如课程所说,dropout最大的意义在于防止过拟合. 我们还记得, dropout在网络架构上介于激活函数之后, 下一层输入之前. 想法很简单, 就是将隐含层的某些数据屏蔽掉, 直接从以输入到下一层, 概率为p. 需要注意的是, dropout是仅针对训 ......
Python程序笔记20230305
n 以内能被 m 整除的数的和、积 最初版本 计算指定数字内所有偶数的和 n = int(input("请输入指定的n：")) i = 0 mysum = 0 while i <= n: if i % 2 == 0: mysum = mysum + i i = i + 1 print(f"{n}以内 ......