学习资料

# 强化学习Chapter2——优化目标（2） 上文推导出强化学习的一般性目标，即不做确定性假设下的优化目标，得到了下面两个式子： $$ P(\tau|\pi)=\rho_0(s_0)\prod^{T-1}_{t=0} P(s_{t+1}|s_t,a_t)\pi(a_t|s_t)\\ J(\pi)= ......

## 由于没讲课所以就把写的两篇题解发上 ## 开营测试 B 题小贝的饭量题解 ### 题目描述 小贝现在上六年级，正是长身体的时候，小贝的妈妈给小贝规定了每天要吃的饭量。 小贝要连续吃 $n$ 天的饭，有 $n + 1$ 个碗，第 $i$ 个碗的容量为 $a_i$，**所有的碗每天都会重新盛满饭* ......

# 虚树 学习笔记 ## 引入 我们在解决树上问题时，往往都是对整棵树进行处理，或者每次询问都对一个点、点对进行处理，这类题型一般都可以通过 dp、树剖解决；然而，有一类问题要求我们每次对树上一些关键点进行处理。这类问题的特点就是询问次数多，而询问的点的总数不多。可如果我们每次都把整棵树都 dfs ......

霍夫曼编码广泛用于数据压缩算法，其重要性不言而喻。 内容：写一个程序读ASCII文件，统计各字符的频率并制定霍夫曼编码表，最后将此文件的内容根据编码表翻译为二进制文件，计算压缩率。 代码清单： #include... typedef struct{ float weight; int parent, ......

VKL076概述:VKL076是一个点阵式存储映射的LCD驱动器，可支持最大76点（19SEGx4COM）的LCD屏。单片机可通过I2C接口配置显示参数和读写显示数据，可配置4种功耗模式，也可通过关显示和关振荡器进入省电模式。其高抗干扰，低功耗的特性适用于水电气表以及工控仪表类产品。Z20+65 产 ......

**动手学深度学习v2** https://www.bilibili.com/video/BV18p4y1h7Dr?p=2&spm_id_from=pageDriver&vd_source=a55dead799d92b4a482121a8ea042a5d 云平台：阿里云计算 操作系统：Ubuntu ......

[TOC] #### 重要的配置文件路径 1）查看linux的内核参数 ```shell [root@k8s-test-abc-node-wqvmy ~]# cat /etc/sysctl.conf # sysctl settings are defined through files in # / ......

[TOC] ## Excel ### 函数使用 #### VLOOKUP 使用说明： https://support.microsoft.com/zh-cn/office/vlookup-%E5%87%BD%E6%95%B0-0bbc8083-26fe-4963-8ab8-93a18ad188a1 ......

1. `svg` 用于包裹着整个矢量图。其默认宽高为300px和150px 2. `path` 定义路径。可以理解为：指定坐标点，指定他们的连接方式。 - M 用于起始点,x y - L (绝对位置x y) ,l(起始点的相对位置x,y),画直线 - Q 二阶贝塞尔曲线,x1 y1 x y - H ......

[TOC] #### Q：命令行执行文件里面的语句 ```shell psql -U galax -W "weihua@123" -d krm -p 5432 -f xxx.sql ``` #### Q：docker 本地运行 psql 1、获取最新的 postgreSql 镜像。 2、创建一个挂载 ......

[TOC] Q：shell脚本说明 shell 脚本是个纯文本文件，命令从上而下，一行一行地开始执行。shell 脚本拓展名为`.sh`。shell 脚本第一行一定要为： ```shell #!/bin/bash ``` Q：shell脚本语法（一个简单的示例脚本） 创建一个 test.sh 文件， ......

### 指导文档 https://cloud.tencent.com/developer/beta/article/2096379 ### 常用的命令 1、行号： ``` :set nu # 缩写，显示行号 :set number # 全写，显示行号 :set nonu # 缩写，取消显示行号 :s ......

# 1.1 异常是什么 python使用异常对象来表示异常状态，并在遇到错误时引发异常。异常对象未被处理，程序将终止并显示一条错误信息。 我们可以通过各种方法引发和捕获错误，并采取对应措施。 # 1.2 将“错误”变成异常 自主地引发异常 ## 1.2.1 raise语句 我们通过预测异常可能发生的 ......

[TOC] ## 一、前言 话接上回[《跟着 GPT-4 从0到1学习 Golang 并发机制(二)》](https://www.danielhu.cn/from_0_to_1_go_concurrency_with_gpt_2/)，我想试试看 GPT-4 能不能当好一个编程老师，循循善诱，由浅入深 ......

摘要： 动态属性的限制 当使用 DOM 内嵌模板 (直接写在 HTML 文件里的模板) 时，我们需要避免在名称中使用大写字母，因为浏览器会强制将其转换为小写： <a :[someAttr]="value"> ... </a> “someAttr” 属性而非 “someattr”，这段代码将不会 ......

Linux和Windows系统下安装深度学习框架所需支持:Anaconda、Paddlepaddle、Paddlenlp、pytorch，含GPU、CPU版本详细安装过程 ......

### 关于学习的方法定律 #### 定律1 人们往往善于从事情的内容学习，而不善于从事情本身学习。 公司的PLDP/PMDP培训效果很好，参加的人学到了如何做一个合格的PL/PM，却没有学会如何做好培训。从事情本身学习，是向别人学习的关键。 #### 定律2 人们往往善于从失败中学习，而不善于从成 ......

# 何为强化学习 ## 机器学习的一大分支 - 强化学习（Reinforcement Learning）是机器学习的一种，它通过与环境不断地交互，借助环境的反馈来调整自己的行为，使得累计回报最大。 - 强化学习要解决的是决策问题——求取当前状态下最优行为或行为概率。 - 强化学习包括智能体和环境两大 ......

JQuery的概念 jQuery 是一个快速、简洁的 JavaScript 库，其设计的宗旨是“write Less，Do More”，即倡导写更少的代码，做更多的事情。 j 就是 JavaScript； Query 查询； 意思就是查询js，把js中的DOM操作做了封装，我们可以快速的查询使用里面 ......

# 强化学习Chapter2——优化目标（1） 上节涉及强化学习基本思路以及利用数学方式表征强化学习，但对强化学习的目标并没有进行详尽的定义。本节的目标旨在介绍 algorithm-free 的优化目标，即本文将不涉及算法地详述强化学习的目标。 ## 强化学习一般性目标 上文提到，强化学习的目标可以 ......

## chapter1 Build a new app with flutter create. • Use widgets to compose a screen with controls and layout. • Use widget parameters for styling. • A ......

13、二叉树基础 ①二叉树的定义 定义 是n(n>=0)个结点的有限集合，该集合或者为空集（称 为空二叉树),或者由一个根结点和两颗互不相交的、分别称 为根结点的左子树和右子树的二叉树组成。 特征： 1.每个结点最多两颗子树 2.左子树和右子树是有顺序的 3.即使树中某结点只有一颗子树也要区分是左子 ......

17、顺序查找 ①查找的基本概念 基本概念 查找表：由同一类型的数据元素(或记录)构成的集合 查找：查询特定元素是否在表中 查找成功：若表中存在特定元素，称查找成功，应输出该记录 查找不成功:表中不存在给定值的元素,称查找不成功 静态查找: 只查找,不改变集合内的数据元素 动态查找: 既查找,又改变 ......

21、哈希查找表 ①哈希表的基本概念 哈希表的概念 哈希表：即散列存储结构 散列存储的基本思想:建立关键码与存储位置对应关系,或者说由关键码的值决定数据的存储的地址。 优点:查找速度极快,查找效率与元素个数无关 例1:若将学生信息按如下方式存入计算机,如: 将2001011810201的所有信息存入 ......

9、栈的链式存储结构及实现 定义 栈的链式存储结构称为链栈,是运算受限的单链表。其插入和删除操作只能在表头位置上进行。因此,链栈没有必要像单链表那样附加头结点,栈顶指针top就是链表的头指针。 对于链栈来说： 1.不需要头结点 2.不存在栈满的情况 3.top=NULL，为空栈 示意图： 链栈的结构 ......

一、简介： Eureka是由Netflix公司开源的一款提供服务注册和发现的产品。因此，在添加依赖时，会有NetFlix。 该组件管理各种的服务功能：注册、 发现、熔断、负载、降级等。 Eureka采用的是基于C/S的设计架构。 Eureka由两部分组成（Server/Client）：Eureka服 ......

今日学习Java的内存分配，以及方法的基本概念和使用方法 ......

前端共学会，学习/成长/工作/职业，综合服务社区 第1章 什么是共学会？ 试看2 节 | 5分钟共学会整体介绍 第2章 社群资料6 节 | 3分钟社群中的一些精华贴、面试预约、社群资源等等。 第3章 简历优化、模拟面试：历史记录 试看2 节 | 64分钟简历优化、模拟面试 第4章 书籍讲解：日更9 ......

[toc] ## 自增循环遍历 > `for`循环语句中包含3个部分，`初始化语句`，`条件判断语句`和`循环标记语句` > > `初始化语句`在进入`for`循环体前执行，用于初始化循环用的变量，只执行一次 > > `条件判断语句`在每轮循环开始前执行，当条件成立时才会继续执行循环体中的内容，否则 ......

[toc] ## 整型 > 整型分为两类：`有符号整型` 和 `无符号整型` > > 在内存中由两部分表示: `{符号位}{数字位置}` ### 有符号整型 | 类型 | 长度（字节数） | 值的范围 | | | | | | int | 在32位平台为4，在64位平台为8 | 在32位平台等同于in ......