offline
offline RL | Pessimistic Bootstrapping (PBRL)：在 Q 更新中惩罚 uncertainty，拉低 OOD Q value
critic loss = ① ID 数据的 TD-error + ② OOD 数据的伪 TD-error，① 对所转移去的 (s',a') 的 uncertainty 进行惩罚，② 对 (s, a_ood) 的 uncertainty 进行惩罚。 ......
BBED修改文件头，将ASM非归档模式下offline的数据文件改回online状态
1、故障概要 一套基于ASM的RAC数据库，处于非归档模式，现场人员误将其中的一个数据文件改成了offline状态，等到发现异常时，redo日志已经被覆盖，没有办法recover该数据文件。 本文主要记录测试环境模拟本故障，以及使用BBED修复的过程。 2、故障模拟及处理办法 （1）、准备环境，创建 ......
offline RL | BCQ：学习 offline dataset 的 π(a|s)，直接使用 (s, π(s)) 作为 Q learning 训练数据
① 使用 VAE 建模 offline dataset 的 π(a|s)，② 添加一个可以学习的 action 扰动 ξ，③ 用 (s, a=π(s)+ξ, r, s') 做 Q-learning。 ......
offline RL | IQL：通过 sarsa 式 Q 更新避免 unseen actions
① 通过 (s,a,r,s',a') 更新 Q function，② 通过 Q 和 V 交替迭代，避免过拟合 s'~p(s'|a) 的随机好 s'，误以为 a 是好 action，③ 通过 AWR 从 Q function 提取 policy。 ......
offline RL | TD3+BC：在最大化 Q advantage 时添加 BC loss 的极简算法
① 在 actor 最大化 Q advantage 时，纳入一个 behavior cloning loss； ② observation 归一化；③ 让 Q advantage 跟 behavior cloning 的 loss 可比。 ......
RLHF · PBRL | 发现部分 D4RL tasks 不适合做 offline reward learning 的 benchmark
发现对于很多任务，（只要给出专家轨迹），将 reward 设为 0 或随机数，也能学出很好 policy，证明这些任务不适合用来评测 reward learning 的性能好坏。 ......
Maven打包项目时异常：Cannot access nexus-aliyun (http://maven.aliyun.com/nexus/content/groups/public) in offline mode and
package是报错 Cannot access nexus-aliyun (http://maven.aliyun.com/nexus/content/groups/public) in offline mode and the artifact org.apache.maven.surefire ......
DELL服务器启动报错there are offline or missing virtual drivers with preserved cache
生产一台服务器硬盘故障报错，关机拔出硬盘装入新硬盘，启动要进入阵列卡系统，启动无法进入，报错 There are offline or missing virtual drives with preserved cache. Please check the cables and ensure th ......
adb devices 后是offline的问题解决
使用命令： adb kill-serveradb tcpip 5555adb start-server ping 127.0.0.1 -n 3 >nuladb rootadb remount adb connect 192.168.64.10 1.连接后，连接上，可以ping通，但是 adb dev ......
Android adb， List of devices attached , device offline 的报错。
解决方法如下： 这是报错： 解决如下： ......
SAP Fiori 应用的离线使用 - Offline usage
在某些情况下，用户可能需要在没有网络连接的情况下使用 SAP Fiori 应用。为了满足这种需求，可以利用 SAP 的离线能力来实现。以下是一种可能的实现方法。 首先，需要安装和配置 SAP Mobile Platform (SMP)。SMP 提供了离线 OData 的服务，这是实现 Fiori 应 ......
表空间状态管理(online和offline)
# 表空间状态管理(online和offline) [TOC] ## 表空间状态 - online - offline - read only - read write 表空间的状态属性主要有在线（online），离线（offline），只读（read only）和读写（read write）这四种 ......
harbor offline快速安装
Harbor介绍介绍引用：https://www.oschina.net/p/harbor?hmsr=aladdin1e1 Harbor 是由 VMware 公司中国团队为企业用户设计的 Registry server 开源项目，包括了权限管理(RBAC)、LDAP、审计、管理界面、自我注册、HA ......