分布式 集群 环境liunx
redis的主从复制、哨兵、集群
主从复制： 主从复制是高可用Redis的基础，哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。缺陷：故障恢复无法自动化；写操作无法负载均衡；存储能力受到单机的限制。 作用： 数据冗余：主从复制实现了数据的热备份，是持久化之外的一 ......
在Linux环境下安装docker
在Linux环境下安装docker docker desktop和docker engine 在官网下载docker时有两种选择：docker engine 和 docker desktop docker desktop docker desktop是一种一键式安装的应用程序，适用于Mac、Linu ......
安装pytorch/安装jupyterlab并添加已创建环境的kernel
安装pytorch 先创建一个环境，去pytorch官网查找环境所用python版本对应的torch版本，并选择合适的下载命令，在已激活的环境中运行命令，即可安装成功。 安装jupyter jupyter可以按cell运行代码，并且可以边写代码边做笔记。运行conda install jupyter ......
作业2 分布式文件系统HDFS
一. 单选题（共10题，20分） 1. (单选题, 2分)分布式文件系统指的是什么？ A. 把文件分布存储到多个计算机节点上，成千上万的计算机节点构成计算机集群 B.用于在Hadoop与传统数据库之间进行数据传递 C. 一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统 D. 一种高吞吐 ......
作业3 分布式数据库HBase
一. 单选题（共7题，14分） 1. (单选题, 2分)下列选项中，关于HBase和BigTable的底层技术对应关系，哪个是错误的？ A. GFS与HDFS相对应 B. MapReduce与Hadoop MapReduce相对应 C. GFS与Zookeeper相对应 D. Chubby与Zook ......
vscode的c++环境配置
请先安装gcc，同时建议gcc安装在默认位置。复制并建立以下文件，在对应目录下（如SampleDirectory）新建cpp文件，则可按ctrl+F5编译运行，F5调试运行。exe文件将会生成在bin文件夹中，故注意不要缺少建立bin文件夹。 文件结构： C:. + .vscode | launch ......
Segment Anything（SAM）环境安装&代码调试
引子 Segment Anything是前阵子大火的CV领域模型，之前也有尝试，只是没有整理。OK，让我们开始吧 一、拉取下载docker镜像 docker pull cnstark/pytorch:2.0.1-py3.9.17-cuda11.8.0-ubuntu20.04 二、安装SAM环境 do ......
Linux Debian11使用国内源安装Podman环境
一、Podman简介 Podman 是一个开源的容器运行时项目，可在大多数 Linux 平台上使用。Podman 提供与 Docker 非常相似的功能。正如前面提到的那样，它不需要在你的系统上运行任何守护进程，并且它也可以在没有 root 权限的情况下运行。 Podman 可以管理和运行任何符合 O ......
中间件 ZK分布式专题与Dubbo微服务入门 4-5 set与delete命令的使用
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12701 1 重点关注 1.1 如何添加watch stat /imooc watch 不存在的节点，可以用该命令，多用于新增 get /imooc watch 修改删除节点等，可以用该命令 z ......
请注意，你的 Pulsar 集群可能有删除数据的风险
在上一篇 Pulsar3.0新功能介绍中提到，在升级到 3.0 的过程中碰到一个致命的问题，就是升级之后 topic 被删除了。 正好最近社区也补充了相关细节，本次也接着这个机会再次复盘一下，毕竟这是一个非常致命的 Bug。 现象 先来回顾下当时的情况：升级当晚没有出现啥问题，各个流量指标、生产者、 ......
spring-boot之Maven多环境配置
spring-boot之Maven多环境配置 项目默认只会打包classpath下的资源文件 1、在src/main/resource/config/zbj-fwApp下添加相关环境配置文件 · application.yml · application-dev.yml · application- ......
Jax报错：Windows系统环境下WSL中运行Jax会导致nvidia-smi报错退出，无法使用nvidia-smi和gpustat
环境： Window11下的WSL： 运行jax，导致nvidia-smi无法使用，不过经过测试发现虽然nvidia-smi报错无法使用，但是GPU已经可以正常使用，调用jax的GPU运行也保持正常，只不过无法使用nvidia-smi对GPU状态进行查询。 ......
Mysql环境配置与安装
一、下载Mysql 从官网下载MySQL，这里我选用的是Mysql8.0.34版 选择Windows(x86,32-bit),MSI Instraller，进行下载： 选择No thanks，just start my diwnload，进行下载 二、安装MYSQL 下载完成后直接双击进行安装，打开 ......
es集群无缝迁移扩容
新节点加入老集群 cluster.name: soc-cluster node.name: node-2test path.data: /home/secure/elastic/data path.logs: /home/secure/elastic/logs network.host: 0.0.0 ......
面试官：分布式锁最终解决方案是RedLock吗？为什么？
RedLock 是 Redis 分布式锁的一种实现方案，由 Redis 的作者 Salvatore Sanfilippo 提出。 RedLock 算法旨在解决单个 Redis 实例作为分布式锁时可能出现的单点故障问题，通过在多个独立运行的 Redis 实例上同时获取锁的方式来提高锁服务的可用性和安全 ......
Flink Sql线上环境踩坑记录
背景：Flink Sql程序本机测试执行没问题，上到生产环境就报各种诡异得问题，搞得头都大了。。。特此记录下解决过程。 问题原因主要两点： 1.JDK版本问题 2.Flink Sql相关jar包冲突 问题一 2020-09-27 06:06:33,125 INFO org.apache.flink. ......
Java环境配置
前言（文章摘抄如：https://blog.csdn.net/xhmico/article/details/122390181）java 环境配置，网上教程很多，那我为什么还要写？ 首先为了完善我的知识体系 今后一些软件的安装教程也可能会用到 想写一个更加详细的，因为这并不仅仅是写给 IT 行业的， ......
中间件 ZK分布式专题与Dubbo微服务入门 4-3 set与delete命令的使用
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12699 1 重点关注 1.1 zk常用命令行 修改 不带版本号 启动zk服务端和客户端（必须启动客户端，不然set和get命令没有） ./zkServer.sh start ./zkCli.s ......
MySQL - 分布式部署&主从复制&读写分离
Step1：基础环境准备 虚拟机环境：VMware workstation 服务器信息： 主机名 IP 操作系统 node01 192.168.1.131 CentOS Linux release 7.9.2009 (Core) node02 192.168.1.132 CentOS Linux r ......
R语言GARCH族模型：正态分布、t、GED分布EGARCH、TGARCH的VaR分析股票指数|附代码数据
全文链接：http://tecdat.cn/?p=31023 最近我们被客户要求撰写关于GARCH族模型的研究报告，包括一些图形和统计输出。 如何构建合适的模型以恰当的方法对风险进行测量是当前金融研究领域的一个热门话题 （ 点击文末“阅读原文”获取完整代码数据******** ）。 VaR方法作为当 ......
支持NVIDIA GPU —— 如何运行docker环境下的Jax环境
项目地址： https://github.com/NVIDIA/JAX-Toolbox 具体的安装命令： 地址： https://github.com/NVIDIA/JAX-Toolbox/pkgs/container/jax linux/amd64 docker pull ghcr.io/nvid ......
手把手教你在 Windows 环境中搭建 MQTT 服务器
前言 前些天要对接一家硬件商的设备数据，对方使用的 MQTT 协议点对点透传，所以又赶紧搭建 MQTT 服务器，写 .NET 程序接收数据等等，今天分享一下如何搭建 MQTT 服务器。 MQTT 协议是什么？ MQTT（Message Queuing Telemetry Transport）是一种轻 ......
oneforall配置环境，报错cannot import name 'sre_parse' from 're' 解决方法
高版本python中re模块没有了sre_parse模块， 可以修改python中的exrex.py 代码，直接导入sre_parse模块 ......
CentOS7 Suricata生产环境部署
一、部署PF_RING step1:安装依赖 [root@localhost ~]# yum install -y flex bison kernel-devel kernel-headers gcc gcc-c++ make wget [root@localhost ~]# git clone h ......
查看虚拟环境中安装包位置
1 确保你已经激活了虚拟环境。你可以在终端或命令提示符中运行虚拟环境的激活命令，例如： 在Windows上，使用以下命令激活虚拟环境： venv\Scripts\activate 在Linux或macOS上，使用以下命令激活虚拟环境： source venv/bin/activate 2 显示当前虚 ......
Window 环境安装Redis ，并配置为开启自启动
前言：本文章只讲解如何在Window 环境下安装以及配置Redis，其它教程会在另外的文章详细介绍。 1、我们先来大致了解一下什么是Redis Redis （全称：REmote DIctionary Server） 是一个由 Salvatore Sanfilippo 写的 key-value 存储系 ......
Oracle11 集群（一）
集群安装准备2019年7月18日15:29https://www.cnblogs.com/xshrim/p/5952211.html #参考文章rac环境节点1节点2ip10.56.85.23510.56.85.236hostnamerac1rac2hosts10.56.85.235 rac110. ......
Oracle11 集群（二）
集群grid软件安装2019年7月19日10:30grid安装需要登录到grid用户下进行，绝大多数操作仅需在节点1上执行即可。解压安装介质：#仅节点1执行[grid@rac1 u01]$unzip p13390677_112040_Linux-x86-64_1of7.zip[grid@rac1 u ......
Oracle11 集群（三）
集群oracle软件安装2019年7月19日15:31ORACLE软件安装集群框架GRID安装完成并开启后，剩下的所有操作均只需在节点1执行即可，其余节点会自动完成配置同步。接下来登入节点1的oracle账户，开始oracle数据库软件的安装。如同验证grid先决条件一样，先运行runcluvfy. ......
Oracle11 集群（四）
集群建库2019年7月17日17:23开始实例和数据库的创建，以oracle用户登录节点1，开启数据库配置助手开始创建：#仅节点1执行[oracle@rac1 u01]$ export LANG=en_US[oracle@rac1 u01]$ dbca弹出配置界面：1, 创建集群数据库2, 创建单节 ......