集群 环境hdfs
A0--集群基础环境
文件下载： ansible_v2.9.9 flink-1.16.0 hadoop-3.1.3 hive-3.1.3 kafka_2.13-3.3.1 python-3.8.10 spark-3.2.1 tools.tgz zookeeper-3.6.3 一、安装并配置ansible自动化工具 1）上 ......
Jmeter搭建分布式压测环境
最近在做性能测试，本来以为一台压力机就够啦，但是在压测一个查询接口的时候，当TPS达到500多的时候就开始报错，经过定位是压力机出现啦瓶颈，于是决定对压力机做一下分布式，经过调试环境部署成功，再次压测时候问题解决。下面记录一下部署分布式环境的过程。 使用的工具及版本： JDK：1.8.0_211 J ......
frp内网穿透环境搭建--服务端ubuntu 客户端win10
前提条件：1个公网ip服务器，例如腾讯云服务器ubuntu20 下载frp软件，下的是0.33.0版本，该版本直接把软件封装成服务，能用ubuntu直接定义开机自启等 github：https://github.com/fatedier/frp.git 注意查看ubuntu系统的架构是arm还是am ......
GEOM30009 图像环境
GEOM30009 IMAGING THE ENVIRONMENT Group Assignment 2Assessing Burn Scars Using Satellite Imagery Due for submission at 11:55 pm on Friday of Week 6Val ......
hdfs集群的扩容和缩容
1、背景 当我们的hadoop集群运行了一段时间之后，原有的数据节点的容量已经不能满足我们的存储了，这个时候就需要往集群中增加新的数据节点。此时我们就需要动态的对hdfs集群进行扩容操作(节点服役)。 2、集群黑白名单 在hdfs集群中是存在黑名单和白名单的。 黑名单： 该文件包含不允许连接到nam ......
Lecture 5 命令行环境
课后练习 任务控制 我们可以使用类似 ps aux | grep 这样的命令来获取任务的 pid ，然后您可以基于pid 来结束这些进程。但我们其实有更好的方法来做这件事。在终端中执行 sleep 10000 这个任务。然后用 Ctrl-Z 将其切换到后台并使用 bg来继续允许它。现在，使用 pgr ......
Chisel3 使用 DPI-C，发现在 Chisel 环境下 printf 没问题，但是 set_pc 死活传不到 cpp 环境
大概率是因为你使用了 SignExt 之类的封装 这类封装只会把 ”值“ 传给 DPI-C，而不会把线连给 DPIC，即，传过去的是调用 set_pc 时的值，而不是引用 这样会造成 CPP 获取不了相应线路的指针 如下图 ......
docker 部署mongoDB集群与读写分离
一.生成key文件 需要注意集群中所有机器都需要用同一个文件，否则会出现验证失败的情况 # 生成key openssl rand -base64 756 > /data/volume/mongodb/configdb/mongo.key # 设置访问权限 chmod 400 /data/volume ......
虚拟机ubuntu22.04搭建esp-matter环境
一. 安装esp-idf Step 1：编译 ESP-IDF 需要以下软件包。请根据使用的 Linux 发行版本，选择合适的安装命令。 Ubuntu 和 Debian: sudo apt-get install git wget flex bison gperf python3 python3-ve ......
nginx hyperf ssl https 环境。hyperf-https-ssl
user nginx nginx;worker_processes 8;#error_log logs/error.log;#error_log logs/error.log notice;#error_log logs/error.log info;#pid logs/nginx.pid;even ......
2-nacos运行环境部署
1、下载nacos最新的二进制压缩包； 下载地址：https://github.com/alibaba/nacos/releases 2、解压下载下来的nacos最新的二进制压缩包； tar -zxvf nacos-server-1.3.1.tar.gzcd nacos/bin 3、启动nacos ......
XXL-JOB Linux环境部署安装实战
一、下载XXL-JOB 下载源码： https://github.com/xuxueli/xxl-job 以2.3.0的版本为例：https://github.com/xuxueli/xxl-job/archive/refs/tags/2.3.0.tar.gz xxl-job文档： https:// ......
vue脚手架创建与环境安装
1.安装 Node.jsDownload | Node.js 在这里👆下载的是最新版，如果要安装以前的版本👇，页面往下拉找到 Previous Releases—Donloads—下载msi文件。 1.1 一直next即可安装成功。 1.2 安装后在cmd控制台输入node -v和npm ......
云上大数据存储：探究 JuiceFS 与 HDFS 的异同
HDFS 作为 Hadoop 提供存储组件，已经成为大数据生态里面数据存储最常用的选择，通常在机房环境部署。 JuiceFS 是一个基于对象存储的分布式文件系统，用户可以在云上快速地搭建按需扩容的弹性文件系统。 如果企业正在考虑在云上构建大数据平台，了解这两种产品的差异和优缺点，可以为企业迁移或切换 ......
Redis哨兵和cluster集群
1、什么是哨兵模式哨兵模式：可以自动切换解决单点故障，但是不能负载均衡，存储能力受限制。 哨兵核心功能：在主从复制的基础上，实现了主节点的自动故障转移 2、哨兵的作用监控：监控主节点和从节点是否在正常运行 故障自动转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从 ......
决战圣地玛丽乔亚Day47----Redis集群
4.Redis Cluster 集群模式 如果单机吞吐量过大，我们可以横向和纵向进行扩展，横向就是加节点（scale out），纵向就是加配置（scale up）。 如果加配置，治标不治本，单机局限性和持久化问题无法解决（如轮式RDB快照还是AOF指令） 横向扩展更容易扩展，可以解决很多问题，包括单 ......
实战篇：使用rook在k8s上搭建ceph集群
写在开篇 “ 上一次，我发了一篇：《理论篇：让我们一起鲁克鲁克——rook（开源存储编排）》。这次，来一篇实战，使用rook在k8s上把ceph集群搞起来。后续，还会陆续分享如何对接k8s（作为k8s的后端存储）、以及分享一些在生产上的实践经验。 ” 环境规划 | 主机名 | IP | 角色 | 数 ......
大数据之—HUE环境搭建
官网：https://gethue.com/ mysql环境 docker run -d -p 3306:3306 --restart=always --name mysql -e MYSQL_ROOT_PASSWORD=root mysql:5.6 # 下载配置文件 docker cp 容器:容器 ......
Appium移动端自动化环境搭建
一、JDK安装 1.先下载好jdk，下载地址： http://download.oracle.com/otn-pub/java/jdk/8u101-b13/jdk-8u101-windows-x64.exe 2.傻瓜式进行安装 3.配置环境变量 a.先新建JVAV_HOME b.编辑path c.新 ......
Window下，利用Anaconda2创建jupyter-notebook的python3环境方法
转载自：https://www.cnblogs.com/ljy2013/p/8351067.html 随着深度学习的火热，越来越多的人去学习和了解这门技术。而做算法的同学为了能够更快，更高效的写出相关的深度学习算法出来，需要比较方便的开发环境。今天主要介绍一下在jupyter notebook中，新 ......
从零开始配置sublime text c++环境
安装sublime text Sublime Text - Text Editing, Done Right 进入官网安装，自己选择一个路径安装即可 安装clang++编译器 clang++不知道可以查一下， 和g++做差不多的事情， 个人感觉这个快一点 一个简单的安装方式：通过msys2安装 MS ......
使用navigator.userAgent 判断当前浏览器所处的环境
https://blog.csdn.net/banana960531/article/details/86572475 浏览器对于我们来说，可能是最熟悉的工具了。熟知的浏览器Firefox、Opera、Safari、IE、Chrome以外，据说世界上还有近百种浏览器。通常在开发的时候要做到兼容各种浏 ......
day02-搭建微服务基础环境01
搭建微服务基础环境01 1.创建父工程，用于聚合其他微服务模块 1.1创建父项目 说明：我们先创建一个父项目，该父项目会去管理多个微服务模块（module），如下： （1）File-New-Project-Maven，选择如下： （2）输入项目名称等信息，然后next （3）选择Maven，然后Fi ......
将VSCode设置成中文语言环境
VSCode默认是英文语言环境，这对于像我这种英语比较菜的人来说不是那么友好 另外也习惯了用中文，所以接下来介绍下如何将VSCode设置成中文语言环境。 1、打开VSCode软件，按快捷键【Ctrl+Shift+P】 2、在弹出的搜索框中输入【configure language】，然后选择搜索出来 ......
【笔记】使用 docker alpine 的 php 8.1 构建 FastAdmin 开发环境
使用 docker alpine 的 php 8.1 构建 FastAdmin 开发环境 首先最重要的是换源，换成清华的。 sed -i 's/dl-cdn.alpinelinux.org/mirrors.tuna.tsinghua.edu.cn/g' /etc/apk/repositories 安 ......
redis集群简介
1.1 集群的概念 所谓的集群，就是通过添加服务器的数量，提供相同的服务，从而让服务器达到一个稳定、高效的状态。 1.1.1 使用redis集群的必要性 问题：我们已经部署好了redis，并且能启动一个redis，实现数据的读写，为什么还要学习redis集群？ 答：（1）单个redis存在不稳定性。 ......
浏览器环境自吐模块
https://github.com/daisixuan/r0chrome 使用chromium查看js使用那些环境 dtavm = {} dtavm.log = console.log dtavm.proxy = function (obj, objname, type){ function ge ......
blockchain | truffle环境搭建
blockchain | truffle环境搭建 需要node，不知道为啥我之前安装的node似乎不太行了，就重装了一下。 truffle是用来编写以太坊智能合约的环境，基本是js。 这个文章不错：https://www.qikegu.com/docs/4780 安装的时候如果不全局安装可能会有问题 ......
CMake 使用环境变量
为了传播性考虑，使用CMake编译工程时，有一些路径需要能方便地在新机器上更改，这就需要使用“环境变量”。 调用环境变量，在文件管理器中是用“%NAME%”，在Visual Studio中则是"${NAME}"。 在CMake中是“$(NAME)”，像这样： ......
kubernetes rabbimq3.11.11集群之mqtt插件
1. 概述 本文是总结给予k8s的rabbitmq3.11.11集群的mqtt搭建 rabbitmq集群搭建详见前一篇文章：kubernetes 集群部署rabbimq3.11.11 2. 自动创建mqtt账号密码 wrapper-entrypoint.sh #!/usr/bin/env bash ......