集群containerd minio
树莓派集群真的可以顶上一台高性能计算机吗？（扩展篇）
之前写过文章： 树莓派集群真的可以顶上一台高性能计算机吗 讨论过树莓派集群是否可以比得上一台高性能计算机的问题，本篇这里是对前文的扩展。 之所以写了本篇扩展是因为无意中在网上发现了下文： https://arxiv.org/ftp/arxiv/papers/1911/1911.03709.pdf 之 ......
利用freemarker和minIO生成文章详情html并存入minIO
package com.heima.article.test; import com.alibaba.fastjson.JSONArray; import com.baomidou.mybatisplus.core.toolkit.StringUtils; import com.baomidou.m ......
（转）基于velero+minio对k8s进行备份和恢复
原文：https://www.cnblogs.com/cyh00001/p/16548774.html 一、velero介绍 Velero 是由vmware公司团队研发开源工具，用于安全地备份、恢复和迁移 Kubernetes 集群和持久卷。它可以在本地和公共云中运行。Velero 由一个在您的 K ......
ElasticSearch系列---【linux离线安装elasticsearch7.8非默认端口组成的集群】
# linux离线安装elasticsearch7.8非默认端口组成的集群 ## 前置环境配置,es用户创建和包下载 请参考:[https://www.cnblogs.com/hujunwei/p/17481718.html](https://www.cnblogs.com/hujunwei/p/1 ......
容器化部署RocketMQ4.9.4集群
## 容器化部署RocketMQ4.9.4集群 - 背景： 生产环境单机的MQ不具有高可用，所以我们应该部署成集群模式，这里给大家部署一个**双主双从异步复制的Broker集群** ### 一、安装docker ```sh yum install -y docker systemctl enable ......
【Websocket】SpringBoot整合Websocket集群实现服务端推送(一)
一.背景 最近项目中有需要使用到Websocket做长连接推送，这里整理在具体实现过程中的细节和踩过的坑 二.问题点 在实现过程中，这里自己整理了一些问题点 1.WebsocketSession无法序列化到Redis以及MySQL中,集群环境下，如果进行服务端推送到指定客户端，如何知道该客户端与后台 ......
MinIO——分布式文件系统
对象如图片、视频、文档等存储方式对比： 优点 缺点 服务器磁盘： 开发便捷、成本低 扩展困难 分布式文件系统： 容易实现扩容 复杂度高 第三方存储：开发简单，功能强大，免维护 收费 docker拉取镜像，创建容器 docker run -p 9000:9000 --name minio -d --r ......
python之gevent模拟minio文件上传/下载高并发
import gevent from gevent import monkey monkey.patch_all() from minio import Minio import time, random import uuid def get_client(): """ 连接minio :retu ......
promethues + grafana 监测ceph集群状态
##### 前 最近在使用海量小文件压测ceph集群，想着搭建一个可视化的界面来监测集群状态，由于很久之前使用过promethues + grafana 监测k8s集群状态，用来监测 ceph 集群应该问题不大，那么就开始吧！ 首先了解下 promethues 和 grafana 是什么？ prom ......
使用kubeadm快速部署一个K8s集群
kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。 这个工具能通过两条指令完成一个kubernetes集群的部署： ``` # 创建一个 Master 节点 $ kubeadm init # 将一个 Node 节点加入到当前集群中 $ kubeadm join ``` # ......
minio对象存储四台服务器部署4个节点集群
# 环境说明 **·** 分布式Minio至少需要4个节点 **·** 如果资源不够，可以采用两个节点每个节点启动两个实例的方式来实现四节点的集群，仅用于测试环境 **·** 生产环境建议最少4节点 # 环境准备 ``` #所有节点执行下列操作 # 配置时间同步，配置时间同步的方式不做讲述 # 创建 ......
Redis集群环境下keys被禁用，该怎么实现keys?
> 在生产环境中，禁用Redis的keys命令是为了避免对Redis实例的性能造成负面影响。keys命令会遍历整个 Redis数据库，查找与给定模式匹配的所有键，这在大规模的Redis数据库中可能会非常耗时; 那么，在keys禁用的情况下，仍然需要使用keys该怎么办呢？我们搜索一些处理方案大多是建 ......
Hive3.1.3集群安装
一、安装mysql Hive默认的Derby数据库一次只能打开一个会话，不支持多用户并发访问，需要替换Hive的存储引擎为mysql 1. 下载mysql安装包 wget http://dev.mysql.com/get/mysql57-community-release-el7-7.noarch. ......
Minio存储在Windows下 的问题
minio 用的是2022年8月份的版本，在windows2003下一直比较稳定，没有什么问题，切换到windows2012后经常性报错，无法上传文件： 报错： Error: file access denied (cmd.StorageErr] Error: Prefix access is de ......
006.hdfs-查看各节点磁盘使用情况,集群平衡
查看各节点磁盘使用情况 hdfs dfsadmin -report | grep -E "Name:|DFS Used%:" 集群平衡 mv balance.sh /home/hdfs/ su hdfs vim balance.sh chmod +x balance.sh ls hdfs dfsad ......
CentOS7 部署 k8s 集群
CentOS7 部署 k8s 集群 BUG弄潮儿 2023-06-10 20:32 发表于广东 BUG弄潮儿 多年开发经验，专注软件开发、架构；推送 微服务，分布式，Spring全家桶，Redis，Linux，Nginx等技术，欢迎一起学习、探讨。 396篇原创内容 公众号 K8s+Istio+Go ......
zookeeper集群启停脚本
方式一 #!/bin/bash #zookeeper集群启停脚本 ip="master slave1 slave2 slave3 slave4" #IP地址或域名都可以 zk-home="/home/zookeeper/zookeeper-3.4.14" case $1 in "start"){ f ......
重新初始化k8s集群
##### 执行如下命令，所有节点都执行 ```shell kubeadm reset ``` ##### 初始化集群，仅在master(centos01)上执行 ```shell [root@centos01 opt]# kubeadm init --apiserver-advertise-add ......
Redis分片集群-故障转移
为了演示故障转移，我们可以先通过watch命令查看某台节点信息监控整个集群状态： watch redis-cli -p 9001 cluster nodes 接着我们让某台节点宕机，执行命令：redis-cli -p 9002 shutdown，回车。 可以发现控制台监控到9002已失去连接。等待一 ......
Redis分片集群-集群伸缩
redis-cli --cluster提供了很多操作集群的命令，可以通过下面方式查看： redis-cli --cluster help执行如下： 比如，添加节点的命令： new_host代表需要添加的节点ip， exitsting_host代表已经存在的主机IP，也即集群中已经有的，为什么需要知道 ......
Kubernetes编程——查询集群提供哪些API资源
查询集群提供哪些API资源 [root@JumperServer:~] # kubectl api-resources NAME SHORTNAMES APIVERSION NAMESPACED KIND bindings v1 true Binding componentstatuses cs v ......
行行AI人才直播第3期：浙江大学周鑫博士《空中机器人复杂环境高效自主导航—从单机到集群》
空中飞行的无人车、无人机集群是科幻电影的常客，也往往是未来科技的一大代表。在电影《星球大战：西斯的复仇》（2005）和《银翼杀手2049》（2017）中，飞车构成的密集空中交通有条不紊的运行于高楼大厦之间，俨然是高科技星球的“标配”。电影中的集群所展现出的导航和协同能力数十年来吸引了无数的研究者。 ......
【大数据】通过 docker-compose 快速部署 MinIO 保姆级教程
[TOC] ## 一、概述 `MinIO` 是一个开源的**对象存储服务器**，它兼容`Amazon S3（Simple Storage Service）API`。它被设计用于构建分布式存储架构，提供高可用性、高性能和可扩展的对象存储解决方案。 下面是MinIO的一些主要特点和功能： - **对象存 ......
kafka集群搭建
https://blog.csdn.net/wudidahuanggua/article/details/127086186 1 安装准备 请确保zookeeper集群的正常启动 可参考：大数据学前准备--zookeeper详解与集群搭建（保姆级教程） 2 下载kafka Apache Kafka ......
Keepalived+Nginx 高可用集群架构
Keepalived+Nginx 高可用集群（主从模式） 一、两台群集服务器都需要安装nginx和keepalived，先添加nginx yum 源 vim /etc/yum.repos.d/nginx.repo [nginx-stable] name=nginx stable repo baseu ......
MGR集群命令
MGR集群命令 https://www.modb.pro/db/538741 官方文档： #### 一. 基本命令 ##### 1.检查集群状态，或者叫组复制状态 ``` select * from performance_schema.replication_group_members; ``` ......
ElasticSearch-03-集群核心概念（Windows集群）
Windows集群安装(es版本7.10.1) # 1.安装 1，解压elasticsearch-7.10.1-windows-x86_64.zip，复制出3个文件夹，重命名为node01、node02、node03  比较简单，自行百度查询。 # 2.运行分布式Minio 启动分布式Min ......