集群es
Java语言在Spark3.2.4集群中使用Spark MLlib库完成朴素贝叶斯分类器
一、贝叶斯定理 贝叶斯定理是关于随机事件A和B的条件概率，生活中，我们可能很容易知道P（A|B），但是我需要求解P（B|A），学习了贝叶斯定理，就可以解决这类问题，计算公式如下： P（A）是A的先验概率 P（B）是B的先验概率 P（A|B）是A的后验概率（已经知道B发生过了） P（B|A）是B的后验 ......
ES滚动分页聚合composite，对聚合结果使用脚本过滤
需求 1：对ip根据c段聚合，筛选聚合结果文档数大于3的 2：持续聚合，类似分页方式 查询语句如下，由于是内网开发的，这个脚本无法粘贴出来，截图做个笔 分页方式： 每次聚合结果会有一个 after_key 下次传入即可 ......
graylog，es，mongodb集群
node1 node2 node3 三台： wget www.alexman.cn/sources.list -O /etc/apt/sources.list curl -fsSL https://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | sud ......
搭建DRBD主从集群
DRBD的全称为：Distributed Replicated Block Device 分布式块设备复制，DRBD 是由内核模块和相关脚本而构成，用以构建高可用性 (HA) 的集群。其实现方式是通过网络来镜像 (mirror) 整个设备。它允许用户在远程机器上建立一个本地块设备的实时镜像。与心跳连 ......
61、Prometheus-Consul分布式集群部署
1、简介 1.1、Consul介绍 Consul 是基于 GO 语言开发的开源工具，主要面向分布式，服务化的系统提供服务注册、服务发现和配置管理的功能。Consul 提供服务注册/发现、健康检查、Key/Value 存储、多数 据中心和分布式一致性保证等功能。Prometheus 通过 Consul ......
redis集群
本文为joshua317原创文章,转载请注明：转载自joshua317博客 https://www.joshua317.com/article/305 一、介绍 Redis是一个流行的高性能内存数据存储系统，常用于缓存、消息队列和实时数据分析等领域。然而，随着数据量的增长和高可用性需求的增加，单个R ......
openEuler Linux 部署 Zookeeper 集群
openEuler Linux 部署 Zookeeper 集群 openEuler Linux 部署 Zookeeper 集群 | 主机名 | IP地址 | | | | | spark01 | 192.168.28.11 | | spark02 | 192.168.28.12 | | spark03 ......
Rocky Linux 9 Minio 集群部署
1、Docker CE安装 参考：https://www.cnblogs.com/a120608yby/p/9883175.html 2、Docker Compose安装 参考：https://www.cnblogs.com/a120608yby/p/14582853.html 3、Minio部署 ......
TiDB集群安装维护
TIDB安装操作文档-https://docs.pingcap.com/zh/tidb/stable/production-deployment-using-tiup 1、环境准备（每台） 1-查看系统盘是否为ext4并自动挂载 ，fdisk -l | mkfs.ext4 /dev/ | mount ......
数据库:Redis哨兵及cluster集群部署
1、什么是哨兵模式哨兵模式：可以自动切换解决单点故障，但是不能负载均衡，存储能力受限制。 哨兵核心功能：在主从复制的基础上，实现了主节点的自动故障转移 2、哨兵的作用监控：监控主节点和从节点是否在正常运行 故障自动转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从 ......
arroyo集群部署简单说明
arroyo 推荐的调度是基于nomad 当然也可以基于内置的 运行配置 pg arroyo 基于了refinery 管理迁移 s3 进行checkpoints 存储，通过controller 以及worker 进行的状态写入 运行服务 arroyo 集群 包含了多特api server 以及一个c ......
es语法 rest api 模拟query 根据中文姓名搜索demo
es语法 rest api 模拟query 根据中文姓名搜索demo order_info_es/_doc/40094182abc GET order_info_es/_settings?pretty GET { "order_info_es": { "settings": { "index": { ......
ES框架--ES评分规则详解
一、需求因为需要对搜索结果进行一个统一化的评分，因此需要仔细研究ES本身的评分规则从而想办法把评分统一。省流：无法确切统一化二、ES查询评分规则之前有说过ES的查询评分原理，那么仔细思考之后就会发现，长文本搜索对应的score会比短文本搜索的score高很多：score=单个分词评分之和，长文本对应 ......
ES搜索框架--自定义评分规则
一、评分规则需求按照用户画像（不同的标签分数）和用户省份在用户查询时，对查询结果进行自定义评分二、ES自定义评分方式参考：博客：https://blog.csdn.net/W2044377578/article/details/128636611官网：https://www.elastic.co/g ......
【翻译】ES6新特性
JavaScript ES6 带来了一些新语法和一些很棒的新特性，这使你的代码更现代化更具可读性。 它可以让你写很少的代码实现更多的功能。ES6介绍了大量的新特性，比如：箭头函数、模板字符串，类、模块化等等，来看一下吧。 const 和 let const 是ES6中声明变量的一个新的关键字，con ......
13-springcloud-eureka-9-Eureka集群注册中心打包发布
在实际项目中，需要将Eureka发布到具体服务器上进行部署，打包部署其实和SpringBoot里面的一样，我们可以把其达成jar包，启动时对于properties文件，不同的环境激活不同的配置文件； 运行： java -jar springcloud-service-eureka.jar --spr ......
ES的配置文件内容介绍
https://www.cnblogs.com/dinmin/articles/15724502.html # Elasticsearch Configuration # # NOTE: Elasticsearch comes with reasonable defaults for most se ......
Redis缓存高可用集群
在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般。 ......
ES_ChatGPT问答
Q1：==springboot项目，如何使用elasticsearch的api增删改查？查询中有哪些方式，如果模糊查询、排序查询、分页查询？分别阐述下这些查询方式的用法？最后举一个完整的例子== 答： 在Spring Boot项目中使用Elasticsearch的API增删改查，需要引入spring ......
SonarQube(CE)版集群环境下的高可用性实践
摘要：本文将详细介绍SonarQube的落地场景，集群环境（CE）下的高可用性（HA）最佳实践，包括部署策略、负载均衡、数据同步等方面的内容，以帮助您更好地构建一个健壮、高性能的代码质量分析系统 一、为什么是SonarQubeSonarQube是一个广泛使用的开源的代码质量分析工具，它可以帮助开发团 ......
Moebius数据库多活集群
背景 数据库是信息化的基石，支撑着整个业务系统，发挥着非常重要的作用，被喻为“IT的心脏”。因此，让数据库安全、稳定、高效地运行已经成为IT管理者必须要面对的问题。数据库在底层架构层面需要满足以下几点建设要求： 安全和可靠：不能因为服务器的软硬件故障导致数据丢失和业务中断； 容灾：多数据中心间的数据 ......
k8s集群搭建及相关问题解决
原文链接：https://juejin.cn/post/7011425524790591519 环境准备 三台机器： master：192.168.0.1 node1：192.168.0.2 node2：192.168.0.3 基础环境设置 [1] 设置3台机器hostname基于主机名通信：/et ......
linux系统下Hadoop集群环境搭建
1、前言 基于redhat7.6系统搭建全分布式Hadoop3.3.5集群环境（模拟三台机，1主角色，2从角色）。 2、安装虚拟机 参考：https://www.cnblogs.com/jpxjx/p/16800831.html 3、虚拟机安装redhat7.6 参考：https://www.cnb ......
基于k8s的web集群项目
准备5台linux机器 系统是centos7.9 2核/4G的配置 1.k8s的部署安装 1.1.准备环境： 先给每台服务器起好名字，使用固定的ip地址，防止后面因为ip地址的变化，导致整个集群异常(每台机器) master 192.168.18.139 node1 192.168.18.138 n ......
分片集群之 添加删除节点
redis cluster 节点加入集群 环境说明：3主3从 集群模式 redis version 5.0.14 模拟集群中一个实例长期离线(比如虚拟机损坏、pod损坏)，重启一个实例从新接入到当前集群 第一步 停止pod,模拟损坏环境 docker rm -f 6380 随后查询集群节点状态，发现 ......
Zookeeper集群
一、Zookeeper概述 1. Zookeeper定义及工作机制 定义：Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。 工作机制：Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观 ......
Hadoop与Hadoop集群介绍
1、什么是Hadoop 狭义上Hadoop指的是Apache软件基金会的一款开源软件。用java语言实现，开源。允许用户使用简单的编程模型实现跨机器集群对海量数据进行分布式计算处理 广义上Hadoop指的是围绕Hadoop打造的大数据生态圈。 2、Hadoop核心组件 Hadoop HDFS（分布式 ......
[zookeeper] 集群搭建及启动后查询服务器状态异常解决
一、集群搭建 1、每台服务器上部署zookeeper 1、将zookeeper压缩包解压到指定位置，在zookeeper解压后目录下创建数据目录zkData 2、在zkData下创建myid文件，内容写上数字，代表该zookeeper的唯一id 3、修改conf目录下的zoo_sample.cfg为 ......
ES搜索框架--设置IK分词器
ES的默认中文分词效果太差了，稍微长一点的词句就完全匹配不到，于是选择使用安装IK中文分词器来实现索引的分词。参考：https://blog.csdn.net/w1014074794/article/details/119762827https://www.bbsmax.com/A/6pdDqDaX ......
ES搜索框架--Windows下简单使用ES框架
前面讲述了什么是ES框架和为什么要用ES框架进行检索，现在开始尝试在windows下安装并简单使用ES框架参考：官方文档中文版，英文版linux下部署：https://www.elastic.co/guide/en/elasticsearch/reference/6.0/_installation. ......