快照elasticsearch snapshot minio
【Logstash】conf文件mysql多数据源导入elasticsearch配置说明
# input plugin 输入插件，接收事件源 input { jdbc { # 定义类型_1 type => "type_1" # mysql的ip、端口以及用到的数据库名 jdbc_connection_string => "jdbc:mysql://localhost:3306/数据库名" ......
go语言如何使用elastic官方客户端go-elasticsearch/v8实现数据批量更新
go语言如何使用elastic官方客户端go-elasticsearch/v8实现数据批量更新 go语言的官方客户端 Elasticsearch 的官方 Go 客户端是由 Elastic 开发、维护和支持的客户端系列的最新成员之一。 初始版本于 2019 年初发布，并在过去几年中逐渐成熟，获得了重试 ......
【es】elasticsearch生产数据备份和恢复方案
https://huaweicloud.csdn.net/637f7ae4dacf622b8df859b1.html?spm=1001.2101.3001.6650.2&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECT ......
十三、ElasticSearch和Kibana进阶--谷粒商城
导入样本测试数据 准备一份顾客银行账户信息的虚构的JSON文档样本。每个文档都有下列的 schema（模式）。 { "account_number": 1, "balance": 39225, "firstname": "Amber", "lastname": "Duke", "age": 32, ......
centos环境minio安装踩坑指南2023年7月30日
# MinIO的安装踩坑指南 环境centos7 ## 1. [安装MinIO操作文档](https://www.minio.org.cn/docs/minio/linux/operations/install-deploy-manage/deploy-minio-single-node-singl ......
ElasticSearch——使用备忘
查询 GET http://xxxxx:9200/user_list/_search 添加模板 POST http://xxxxx:9200/user_list/_scripts/user_list_template { "script": { "lang": "mustache", "source ......
fluent elasticsearch6 fluent-plugin-elasticsearch install
一、安装fluent-plugin-elasticsearch 编写Dockerfile FROM fluent/fluentd:v1.12.0-debian-1.0 USER root RUN gem uninstall -I elasticsearch && gem install elasti ......
minio挂载到本地
minio Server管理的文件存在于桶中，对于一部分需要直接访问文件系统的场景，需要将minio server中的文件保存到本地直接读取文件。 方法： contos7使用s3fs挂载minio对象存储实践 https://blog.csdn.net/qq_43715659/article/det ......
elasticsearch的RESTful API以及C#的使用
**RESTful API** 1.RESTful请求方式 RESTful风格是一种基于HTTP协议设计Web API的软件架构风格，它强调使用HTTP动词来表示对资源的操作（GET、POST、PUT、PATCH、DELETE等） 2.RESTful请求elasticsearch 2.1测试elas ......
Docker安装部署ElasticSearch
参考文档： https://blog.csdn.net/qq_37726813/article/details/129917352 https://blog.csdn.net/yangkei/article/details/126837326 https://blog.csdn.net/yangke ......
【Linux】离线安装部署环境jdk、nginx、mysql、redis、minio
#!/bin/bash #fonts color yellow(){ echo -e "\033[33m\033[01m$1\033[0m" } green(){ echo -e "\033[32m\033[01m$1\033[0m" } red(){ echo -e "\033[31m\033[0 ......
Docker minIO部署
docker run -it -p 8888:8888 -d \ --net=host \ --name minio \ --restart=always \ -e "MINIO_ROOT_USER=<username>" \ -e "MINIO_ROOT_PASSWORD=<password>" ......
学好Elasticsearch系列-核心概念
本文已收录至Github，推荐阅读 👉 [Java随想录](https://github.com/ZhengShuHai/JavaRecord) 微信公众号：[Java随想录](https://mmbiz.qpic.cn/mmbiz_jpg/jC8rtGdWScMuzzTENRgicfnr91C5 ......
学好Elasticsearch系列-Mapping
本文已收录至Github，推荐阅读 👉 [Java随想录](https://github.com/ZhengShuHai/JavaRecord) 微信公众号：[Java随想录](https://mmbiz.qpic.cn/mmbiz_jpg/jC8rtGdWScMuzzTENRgicfnr91C5 ......
学好Elasticsearch系列-索引的CRUD
本文已收录至Github，推荐阅读 👉 [Java随想录](https://github.com/ZhengShuHai/JavaRecord) 微信公众号：[Java随想录](https://mmbiz.qpic.cn/mmbiz_jpg/jC8rtGdWScMuzzTENRgicfnr91C5 ......
k8s上搭建elasticsearch单节点集群（固定存储）
因为Elasticsearch需要保持数据在固定的磁盘上，属于有状态的应用服务，因此采用k8s的StatefulSet模式部署。 创建PersistentVolumes和Claim #es-persistent-volume.yaml apiVersion: v1 kind: PersistentV ......
【elasticsearch】查询的一些常用例子
1、条件，页数，排序 基本上可以满足所有需要的查询场景 调用python将此body传入参数即可完成脚本查询 参考链接： ElasticSearch深度分页详解 - 知乎 ......
三色标记、原始快照、增量更新相关
#### 三色标记遍历过程（其实就是一个bfs的过程） 假设现在有白、灰、黑三个集合（表示当前对象的颜色），其遍历访问过程为： 1. 初始时，所有对象都在白色集合中； 2. 将GCRoots直接引用到的对象挪到灰色集合中； 3. 从灰色集合中获取对象： 1. 将本对象引用到的其他对象全部挪到灰色集合 ......
minio将http改为https方式访问
https://codeleading.com/article/56205149993/ 由于项目更新成了https的访问方式,原来http格式的图片就无法在https页面中显示,查看minio官网的升级TLS方式没有解决 https://docs.min.io/cn/how-to-secure-a ......
Elasticsearch常用命令
# Elasticsearch 简介 Elasticsearch是一个基于Lucene的搜索和数据分析工具，它提供了一个分布式服务。Elasticsearch是遵从Apache开源条款的一款开源产品，是当前主流的企业级搜索引擎。 ## 1. 特点 - 分布式的实时文件存储，每个字段都被索引并可被搜索 ......
centos7 安装 minio RELEASE.2021-06-17
1、下载执行包 wget https://dl.min.io/server/minio/release/linux-amd64/archive/minio.RELEASE.2021-06-17T00-10-46Z 2、创建数据、日志文件夹 mkdir -p /data/project/minio/d ......
ES数据备份之snapshot和elasticdump
https://blog.csdn.net/m0_46435788/article/details/114291491?spm=1001.2101.3001.6650.9&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7EB ......
es备份之snapshot SLM策略cron详解
https://blog.csdn.net/m0_46435788/article/details/116998565?spm=1001.2101.3001.6650.2&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7EC ......
Elasticsearch自定义分词器
## 分词发生时期 分词器的处理过程发生在`Index Time`和`Search Time`两个时期 - Index Time：文档写入并创建倒排索引时期，其分词逻辑取决于映射参数`analyzer`。 - Search Time：搜索发生时期，其分词仅对搜索词产生作用。 ## 分词器的组成 - ......
minio性能测试
# minio性能测试 ## minio的使用 ``` 前期使用了s3fs 但是想验证一下性能相关, 所以使用今天简单验证了一下, 其实也可以使用一下fio 但是s3fs 是对象存储 没有修改 只有上传, 所以感觉还是使用dd更加好一些. ``` ## dd 性能测试脚本-读取 ``` rm -rf ......
spring cloud整合ElasticSearch
1. 创建一个查询服务，pom中引入es服务所需要的包 <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</artifactId> <ve ......
ElasticSearch的Ubuntu安装
导入Elasticsearch PGP密钥： 首先，导入Elasticsearch的PGP密钥，用于验证软件包的完整性和真实性。执行以下命令： bashCopy code wget -qO - https://artifacts.elastic.co/GPG-KEY-elasticsearch | ......
MINIO配置TLS访问
服务端证书生成 openssl genrsa -out ca.key 2048 openssl req -x509 -new -nodes -key ca.key -subj "/CN=*.*.*.*" -days 365 -out ca.crt openssl genrsa -out server ......
6.ELASTICSEARCH~高级(二)
六、分词 1、简介 一个tokenizer(分词器)接收一个字符流，将之分隔为独立的tokens(词元，通常是独立的单词)，然后输出tokens流 2、如何查看一句话的分词结果： POST _analyze { "analyzer":"standard" //指定分词器：现在使用的是标准分词器 "t ......
5.ELASTICSEARCH~高级(一)
五、Mapping1、ElasticSearch7去掉type的概念关系数据库中两个数据表示是独立的，即使他们里面有相同名称的列也不影响使用，但ES中不是这样的。elasticsearch是基于Lucene开发的搜索引擎，而Es中不同type下名称相同的field最终在Lucene中的处理方式是一样 ......