elasticsearch方式docker
elasticsearch oom问题分析
背景 线上发现elasticsearch集群状态red，并且有个es节点jvm内存使用不断升高，直到gc后依然内存不够使用，服务停止。查看日志，elasticsearch出现OOM报错。 [2023-12-06T08:21:26,706][ERROR][o.e.b.ElasticsearchUnca ......
Elasticsearch专栏 集群管理
Elasticsearch 集群管理 简介 Elasticsearch 是一个开源的分布式搜索和分析引擎，用于处理大规模的结构化和非结构化数据。集群管理是确保 Elasticsearch 在生产环境中高效运行的关键任务之一。 集群基础知识 节点（Nodes）： Elasticsearch 集群由一个 ......
Elasticsearch专栏 基础知识
Elasticsearch 基础知识 1. 什么是 Elasticsearch？ Elasticsearch 是一个开源、分布式、实时搜索和分析引擎，建立在 Apache Lucene 基础之上。它提供了一个强大的 RESTful API，用于进行复杂的搜索和分析操作。 2. 核心概念 2.1 节点 ......
Elasticsearch专栏 集群分片管理
Elasticsearch 集群分片管理 简介 Elasticsearch 是一个分布式搜索和分析引擎，数据在集群中被分割成多个分片，以实现高性能和可伸缩性。在管理 Elasticsearch 集群时，分片的合理分配和监控是至关重要的。 分片基础知识 主分片（Primary Shard）： 每个索引 ......
Elasticsearch专栏 集群安全认证
Elasticsearch 集群安全认证 简介 Elasticsearch 的安全认证功能用于确保只有经过授权的用户才能访问集群和执行特定操作。这有助于保护集群中的数据和资源。 安全认证组件 1. X-Pack Security 插件 X-Pack 是 Elastic 提供的官方插件，包含了 Ela ......
CATIA二次开发 之两种布局方式的对比
CATIA二次开发 之两种布局方式的对比 布局 Grid Layout 网格布局-推荐 Tabulation Layout 表格布局-不推荐 This is the recommended way of arranging dialog objects. This is not the recomm ......
Docker+jenkins 运行 python 自动化
参考：Docker+jenkins 运行 python 自动化 - 测试派 (testingpai.com)一、实现思路在Linux服务器安装docker创建jenkins容器根据自动化项目依赖包构建python镜像(构建自动化python环境)运行新的python容器，执行jenkins从仓库中拉 ......
docker镜像命令及容器命令
一、docker镜像命令1、查看镜像docker images2、搜索镜像不能直接找到对应的详细版本信息，只能去网站上去找docker search 镜像名称3、拉取镜像在这里找镜像(docker hub)https://hub.docker.com/_/python/tagsdocker pull ......
Docker安装
"""一、概念1、虚拟化:一种资源管理技术虚拟机(安装centos虚拟机)、内存管理、硬盘分区管理、2、docker是什么虚拟容器技术: docker是虚拟化技术的一种，虚拟容器技术，模拟一个极小的linux系统(dockerfile)沙箱机制:基于一个exe文件创建的应用,都是相互独立.的镜像:好 ......
docker compose一键部署
1.解压命令rar https://www.cnblogs.com/panbin2006/p/16528600.html 2.安装docker-compose Compose 是用于定义和运行多容器 Docker 应用程序的工具。通过 Compose，您可以使用 YML 文件来配置应用程序需要的所有 ......
Python flask 网页版执行shell命令并返回结果['GET', 'POST'] 混合方式
前言全局说明 Python flask 网页版执行shell命令并返回结果 一、需要安装的库 pip3 install flask -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com pip3 install subpro ......
elasticsearch集群red恢复损坏的索引
背景 客户磁盘损坏，修复磁盘后，重启机器，发现elasticsearch启动成功，ES状态正常green，但是历史数据都没有加载进，查看ES存储数据目录，发现数据还在。 解决方案 首先，需要确认indices目录下的lucene 索引正常。需要关闭ES（实际操作索引处于close状态也可以）。 # ......
wsl2 通过桥接实现 局域网访问,docker 远程连接执行testcontainer
为了不想在本地安装docker 运行 testcontainer 容器测试,需要wsl2 的所有端口,局域网都可以访问,折腾了3天,最后在 https://zhuanlan.zhihu.com/p/659074950 这篇文章的指引下才实现 首先打开控制面板 点击程序 点击启用或关闭Window功能 ......
【Jenkins+gitee+docker实现CI/CD（之三）】jenkins拉取gitee代码后运行在docker中
1，在服务器上安装docker 网上有很多在 centOSk中安装docker的教程，这里就不多说了 安装完成后 #启动 systemctl start docker #加入自启 systemctl enable docker #验证是否安装成功 docker version ......
docker-compose.yml转换工具--composerize
简介 composerize 是一个 CLI 工具，可以将 docker run 命令转换为 docker-compose 配置清单。 除了 CLI 之外还提供了一个可视化界面，有兴趣可以自己看看 下载 ~]# npm install composerize -g 使用 ~]# composeriz ......
Docker一键极速安装Nacos，并配置数据库！
1 部署方式 1.1 DockerHub javaedge@JavaEdgedeMac-mini ~ % docker run --name nacos \ -e MODE=standalone \ -e JVM_XMS=128m \ -e JVM_XMX=128m \ -e JVM_XMN=64m ......
CentOS7环境下达梦数据库试用版的安装和部署以及启动（以命令行的方式）
一、安装环境 服务器系统：CentOS 7 数据库版本：DM8试用版 二、数据库下载 进入达梦官网可以下载DM8的试用版，进入官网首页 >> 数据库 >> 数据库产品系 >> 达梦数据库管理系统DM8 >> 试用下载，下载完成后上传至服务器备用 三、数据库安装 3.1 硬件环境需求 根据达梦官方安装 ......
Docker-什么是Docker
什么是Docker？ 微服务虽然具备各种各样的优势，但服务的拆分通用给部署带来了很大的麻烦 分布式系统中，依赖的组件非常多，不同组件之间部署时往往会产生一些冲突 在数百上千台服务中重复部署，环境不一定一致，会遇到各种问题 应用部署的环境问题 大型项目组件较多，运行环境也较为复杂，部署时会碰到一些问题 ......
云服务器利用Docker搭建sqli-labs靶场环境
一、安装宝塔面板 使用xshell、electerm、SecureCRT等远程终端连接登陆上云服务器，在Linux宝塔面板使用脚本安装 安装后，如下图：按照提示，在云服务器防火墙/安全组放行Linux宝塔面板的端口 在浏览器打开上述网址，登录Linux宝塔面板： 二、安装Docker 在Linux宝 ......
安装docker镜像报错
问题： 执行以下命令： sudo yum-config-manager \ --add-repo \ https://download.docker.com/linux/centos/docker-ce.repo 报错： 报错翻译： /usr/lib/python2.7/site packages/ ......
【安卓】拿注册码的两种方式
【安卓】拿注册码的两种方式 本公众号技术文章仅供参考！ 文章仅用于学习交流，请勿利用文章中的技术对任何计算机系统进行入侵操作。利用此文所提供的信息而造成的直接或间接后果和损失，均由使用者本人负责。 首发吾爱：https://www.52pojie.cn/thread-1826802-1-1.html ......
9解决elasticsearch深度分页问题
前面说到，分页可以使用from和size参数，类似于mysql的分页offset和limit。但是如果数据量比较大时，elasticsearch会对分页做出限制，因为此时会比较消耗性能。 为什么要限制 分页的时候，elasticsearch会根据查询条件到每个分片取出数据来，然后再由coordina ......
7.elasticsearch重建索引
什么时候需要重建索引 索引的mappings发生变更 索引的setting发生变更 集群内，集群间，需要做数据迁移 update by query 在现有索引重建 比如需要给一个text新增一个子字段，用english分词器。那么新添加的数据会被索引，之前的数据不会被索引。此时可以用_update_ ......
4.elasticsearch中查询条件
目录一、URI查询指定字段、泛查询分组和phraseBool条件must条件范围查询通配符查询正则表达式模糊匹配与近似查询二、RequestBody&DSLignore_unavailableprofileexplainqueryfrom、sizesort_sourcescript_fieldsma ......
5.elasticsearch中聚合查询
elasticsearch聚合查询 什么是聚合，就是目的不是查询具体的文档，而是查询文档的相关性，此外还可以对聚合的文档在按照其他维度再聚合。 包含以下四种聚合 Bucket Aggregation 一些列满足特定条件的文档的集合 terms 对某个字段统计每个不同的内容，以及出现文档的个数 ran ......
6.elasticsearch中search template和alias
什么是search template 顾名思义，查询模版，就是提前设定好查询的DSL，再次查询时，只需要指定对应的模版，然后传入相应的参数就好。一是可以每次不用构建复杂的DSL，二是可以供开发直接使用查询DSL模版，减少学习和对接成本。 有如下两种方法 一、创建脚本_script/template, ......
1.elasticsearch运行
在docker中运行elasticsearch、kibana 一、MacOs 首先需要安装doceker，提供两种方式，选一种方便的就好 1.命令行安装方式 安装命令行 xcode-select --install 安装homebrew /usr/bin/ruby -e "$(curl -fsSL ......
rabbitmq 集群docker玩法
属于一个简单测试玩的，rabbitmq 实际最近几年变化还是挺大的（主要是一些新特性，核心amqp 是一致的） 环境准备 测试一个基于raft 选举的rabbitmq 集群队列 docker-compose version: "3" services: mq: build: ./ container ......
通信方式的分类
通信方式的分类 在了解串口通信之前，需要先对于常见的通信方式有一个基础的认知。 1. 串行、并行通信 串行通信：利用一条传输线将数据一位位地顺序传送 并行通信：利用多条传输线将一个数据的各位同时传送 2. 异步、同步通信 同步通信：信息发送设备与接收设备需要时钟同步，两者间除数据线连接，还需要额外的 ......
2.elasticsearch中的mapping
mapping 顾名思义，代表了映射关系。是文档中字段和数据类型的映射关系 为什么要了解mapping 虽然elasticsearch中已尽有的动态mapping(Dynamic Mapping)，而且新增字段默认也会添加新的mapping，但是毕竟是机器，有时会推算的不对，比如地理位置信息，特殊格 ......