快照elasticsearch备份
KingbaseES V8R6备份恢复系列之 -- system-Id不匹配备份故障
KingbaseES V8R6备份恢复案例之 system-Id不匹配备份故障 案例说明： 在KingbaseES V8R6执行备份时，在sys_log日志中出现system-id不一致的故障并伴随有归档失败，故障如下图所示： 适用版本： KingbaseES V8R6 一、问题分析 1、查看当 ......
使用java restclient连接elasticsearch
java连接es方式有transport、rest client、java client方式。官方最新标的transport和rest client方式都已经过时了，这里用的es7 还是以rest client方式进行连接测试。java client 是es7.15之后推出的。下面开始使用High ......
EasyPlayer播放H.265视频，播放器快照时间显示的问题优化
EasyPlayer属于高可靠、高可用、高稳定性的流媒体播放器。为了满足用户的多样化需求，我们也基于EasyPlayer推出了多种版本，包括EasyPlayer-RTSP、EasyPlayer.js、EasyPlayerPro等，EasyPlayer还能支持网页实时视频录像以及在iOS上实现低延时的... ......
linux定时备份日志文件脚本，重启jar简易脚本
1. 编写脚本文件saveLogs.sh （备份文件到指定位置重命名，然后情况文件继续写入） cp /opt/zcgl/zcgl.log /opt/zcgl/logs/zcgl-`date +%Y%m%d`.log & sleep 2 > zcgl.log 2. 定时脚本crontab 打开设置：c ......
Elasticsearch在linux服务器部署后，java项目启动报错，windows服务器正常运行，如何避坑？
1、问题描述 之前在windows服务器上部署了java项目（springboot）,ES安装版本7.13.1，正常运行。后因特殊要求迁移到linux服务器上，按照windows服务器版本依然安装7.13.1的ES，启动java项目报错，错误信息如下： org.springframework.bea ......
windows 导出备份 WiFi 密码
Wi-Fi-code.bat @echo off for /f "skip=9 tokens=1,2 delims=:" %%i in ('netsh wlan show profiles') do @echo %%j | findstr -i -v echo | netsh wlan show p ......
SQL Server数据库判断最近一次的备份执行结果
1 麻烦的地方 在SQL Server的官方文档里面可以看到备份和还原的表，但是这些表里面只能找到备份成功的相关信息，无法找到备份失败的记录，比如msdb.dbo.backupset。对于一些监控系统未监控作业的情况下，想要监控数据库备份任务执行失败而触发告警规则，有些麻烦。 但是SQL serve ......
ElasticSearch中文分词和模糊查询
前言： ElasticSearch是一个一个分布式的实时文档存储，每一个字段都可以被索引与搜索，并且能支持PB级别的结构化或者非结构化数据。早期我们应用的全局搜索是简单的SQL模糊查询，为了分担数据库压力所以用了ES，选择他的原因除了以上几点外，还有其提供的API方式简单，于任何对接的编程语言都 ......
MySQL备份与恢复
MySQL备份与恢复 一 数据备份介绍 1.1 为何要备份 在生产环境中我们数据库可能会遭遇各种各样的不测从而导致数据丢失, 大概分为以下几种. 硬件故障 软件故障 自然灾害 黑客攻击 误操作 (占比最大) 须知在生产环境中，服务器的硬件坏了可以维修或者换新，软件崩溃可以修复或重新安装, 但是如果数 ......
elasticsearch 集群+skywalking 集群 搭建
###elasticsearch集群部署#### elasticsearch 包下载地址：https://www.elastic.co/downloads/past-releases/elasticsearch-7-14-0 前提：elasticsearch集群 只能用普通用户启动，root账号启动 ......
【9种】ElasticSearch分词器详解，一文get！！！| 博学谷狂野架构师
ElasticSearch 分词器 作者: 博学谷狂野架构师 GitHub：GitHub地址 （有我精心准备的130本电子书PDF） 只分享干货、不吹水，让我们一起加油！😄 概述 分词器的主要作用将用户输入的一段文本，按照一定逻辑，分析成多个词语的一种工具 什么是分词器 顾名思义，文本分析就是把全 ......
容器操作、应用部署、mysql 部署、redis、nginx、迁移与备份、Dockerfile
1 容器操作 # 启动容器 docker start 容器id # 停止容器 docker stop 容器id # 文件拷贝 # 容器的文件copy到宿主机上（不是在容器内执行） docker cp 容器名称:容器目录 需要拷贝的文件或目录 docker cp 20fd8:/home/lqz.txt ......
Elasticsearch介绍
. . 参考老刘博客 https://www.cnblogs.com/liuqingzheng/p/16002298.html . . 产生背景 # 1.1 大规模数据如何检索 如：当系统数据量上了10亿、100亿条的时候，我们在做系统架构的时候通常会从以下角度去考虑问题： 1）用什么数据库好？(m ......
备份还原ETCD
ETCD定期备份 1、查看ETCD状态 ETCDCTL_API=3 /opt/etcd/bin/etcdctl \--cacert=/opt/etcd/ssl/ca.pem \--cert=/opt/etcd/ssl/server.pem \--key=/opt/etcd/ssl/server-ke ......
linux 下安装和使用Elasticsearch8+php的操作
首先安装 Elasticsearch8版本不需要jdk环境，就是JVAV的环境，他本身的压缩文件里就包含了固定的jdk 去官网 1、下载 Elasticsearch 的官方地址： https://www.elastic.co/cn/ 下载地址：https://www.elastic.co/cn/do ......
elasticsearch基本操作
es基本操作 索引（index）操作 创建索引 语法：PUT /[index] mappings配置索引中包含的字段信息 PUT test { "settings": { #分片数量 "number_of_shards": 1, #副本数量 "number_of_replicas": 1 }, "m ......
python操作elasticsearch 记录
一、 环境 Elasticsearch5.x， python3.6， 注意Elasticsearch不同版本的区别,比如以下几条： _id 字段变为 id 字段：在 Elasticsearch 5 中，文档的唯一标识符使用 _id 字段。而在 Elasticsearch 6 和 7 中，唯一标识符改 ......
MySQL备份命令帮助手册
借助于 mysqldump 命令可以进行数据库的备份。 用法： mysqldump [OPTIONS] database [tables] 或：mysqldump [OPTIONS] --databases [OPTIONS] DB1 [DB2 DB3...] 或：mysqldump [OPTION ......
rpc介绍、python实现rpc、rabbitmq实现rpc、远程链接linux开发、Elasticsearch介绍
#to c #to b # Linux 基础 # 1984年，微软发布了第一个操作系统-->MS-DOS -1980年，西雅图电脑产品公司（Seattle Computer Products）的一名24岁的程序员蒂姆·帕特森（Tim Paterson）花费了四个月时间编写出了86-DOS操作系统 - ......
Elasticsearch模糊查询
Elasticsearch模糊查询 ES模糊查询共有三种： 1.match 分词匹配查询和match_phrase短语查询 Elasticsearch的match_phrase短语查询跟match的区别就是，关键词作为一个整体进行搜索，而不是拆分成一个个关键词。 当匹配对象为中文时，建议使用： Ma ......
canal数据库数据备份时，不同步删除分区动作。
场景： 我们有一大批业务数据，为减少数据库压力和提高使用效率，需要 周期性的 清理历史 分区数据。但是这些数据并不是代表不要了。需要在另一个地方保存 传统数据库的主从复制功能，主要强调的是可以互为备份，强调高可用和可读写分离。但是在我们这个场景下并不适用。该场景下主要是用来数据保存和偶尔的”回访“。 ......
解密Elasticsearch：深入探究这款搜索和分析引擎
最近使用Elasticsearch实现画像系统，实现的dmp的数据中台能力。同时调研了竞品的架构选型。以及重温了redis原理等。特此做一次es的总结和回顾。网上没看到有人用Elasticsearch来完成画像的。我来做第一次尝试。 ......
elasticsearch集群及kibana安装
系统配置 创建一个用户elastic，不能使用root用户启动 配置该用户环境变量 ,用户home目录 .bash_profile文件 #配置ES_JAVA_HOME使用es自带jdk export ES_JAVA_HOME=/data/es/elasticsearch/jdk #修改最大文件句柄数 ......
windowds下备份MySQL(mysqldump)
mytest.bat文件内容如下 @echo off set backup_date=%date:~0,4%%date:~5,2%%date:~8,2% set db_name=db_test01 db_test02 db_test03 for %%i in (%db_name%) do (mysq ......
elasticsearch7.13.4（7.X版本）使用RealtimeSignalProcessor进行删除时，索引_doc文档不会同步删除的解决办法
环境 django==3.8.18 elasticsearch==7.13.4 drf-haystack==1.8.11 django-haystack==3.2.1 原因 django-haystack如果没有指定HAYSTACK_IDENTIFIER_METHOD，默认使用<app.label> ......
mysql8备份恢复
rpm -ivh https://repo.percona.com/yum/release/7/RPMS/x86_64/qpress-11-1.el7.x86_64.rpm 1、解压成流文件 xbstream -x <backup-2022-07-29-13.xbstream -C /data/ba ......
Windows环境安装Elasticsearch和Kibana
1 Elasticsearch 1.1 下载 Elasticsearch 高版本内置jdk，无需使用系统安装的java 官网下载：https://www.elastic.co/cn/downloads/elasticsearch#ga-release 1.2 解压并添加环境变量 解压后，进入bin ......
Docker 构建 elasticsearch + kibana
elasticsearch 环境准备 修改系统配置 cat >> /etc/sysctl.conf <<-'EOF' net.ipv4.ip_forward=1 vm.max_map_count=655360 EOF 重新加载配置 sysctl -p && systemctl restart net ......
Elasticsearch专题精讲——Installing Elasticsearch ——Install ECK using the Helm chart
Install ECK using the Helm chart Starting from ECK 1.3.0, a Helm chart is available to install ECK. It is available from the Elastic Helm repository a ......
Elasticsearch专题精讲——Installing Elasticsearch——Elastic Cloud on Kubernetes（ECK）
Installing Elasticsearch —— Elastic Cloud on Kubernetes（ECK） https://www.elastic.co/guide/en/cloud-on-k8s/current/k8s_supported_versions.html 一、Suppor ......