集群elasticsearch单机linux
elasticsearch linux 上安装
1、下载安装包，放到服务器指定目录下： 2、解压，到指定文件夹 命令 tar -xzf elasticsearch-8.11.3-linux-x86_64.tar.gz 3、创建用户并授权： sudo useradd es sudo passwd es 用户授权指定目录权限： chown -R es ......
Linux安装MySQL5.7并设置systemd方式管理
1、安装前检查 1）检查linux系统是否安装过mysql # 检查系统中有无安装过mysql，如果有就卸载 rpm -qa|grep mysql rpm -e --nodeps mysql-xxxx # 检查所有mysql对应的文件夹，全部删除 whereis mysql find / -name ......
基于Clangd索引Linux内核源代码，提供和补全
基于Clangd索引Linux内核源代码，提供和补全 适用于Neovim、Vim、VSCode等支持LSP的编辑器。 1 操作示例 1.1 操作环境 操作系统：Ubuntu 20.04 in wsl2 编辑器：VSCode LSP：Clangd 内核版本：longterm 5.15.145 1.2 ......
开源大数据集群部署（一）集群实施规划
作者：櫰木 本次集群规划信息 本次实际生产业务体量存在巨大差异，但集群规划内容相同，因此建议实际生产环境按照按照一定比例扩展即可。 主机操作系统要求 软件信息 参数 配置 8C16G 操作系统版本 CentOS Linux release 7.8.2003 (Core) java版本 java ve ......
K8S集群搭建
K8S各节点环境准备 1 虚拟机操作系统环境准备 参考链接: https://kubernetes.io/zh/docs/setup/production-environment/tools/kubeadm/install-kubeadm/ 2 关闭swap分区 2.1临时关闭 swapoff -a ......
k8s集群证书过期怎么办
记录一次集群更新证书过程，因为集群证书已经更新了，以下只记录操作过程了。 参考：https://blog.csdn.net/Harry_z666/article/details/128015175 1、集群情况 版本：v1.23.6 部署方式：kubeadm部署 由于使用kubeadm部署，证书有效 ......
v4l2(vedio for linux two)
//Video设备又分为主设备和从设备对于Camera来说， 主设备：Camera Host控制器为主设备，负责图像数据的接收和传输， 从设备：从设备为Camera Sensor，一般为I2C接口，可通过从设备控制Camera采集图像的行为，如图像的大小、图像的FPS等。 //V4L2的主设备号是8 ......
清理linux日志/var/log/journal/
1、用echo命令，将空字符串内容重定向到指定文件中 echo "" > system.journal 2、journalctl 命令自动维护文件大小 1）只保留近一周的日志 journalctl --vacuum-time=1w 2）只保留500MB的日志 journalctl --vacuum- ......
Linux之GDB调试(一)
一、C++调试准备工作 调试代码： #include <iostream> int main(int argc, char** argv) { int iTest = 100; const char* str = "this is a test"; std::cout << "iTest is " ......
在Linux中清理Buff/cache
在 Linux 中，缓冲区和缓存是为提高系统性能而保留的，但如果这些缓存过多，可能会消耗大量内存，影响系统的性能。有时候，您可能需要手动清理这些缓存以释放内存。但请注意，通常不建议定期或频繁地这样做，因为这样做可能会对系统性能产生负面影响。 以下是清理 buff/cache 的几种方法： 使用 fr ......
k8s集群搭建1.22.x (centos)
版本 1.22.xx 版本兼容 集群搭建指导 https://www.cnblogs.com/Sunzz/p/15184167.html 【1.18】 https://blog.csdn.net/qq_34629877/article/details/120234616 【1.22】 升级cento ......
重新认识Elasticsearch-一体化矢量搜索引擎
前言 2023 哪个网络词最热？我投“生成式人工智能”一票。过去一年大家都在拥抱大模型，所有的行业都在做自己的大模型。就像冬日里不来件美拉德色系的服饰就会跟不上时代一样。这不前段时间接入JES，用上好久为碰的RestHighLevelClient包。心血来潮再次访问Elasticsearch官网，发 ......
创建单机 PolarDB-X 集群
https://doc.polardbx.com/quickstart/topics/quickstart-pxd-cluster.html #安装 docker curl -fsSL https://get.docker.com -o get-docker.sh sh get-docker.sh ......
ubuntu安装mysql8，debian安装mysql8，linux安装mysql8，x86_64架构，deb包
作者主页：https://www.cnblogs.com/milkbox 参考： 修改大小写：MySQL8.0安装后更改不区分大小写！包你必生效！_mysql8.0不区分大小写-CSDN博客 整个安装过程建议在root权限下进行。需要网络来下载相关依赖，如果你的系统已经存在相关以来，那么就可以离线安 ......
Elasticsearch分片大小设定和集群容量规划
本文以 Elasticsearch 7.9.2 为准。 分片大小 日志类：单个分片不超过 50G 搜索类：单个分片不超过 20G 先估算总数据量，再根据分片大小，确定分片数。 容量规划 容量规划时要考虑的因素： 机器的软硬件配置 单个文档的尺寸，文档总数，索引大小，分片个数，副本个数 文档写入方式（ ......
linux服务器下安装cbc和ipopt求解器【踩坑总结】
安装CBC求解器 CBC求解器是一个C++库，我们可以通过以下命令在Linux系统中进行安装： sudo apt-get install coinor-cbc 对于Windows操作系统，可以从CBC官方网站下载。 安装完成后，我们可以使用CBC求解器来解决线性规划问题。 例如用pyomo求解 fr ......
Arch Linux 更新出现PGP签名未信任，error: *: signature from "*" is unknown trust
更新ArchLinux时出现PGP签名问题： 分析原因是 包含了 archlinux-keyring的更新，导致部分软件包的签名不一致，未信任。 单独更新 archlinux-keyring，再执行更新命令即可解决。 ......
Mysql数据同步至Elasticsearch
方案对比 鉴于Canal是一个基于MySQL二进制日志的高性能数据同步系统， go-mysql-elasticsearch 是一个第三方插件的，虽然都可以同步mysql数据到es，由于es官方文档推荐使用canal工具来同步数据，因此主要将Canal的使用方式提供给用户。 核心概念 名词 解释 my ......
记录下在linux部署大语言模型和聊天服务、简历服务等
1、弄清楚外网、内网的区别 2、宝塔面板的使用。 命令行输入 bt 、 bt default（本质是linux开了个端口服务用于宝塔管理服务、代理服务等） 3、netstat -tuln 查看正在运行的端口。 4、服务都启动之后，用宝塔代理相关端口 ， 使用 ufw 、 iptables、 fire ......
redis 高可用 二 （主从复制、哨兵和集群Cluster）
高可用 分类 主从复制 主从复制是高可用Redis的基础，哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。缺陷：故障恢复无法自动化；写操作无法负载均衡；存储能力受到单机的限制。 哨兵 在主从复制的基础上，哨兵实现了自动化的故障恢 ......
linux根据进程关键搜索字批量结束进程
linux根据进程关键搜索字批量结束进程 ps -ef|grep aaa|grep -v grep|awk '{print "kill -9 " $2}' |sh ......
elasticSearch java API及基本的nested结构使用
1、创建索引：PUT fmmallproductsindex，所有单词要求小写 CreateIndexRequest fmmallProductsIndex = new CreateIndexRequest("fmmallproductsindex"); CreateIndexResponse cr ......
elasticSearch索引模板的基本使用
创建索引模板：所有以fmmall和bar开头的索引将使用如下的模板创建索引 PUT _template/template_1?order=0 { "index_patterns": [ "fmmall*", "bar*" ], "settings": { "number_of_shards": 1 ......
调试分析 Linux 0.00 多任务切换
当执行完 system_interrupt 函数，执行 153 行 iret 时，记录栈的变化情况。 任务0在刚进入system_interrupt函数时（调用中断int 0x80处理程序），栈空间为任务0的内核栈，即krn_stk0。（CS = 0X8, SS = 0x10, ESP = 0xe4 ......
ElasticSearch
基础概念 elasticsearch是一个分布式搜索引擎，主要用于数据的存储、计算、分析； Windows环境下安装es 1、ElasticSearch启动(安装目录bin下) 2、kibana启动（安装目录bin下） 注：默认配置即可连接到本地的ES。 ......
linux 关机方法
虚拟机是虚拟技术的一种，很多用户会在虚拟机上边使用命令来进行自定义操作关机，这样方便快捷，能够有更多的时间处理别的事情，那么还有没有其他更容易操作的poweroff关机命令呢？一起来看下吧。 虚拟机关机命令poweroff方法 一、poweroff 1、poweroff ：关机并关闭电源 2、pow ......
Linux之docker学习
Docker学习笔记 安装Docker 本安装教程参考Docker官方文档，地址如下： https://docs.docker.com/engine/install/centos/ 1.卸载旧版 首先如果系统中已经存在旧的Docker，则先卸载： yum remove docker \ docker ......
redis的主从复制、哨兵、集群
主从复制： 主从复制是高可用Redis的基础，哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。缺陷：故障恢复无法自动化；写操作无法负载均衡；存储能力受到单机的限制。 作用： 数据冗余：主从复制实现了数据的热备份，是持久化之外的一 ......
在Linux环境下安装docker
在Linux环境下安装docker docker desktop和docker engine 在官网下载docker时有两种选择：docker engine 和 docker desktop docker desktop docker desktop是一种一键式安装的应用程序，适用于Mac、Linu ......
Linux下动态依赖库的问题
由于 Linux 默认的查找路径中没有当前文件夹的，所以编译的程序或动态库移植比较麻烦。 查看依赖，rpath等信息 readelf -d path/to/exec 测试依赖库是否能找到 ldd path/to/exec 写rpath patchelf --set-rpath "\$ORIGIN:\ ......