access nginx日志awk
部署高可用radowsgw存储网关，s3cmd实现bucket的管理，Nginx+RGW 的动静分离，基于 prometheus 监控 ceph 集群运行状态
一. 掌握对象存储的特点及使用场景#RadosGW 存储特点 通过对象存储网关将数据存储为对象，每个对象除了包含数据，还包含数据自身的元数据。对象通过 Object ID 来检索，无法通过普通文件系统的挂载方式通过文件路径加文件名称操作来直接访问对象，只能通过 API 来访问，或者第三方客户端（实际 ......
crontab 服务状态查询,日志查询
crontab的日志比较简单，当然也可以将每条 crontab中的任务增加自己的日志，有利于查找执行失败原因。 0 6 * * * //root/script/ss.sh >> /root/for_crontab/mylog.log 2>&1 //把错误输出和标准输出都输出到mylog.log中 l ......
面向chatgpt运维：根据nginx日志输出每个接口的平均响应时间
Crafted by Genie 我 我的nginx日志最后一个字段是request time,怎么对每个url求平均访问时间，并分别列出来 Genie 您可以使用awk命令对日志文件进行处理来计算平均访问时间。 首先，您需要使用以下命令获取每个URL的请求时间: awk '{split($7,ur ......
如何使用awk从后向前来截取字符串？
下面有这样的一个变量： NGINX_INFO:="MjQwODo1YTgwOjoy:22:root:WW9ueW91QDIwMjI=" 如何实现，以冒号为分隔符，截取 22（端口）这个字段？ 可以从开头，截取第2个字段，如果从后面进行截取呢？ 使用下面的方法来实现： 使用NF 来获取最后一个字段,这 ......
docker ：repository docker.io/zookeeper not found: does not exist or no pull access
分析 略 解决 vi /etc/docker/daemon.json { "registry-mirrors" : [ "http://registry.docker-cn.com", "http://docker.mirrors.ustc.edu.cn", "http://hub-mirror.c ......
SpringBoot报错：Error resolving template [index], template might not exist or might not be accessible by any of the configured Template Resolvers
springboot项目正常启动，但是在访问页面的时候报错，错误信息如下： Whitelabel Error PageThis application has no explicit mapping for /error, so you are seeing this as a fallback. ......
nginx监听多个端口
首先知道nginx的配置文件是nginx.config 其次是nginx的配置文件是可以看成一个http请求处理的 然后是nginx的server服务。可以理解为每个服务监听不同的端口，分发不同的连接服务。如果是自己的可以直接删掉初始server ，直接新建自己的server。 worker_pro ......
Windows版的Nginx服务的启动和停止命令重新载入
1.首先保证执行命令的路径，是在Nginx的安装目录的第一层目录下如图1-1 2.启动 start nginx D:\zckj\nginx-1.17.5\nginx-1.17.5>start nginx 3.停止 nginx -s stop/nginx -s quit D:\zckj\nginx-1 ......
ingress-nginx的日志落地
配置Nginx-Ingress 这里将NG的日志落盘，便于处理。 （1）、修改ConfigMap，如下： # Source: ingress-nginx/templates/controller-configmap.yaml apiVersion: v1 kind: ConfigMap metada ......
k8s的 Nginx Ingress 调优
内核参数调优 我们先看看通过内核的哪些参数能够提高Ingress的性能。保证在高并发环境下，发挥Ingress的最大性能。 调大全连接队列的大小 TCP 全连接队列的最大值取决于 somaxconn 和 backlog 之间的最小值，也就是 min(somaxconn, backlog)。在高并发环 ......
nginx配置vue打包npm build的静态页面
nginx 配置vue项目 server { listen 8081; server_name 10.8.8.8; index index.html; root /home/www/crm/vue/dist; #SSL-START SSL相关配置，请勿删除或修改下一行带注释的404规则 #error ......
Redis+Tomcat+Nginx集群实现Session共享，Tomcat Session共享
一、Session共享使用tomcat-cluster-redis-session-manager插件实现 插件地址见：https://github.com/ran-jit/tomcat-cluster-redis-session-manager 该插件支持Tomcat7、Tomcat8、Tomca ......
[shell] 读取多行输出到数组/遍历awk输出的某一行
效果 想要达到的效果为，使用awk切分输出后，遍历每一行的输出。以下以ls -lh命令示例，遍历输出ls -lh命令的第一列输出。实际使用替换ls -lh 演示 1. 存放到数组后遍历数组 第一种方式, 简约但不推荐 https://github.com/koalaman/shellcheck/wi ......
一篇搞定Nginx功能
from:https://mp.weixin.qq.com/s/yF5h7dslESaa3Gt5rE6IbQ 引言 一、性能怪兽-Nginx概念深入浅出 二、Nginx环境搭建 三、Nginx反向代理-负载均衡 四、Nginx动静分离 五、Nginx资源压缩 六、Nginx缓冲区 七、Nginx缓存 ......
AI 学习日志
日期 2022.03.29 我又来生产电子垃圾啦！大致是有一些宏伟的目标，但是能不能坚持下去就不知道了…… 总之先建一篇文章，留坑待填。 具体学哪些方面的内容，以及怎么个学法，往哪些方面去思考问题，主要关注哪些方面的问题…… 这些事情我都还不是很清楚，只有一个模糊而又坚定的目的在牵引着我，我只能不断 ......
MySQL服务器日志
分类 MySQL Server 主要有以下几类日志： | 日志类型 | 作用 | | | | | 错误日志（Error log） | 记录启动、运行、停止 mysqld 时遇到的问题 | | 查询日志（General query log） | 已建立的客户端连接和从客户端收到的语句 | | 二进制日 ......
安装ingress-nginx
基本环境 kubectl get nodes -o wideNAME STATUS ROLES AGE VERSION INTERNAL-IP EXTERNAL-IP OS-IMAGE KERNEL-VERSION CONTAINER-RUNTIMEmaster Ready control-plan ......
第九天（nginx-第三篇--------nginx的相关总结）
1.1、 Nginx Nginx (engine x) 是一个高性能的HTTP和反向代理web服务器，同时也提供了IMAP/POP3/SMTP服务。Nginx是由伊戈尔·赛索耶夫为俄罗斯访问量第二的Rambler.ru站点（俄文：Рамблер）开发的，第一个公开版本0.1.0发布于2004年10 ......
oracle 离线分析其他库的归档日志
oracle数据库是可以离线分析其他库的归档日志的，比如想分析生产库的归档日志，可以将其拿到测试库上来分析，以免影响生产库的性能。 dictory模式：将数据库的数据字典抽取到操作系统的一个文件里，这种方式必须设置UTL_FILE_DIR参数，这个参数是静态参数，修改后必须重启数据库才会生效。使用L ......
局域网机器配置Nginx正向代理访问外网服务
1. 正向代理 1.1 简介 https://blog.csdn.net/wkh___/article/details/113807080?spm=1001.2014.3001.5506 https://www.cnblogs.com/yanjieli/p/15229907.html 1.2 请求逻 ......
[GPT] Nginx+PHP 技术栈 504 Gateway Time-out 解决方案
1. 504 Gateway Time-out 是什么情况？ 504 Gateway Time-out 是一种 HTTP 状态码，表示服务器在作为网关或代理时无法从上游服务器（例如应用程序服务器）接收到请求的响应。 这通常意味着上游服务器在处理请求时花费了太长时间，或者出现了连接问题。 这可能是暂时 ......
图片不存在时，nginx反向代理到其他域名下
图片不存在时，nginx反向代理到其他域名下 location ~ .+\.(jpg|gif|jpeg|png|webp)$ { # proxy_set_header Host $http_host; if (!-e $request_filename) { proxy_pass https://* ......
mysql binlog 几种日志格式的区别？
在MySQL中，二进制日志（binlog）是用于记录数据库操作的一种日志文件，主要用于主从复制、恢复数据等操作。MySQL提供了三种不同的二进制日志格式，分别是 Statement、Row 和 Mixed。它们之间的区别如下： Statement格式：该格式记录SQL语句的原始文本。这意味着在从主库 ......
第四部分：Spdlog日志库的核心组件分析-logger
Spdlog是一个快速且可扩展的C++日志库，它支持多线程和异步日志记录。在本文中，我们将分析Spdlog日志库的核心代码，探究其实现原理和代码结构。 Spdlog的基本架构 上一篇文章介绍了spdlog的五个主要组件，其中最重要是Logger、Sink和Formatter其中，Logger负责日志 ......
The Log-Structured Merge-Tree (LSM-Tree)--日志合并
LSM树是一个基于磁盘的数据结构，主要用于为那些高概率插入和删除的记录提供低成本的索引。LSM使用了一个算法来延迟批处理索引变更，然后类似归并排序的方式串联起一个基于内存的组件和若干基于磁盘的组件上面的所有变更信息。该算法相比于传统的B树访问方式大大减少磁盘臂的移动开销。 ......
mysql8.0设置binlog保存时间，并清除过期日志释放空间
如果你正在使用 MySQL8.0 ，并且在使用物理热备工具，那么 binlog_expire_logs_seconds 可能不会如你预想的那样生效。 binlog_expire_logs_seconds 为了防止 binlog 文件过大导致无可用的磁盘空间，MySQL 提供了一个系统变量用来配置过期 ......
springboot日志收集
logback-spring.xml springboot2.4以后版本：logback-spring.xml的加载要先于application.properties，所以直接通过${参数key}的形式获取是无法获取到application.properties对应参数值的。 <?xml versi ......
八、使用EFK实现各服务日志的收集展示
8.1环境说明 主机 IP地址 备注 lb01 192.168.1.5 LVS+KEEPALIVED负载均衡及高可用 lb02 192.168.1.6 LVS+KEEPALIVED负载均衡及高可用 web01 192.168.1.7 nginx+php提供web服务 web02 192.168.1. ......
Nginx上传文件很慢很慢
文章转载自: https://blog.csdn.net/u014240299/article/details/105695993 收到同事反馈，一个上传apk的接口，传一个180多兆的文件，一直转圈，最终提示上传文件失败 Bug所处背景 带宽为10M（手动😳囧的表情，带宽真给力）的云服务器，额， ......
三、使用NFS+Redis实现nginx服务的文件与会话共享
3.1 环境说明 主机 IP地址 备注 NFS+Redis 192.168.1.16 NFS+Redis 实现文件与会话共享 web01 192.168.1.7 挂载nfs共享 web02 192.168.1.8 挂载nfs共享 web03 192.168.1.9 挂载nfs共享 3.2 安装配置N ......