promtail grafana日志loki
k8s通过sidecar模式收集pod的容器日志至ELK
架构: 已完成的部署1、ES集群及kibana部署 https://blog.51cto.com/yht1990/6080981 2、kafaka+zookeeper集群 https://blog.51cto.com/yht1990/6081518 准备sidecar镜像(filebeat)找一台服 ......
通过日志恢复SQL Server的历史数据
通过日志还原 方案一: 前提条件 1.必须有一个完整的备份,且这个备份必须是在修改、删除数据之前做的。 2.在更新、删除数据之后,做日志备份,该log备份将用于还原之前的数据 建议使用备份数据库进行还原操作,确认无误再对原库进行操作,或同步数据 开始还原操作: 此处使用SQL management界 ......
mysql8.x通过备份文件及binlog日志恢复数据
问题简述 记一次mysql数据库被误删(是整个库被删了)后的还原 前提条件 数据库版本为mysql8.x以上 具有库被删除前的完整备份 数据库开启binlog 还原步骤 第一步:通过完整备份还原被删的库 注意事项:还原后切勿让其他用户连接,操作数据库。待使用binlog日志恢复数据后再对库进行操作, ......
MySQL开启二进制日志
MySQL的二进制日志(Binary Log)是一个记录数据库所有更改的日志文件,用于数据复制和恢复等操作。在MySQL的配置文件my.cnf(或my.ini)中,可以配置二进制日志的相关参数。以下是一些常见的MySQL二进制日志配置项: log-bin:此选项用于启用二进制日志功能。可以在选项后指 ......
docker日志收集docker插件+loki+grafna
实现收集docker容器日志方式: dokcer安装插件,将日志发送到loki,grafna展示日志。 1、安装loki wget https://raw.githubusercontent.com/grafana/loki/v2.9.1/cmd/loki/loki-local-config.yam ......
文件系统和日志分析
文件系统 查看inode号 ls -i /stat +文件名 atime 最后一次查看文件 需要打开文件才会变更 mtime 最近修改文件内容时间 注意(更改完内容之后,ctime也会改变) ctime 最近更改文件元信息的时间 比如改变时间 查看日志 是为了关注里面的内容 相同设备上 inode ......
防止DOS攻击(检测nignx日志若某个IP短时间的PV过大则使用防火墙将其禁掉)
#!/bin/bash time=`date|awk '{print $3"\\\\/"$2"\\\\/"$6}'` awk '$4~/'"${time}"'/{print $0}' access.log |awk '{ip[$1]++}END{for (i in ip)print i,ip[i]} ......
学习进度日志
2023 7.14-9.1 学术: 动手学深度学习,ChatGLM部署使用与微调 9.1-11.8 学术: 玩转 Pytorch,环境配置,需求分析 就业: 一刷《代码随想录》 ......
理解GC日志
输出GC日志 通过阅读GC日志,我们可以了解Java虚拟机内存分配与回收策略。 先来看一个简单的示例。 下面是GC日志: 0.115: [GC (System.gc()) [PSYoungGen: 3020K->600K(38400K)] 3020K->608K(125952K), 0.001229 ......
loadrunner2020日志记录
lr日志分为两个部分 1)vgen试运行产生的日志 2)在controller中执行产生的日志 【Vuser】——【Run Time Settings(双击)】——【Log】 【Controller】——【Run Time Settings(单击)】——【Log】 【Enable logging】启 ......
搭建一个.NetCore控制台程序框架,包含依赖注入/配置/日志等要素
前言# 最近需要开发小工具的场景有点多,上次我用 go 语言开发了一个 hive 导出工具,体验还不错,只是 go 语言的语法实在是喜欢不起来,这次继续试试用 C# 来开发小工具。 这次小工具的功能很简单,数据库数据迁移,不过这不重要,主要是记录一下更适合 .Net Core 宝宝体质的控制台小工具 ......
开发一个现代化的.NetCore控制台程序,包含依赖注入/配置/日志等要素
前言 最近需要开发小工具的场景有点多,上次我用 go 语言开发了一个 hive 导出工具,体验还不错,只是 go 语言的语法实在是喜欢不起来,这次继续试试用 C# 来开发小工具。 这次小工具的功能很简单,数据库数据迁移,不过这不重要,主要是记录一下更适合 .Net Core 宝宝体质的控制台小工具开 ......
CF Round906 vp日志
太菜了只会四个 A 题意:给定一个长度为 \(n\) 的数组 \(a\) ,你可以将他随便重排,问是否能让它满足 \(a_i + a_{i+1}=a_{i+1}+a_{i+1}=.......=a_{n-1}+a_n\) 。 首先如果 \(a\) 中的元素种类超过 \(2\) 个,那么这个序列是不可 ......
x86宕机日志解读1
下面以一个典型的x86服务的宕机日志为例进行解读: [330931.874444] BUG: unable to handle kernel paging request at ffffffffa22a4668 [330931.874532] PGD 3a23067 P4D 3a23067 PUD ......
nfls 11.7 挂分日志
不是,nfls你别太荒谬,天天出黑,这是 NOIP 模拟赛不是 NOI Pro 模拟赛。 T1 一个很明显能看出来的一个匹配过程,考场上没想到可以用两个优先队列来模拟这个匹配过程,贺了个匈牙利二分图匹配上去,但是!!!下面这一段代码记死了,不要用!!! ll tot, h[N]; struct ed ......
记录日志文件 日志文件的内容以Json格式保存到txt文件中
封装一个方法,传不同的参数,记录不同类型的日志文件,并将大的日志内容,以Json的格式,保存值txt日志文件 1.记录操作日志 1 //记录操作日志 2 var KeyWord = "导入->编辑预算"; 3 new LogService(AccountId).CreateBudgetLog(Com ......
查看和分析死锁日志
死锁在系统中可能出现的频率比较高,特别是在生产环境中,对于死锁发生原因的定位比较困难,读懂死锁日志是非常有必要的。下面我们来模拟死锁的产生,然后分析死锁日志。 死锁概念 对于死锁,MySQL官方文档是这样描述的: A deadlock is a situation where different t ......
Grafana Error database is locked
目录🥚 问题描述🍆 问题现象🏰 尝试解决🌲 后续步骤 🥚 问题描述 公司内有多套Prometheus+Grafana环境,只有核心业务环境中出现了failed to build query 'A': [sqlstore.max-retries-reached] retry 1: datab ......
Filebat跨公网传输日志
目录💮 实验背景🌘 实验目的🌖 实验环境🚶 环境准备🚶♀️ logstash(接收端)☸️ filebeat(采集端)🍷 实验一:filebeat output tcp/udp logstash🥀 filebeat(采集端)👩🎨 logstash(接收端)👩🍳 TCP效果 ......
日志结构
https://developer.aliyun.com/article/50671 https://www.cnblogs.com/feipeng8848/p/10329355.html https://www.cnblogs.com/anderslly/archive/2007/03/09/lo ......
nfls 11.6 挂分日志
没想到吧,这个破玩意儿还能有续集。/hsh T1 一个分类讨论,对于第三个类进行分类的时候一直往他的循环节和循环关系去想了,思路就错了/cf,真的第一次遇到这种思路就错的东西/kk。 T2 没想到啊,放了个黑题,谁教你这么出NOIP模拟赛的。 这个题没发现一个重要性质,将一个字符设置为 \(1\), ......
C#系统日志
using System;using System.Collections.Generic;using System.IO;using System.Linq;using System.Text;using System.Threading.Tasks; namespace MyMES{ publi ......
Linux 删除日志命令
日志文件移动 将当前路径下的所有以.log结尾的日志移动到/tmp/logs $ find ./ -name "*.log" |xargs -i mv {} /tmp/logs/ $ mv `find ./ -name "*.log"` /tmp/logs $ find ./ -name "*.lo ......
Winform中使用Log4Net实现日志记录到文件并循环覆盖
场景 log4net https://logging.apache.org/log4net/ The Apache log4net library is a tool to help the programmer output log statements to a variety of outpu ......
Linux 日志管理
rsyslog 介绍 日志(Log)是记录和存储计算机、软件、应用或其他系统的操作和事件的文件或数据流。它们可以为系统管理员、开发人员和最终用户提供详细的背景信息,以帮助他们了解和诊断系统的行为。 rsyslog 是一个开源的日志处理工具,一般用在类Unix系统上,是syslogd 的扩展。它提供了 ......
Filebeat on k8s 日志采集实战操作
目录一、概述二、K8s 集群部署三、ElasticSearch 和 kibana 环境部署1)部署 docker2)部署 docker-compose3)创建网络4)修改 Linux 句柄数和最大线程数5)下载部署包开始部署四、Filebeat on k8s 部署(daemonset)1)安装 he ......
Linux学习日志
Linux学习日志 1、走近Linux系统 1.1、开机登录 开机会启动许多程序。它们在Windows叫做"服务"(service),在Linux就叫做"守护进程"(daemon)。 开机成功后,它会显示一个文本登录界面,这个界面就是我们经常看到的登录界面,在这个登录界面中会提示用户输入用户名,而用 ......
Hadoop-3.3.3分布式集群的文件配置,启动hadoop历史服务和启动日志聚集
一、分布式集群的文件配置 涉及$HADOOP_HOME/etc/hadoop路径下的5个文件 workers、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml 首先修改workers 进入$HADOOP_HOME/etc/hadoop ......
filebeat采集日志存在日志丢失的情况
filebeat搜集的速度跟不上日志打印的速度 问题:filebeat读取k8s container日志,生产到kafka过程中,出现丢数据。如下图实际生产了1w+日志,但只生产了5746条 定位: 因为是EFK流程,首先,需要确定是生产还是消费出现了问题,直接kafka命令行使用另外的消费组消费同 ......