loguru日志
安装elk日志监控系统
下载安装包稳定版本 elasticsearch-7.17.10-linux-x86_64.tar.gz # https://www.elastic.co/downloads/past-releases/elasticsearch-7-17-10 logstash-7.17.10-linux-x86_ ......
mysql 慢查询日志
配置参数 long_query_time 的值(默认是10秒),超过这个值的就会被是为慢查询,后面可以根据 EXPLAIN 来跟踪 默认是关闭的。如果打开超过阈值的会被记录,所以建议在调优的时候才打开这个参数 -- 查看慢查询是否开启 show variables like 'slow_query_ ......
linux 日志文件
目录 一、日志作用 二、日志管理 三、日志分类 四、日志级别 五、日志实验 一、日志作用 1.记录系统具体动作 2.方便阅读日志,解决故障 二、日志管理 管理命令:users、who、w、last、lastb 1.users查询最近三次登录信息 users会显示当前用户有几个登录会话 2.who查看 ......
filebeat 采集k8s容器内日志发送到kafka
##filebeat 采集k8s容器内日志发送到kafka ###背景 我想采集一个pod内,is ti o-proxy的容器 ###部署filebeat Daemonset 以daemonset的方式部署filebeat,通过修改configmap控制filebeat采集日志,可以根据namesp ......
通过网站日志做网络爬虫和恶意访问分析
普通爬虫 分别查看有爬虫标志的访问次数和合计的总页面访问次数 cat www.access.log | grep spider -c cat www.access.log | wc 查看爬虫来ip地址来源 cat www.access.log | grep spider | awk '{print ......
nginx 日志配置
示例 log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_fo ......
日志文件管理
记录系统、程序运行中发生的各种事件 阅读日志,有助于诊断和解决系统故障 1. 分类 内核及系统日志 由系统服务rsyslog统一进行管理,日志格式基本相似 主配置文件/etc/rsyslog.conf 用户日志 记录系统用户登录及退出系统的相关信息 程序日志 由各种应用程序独立管理的日志文件,记录格 ......
记一次数据误删操作通过闪回以及日志挖掘恢复
由于开发人员不小心删除业务表然后想通过我来恢复数据,我第一时间发现由于undo_retention参数只保留15分钟,通过闪回这种方法并不能恢复数据, 然后通过日志挖掘来截取该时间段数据,然后通过创建记录表来保存到记录表里方便查询。通过记录表里的数据来恢复数据。以下命令是一些操作的命令 日志挖掘通过 ......
这么分析大文件日志,以后就不用加班卷了!
有没有熟悉这样的场景: 时间已过十一点,空荡荡的办公室只剩自己孤身一人。陪你伏案忙碌的只有电脑风扇被迫营业的“嗡嗡”声, 窗外的夜正黑得带劲,仿佛巨兽的口吞噬自己的无奈。 天性善良不善言辞的你,容易被人颐指气使,加班对你来说是家常便饭。 作为一名码农,“我到底哪里错了,我需要怎么解决?”是我的座右铭 ......
pymysql模块,logging模块,loguru日志模块
pymysqlpymysql - 断浪狂刀忆年少 - 博客园 (cnblogs.com) 1连接数据库 conn = pymysql.connect()获取连接对象 2获取游标 cursor = conn.cursor() 3使用sql语句 cursor.excute(sql语句) 4获取查询结果 ......
Android Studio学习日志二,Toast用法
首先,创建一个util,在ToastUtil里面调用方法 在里面编写Toast类的代码,方便以后调用 package com.example.appdemo.util; import android.content.Context; import android.widget.Toast; publ ......
Android Studio学习日志一,直接跳转和密码正确跳转
记录一下我跟着手把手教你用Android Studio写一个APP_UP主Superior-Leo 进行app开发小项目 UP主的笔记 首先,在资源文件创建一个文件夹,用来放APP背景图片,按钮图片 一、直接跳转 第一步、声明控件 第二步,找到控件 第三步骤,实现跳转 代码 package com. ......
MySQL日志及分类
日志是数据库的重要组成部分,主要用来记录数据库的运行情况、日常操作和错误信息。 在 MySQL 中,日志可以分为二进制日志、错误日志、通用查询日志和慢查询日志。对于 MySQL 的管理工作而言,这些日志文件是不可缺少的。分析这些日志,可以帮助我们了解 MySQL 数据库的运行情况、日常操作、错误信息 ......
SQL server-收缩数据库和事务日志
SQL server的事务日志增长比较快 delete完数据后空间不会立即释放,导致占用大量磁盘空间 有复制关系的情况下,即便模式改成simple也不能手动清理,可以执行以下命令回收空间 命令可以连续执行,直到达到缩减效果 --截断事务日志 BACKUP LOG databasename TO DI ......
golang的zap日志切割
package internalimport ( "github.com/flipped-aurora/gin-vue-admin/server/global" rotatelogs "github.com/lestrrat-go/file-rotatelogs" "go.uber.org/zap/ ......
yolov5训练栏杆检测模型日志记录
yolov5训练栏杆检测模型日志记录 (wind_2021) H:\PytorchProject\yolov5_train_xinru_2023050901> (wind_2021) H:\PytorchProject\yolov5_train_xinru_2023050901> (wind_202 ......
MySQL(二十二)其他数据库日志(一)通用查询日志和错误日志
MySQL(二十二)其他数据库日志(一)通用查询日志和错误日志 1 MySQL支持的日志 1.1 日志类型 慢查询日志:记录执行时间超过long_query_time的所有查询,方便我们对查询进行优化 通用查询日志:记录所有连接的起始和终止时间,以及连接发送给数据库的所有指令,对复原操作的实际场景、 ......
MySQL(二十二)其他数据库日志(二)bin log二进制日志
MySQL(二十二)其他数据库日志(二)bin log二进制日志 bin log二进制日志 bin log 即 binary log,二进制日志,也叫做变更日志 它记录所有更新数据的DDL和DML语句,但是不包含没有修改数据的语句(如Select、show等),以事件的形式记录保存在二进制文件中 可 ......
单例模型中懒汉模型,饿汉模型,枚举与日志等级
1.单例模型 将构造器私有化,控制创建对象的个数 懒汉模型 时间换空间 符合单线程 多线程不可以 synchronized 同步锁 使单例可以一直用 但效率不行 单例模型一般使用在一台机器 Asynchronized 异步锁 饿汉模型 空间换时间 可以解决安全利用JVM 利用static只初始化一次 ......
MySQL笔记之文件和日志
一、存储文件 1、存放位置 MySQL数据库会在data目录下,以数据库为名,为每一个数据库建立文件夹,用来存储数据库中的表文件数据。 不同的数据库引擎,每个表的扩展名也不一样 ,例如: MyISAM用“.MYD”作为扩展名,Innodb用“.ibd”等。 2、FRM表结构信息文件 无论是哪种存储引 ......
linux定时备份日志文件脚本,重启jar简易脚本
1. 编写脚本文件saveLogs.sh (备份文件到指定位置重命名,然后情况文件继续写入) cp /opt/zcgl/zcgl.log /opt/zcgl/logs/zcgl-`date +%Y%m%d`.log & sleep 2 > zcgl.log 2. 定时脚本crontab 打开设置:c ......
MySQL(十九)MySQL事务日志(一)RedoLog
MySQL(十九)MySQL事务日志(一)RedoLog 事务的四种特性:原子性、一致性、持久性和隔离性都是基于什么机制实现的? 事务的隔离性由锁机制实现 而事务的原子性、一致性和持久性则由事务的 redo 和 undo 日志来实现的 redo log是重做日志,提供再写入操作,恢复提交事务修改 ......
MySQL(十九)MySQL事务日志(二)UndoLog
MySQL(十九)MySQL事务日志(二)UndoLog 1 undo 日志概述 redo log是事务持久性的保障,而undo log则是事务原子性和一致性的保证,如上图,在事务中更新数据的前置操作其实是需要将数据写入到 undo log 方便回滚。 事务需要保证原子性,也就是事务中的操作 ......
日志开发指南
日志规约 【强制】应用中不可直接使用日志系统(Log4j、Logback)中的 API,而应依赖使用日志框架(如SLF4J)中的 API,使用门面模式的日志框架,有利于维护和各个类的日志处理 方式统一。 【强制】日志文件至少保存 15 天,因为有些异常具备以“周”为频次发生的特点。对于当天日志,以 ......
日志记录
使用SKNet在lolv1数据集 epoch=200/home/mmsys/anaconda3/envs/SFNet/bin/python3.8 /media/mmsys/6f1091c9-4ed8-4a10-a03d-2acef144d2e1/SXY/restoration/SFNet_main_ ......
Golang刷题日志--链表部分(更新中)
1.给定一个已排序的链表的头 head , 删除所有重复的元素,使每个元素只出现一次 。返回 已排序的链表 。 1 1 2 3 3 --> 1 2 3 判断如果当前节点val与后继节点val相等,则将后继节点的next赋给当前节点next,若不然,则移动当前节点置下一节点(cur=cur.next) ......
mysql慢查询日志
SQL语句执行的很慢原因是什么? 如果SQL语句只是偶尔执行很慢,可能是执行的时候遇到了锁,也可能是redo log日志写满了,要将redo log中的数据同步到磁盘中去。 如果SQL语句一直都很慢,可能是字段上没有索引或者字段有索引但是没用上索引。 了解慢日志查询吗?统计过慢查询吗? 慢查询一般用 ......
MySQL日志管理
MySQL 日志管理 一 日志分类 | 日志种类 | 作用 | | : | | | 错误日志 | 记录 MySQL 服务器启动、关闭及运行错误等信息 | | 事务日志 | 1、redo log重做日志 2、undo log回滚日志 | | 查询日志 | 记录所有的sql | | 慢查询日志 | 记录 ......
ELK日志收集&&日志收集方案
31. ELK日志收集 日志分析系统 - k8s部署ElasticSearch集群 - 帝都攻城狮 - 博客园 (cnblogs.com) https://blog.csdn.net/miss1181248983/article/details/113773943 31.1 日志收集方式 1.nod ......
SpringBoot添加日志
SpringBoot添加日志 前言 Spring Boot使用Apache Commons日志记录进行所有内部日志记录。Spring Boot的默认配置支持使用Java Util Logging,Log4j2和Logback。 使用这些,可以配置控制台日志记录以及文件日志记录。 如果使用的是Spri ......