链路 场景 日志mdc
filebeat 采集k8s容器内日志发送到kafka
##filebeat 采集k8s容器内日志发送到kafka ###背景 我想采集一个pod内，is ti o-proxy的容器 ###部署filebeat Daemonset 以daemonset的方式部署filebeat，通过修改configmap控制filebeat采集日志，可以根据namesp ......
通过网站日志做网络爬虫和恶意访问分析
普通爬虫 分别查看有爬虫标志的访问次数和合计的总页面访问次数 cat www.access.log | grep spider -c cat www.access.log | wc 查看爬虫来ip地址来源 cat www.access.log | grep spider | awk '{print ......
nginx 日志配置
示例 log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_fo ......
日志文件管理
记录系统、程序运行中发生的各种事件 阅读日志，有助于诊断和解决系统故障 1. 分类 内核及系统日志 由系统服务rsyslog统一进行管理，日志格式基本相似 主配置文件/etc/rsyslog.conf 用户日志 记录系统用户登录及退出系统的相关信息 程序日志 由各种应用程序独立管理的日志文件，记录格 ......
【示例】性能场景设计
参考 https://www.cnblogs.com/uncleyong/p/15475614.html 环境 为了演示简单，这里使用的是非微服务架构，思路是通用的 单场景 重点是目标、加压方式等 混合场景（容量场景） 重点是容量目标、单业务目标、业务比例、加压方式等 稳定性场景 重点是目标业务量、 ......
记一次数据误删操作通过闪回以及日志挖掘恢复
由于开发人员不小心删除业务表然后想通过我来恢复数据，我第一时间发现由于undo_retention参数只保留15分钟，通过闪回这种方法并不能恢复数据， 然后通过日志挖掘来截取该时间段数据，然后通过创建记录表来保存到记录表里方便查询。通过记录表里的数据来恢复数据。以下命令是一些操作的命令 日志挖掘通过 ......
这么分析大文件日志，以后就不用加班卷了！
有没有熟悉这样的场景： 时间已过十一点，空荡荡的办公室只剩自己孤身一人。陪你伏案忙碌的只有电脑风扇被迫营业的“嗡嗡”声， 窗外的夜正黑得带劲，仿佛巨兽的口吞噬自己的无奈。 天性善良不善言辞的你，容易被人颐指气使，加班对你来说是家常便饭。 作为一名码农，“我到底哪里错了，我需要怎么解决？”是我的座右铭 ......
pymysql模块，logging模块，loguru日志模块
pymysqlpymysql - 断浪狂刀忆年少 - 博客园 (cnblogs.com) 1连接数据库 conn = pymysql.connect()获取连接对象 2获取游标 cursor = conn.cursor() 3使用sql语句 cursor.excute(sql语句) 4获取查询结果 ......
Android Studio学习日志二，Toast用法
首先，创建一个util，在ToastUtil里面调用方法 在里面编写Toast类的代码，方便以后调用 package com.example.appdemo.util; import android.content.Context; import android.widget.Toast; publ ......
Android Studio学习日志一，直接跳转和密码正确跳转
记录一下我跟着手把手教你用Android Studio写一个APP_UP主Superior-Leo 进行app开发小项目 UP主的笔记 首先，在资源文件创建一个文件夹，用来放APP背景图片，按钮图片 一、直接跳转 第一步、声明控件 第二步，找到控件 第三步骤，实现跳转 代码 package com. ......
Xcode常用环境变量与常见使用场景
在Xcode的工程配置中，与路径相关的都是使用环境变量，这样可以避免使用决定路径时项目移植性差的问题。 Xcode常用宏 __FILE__ 当前文件所在目录 __DATE__ 编译日期的字符串,格式为“mm dd yyyy”（例如：“Sep 16 2015”） __FUNCTION__ 当前函数名称 ......
ThottleStop 软件的应用场景
ThrottleStop 是一个小型应用程序，旨在监视并纠正许多笔记本电脑上正在使用的三种主要类型的 CPU 节流。 ThrottleStop的左侧包含各种选项，可用于绕过CPU节流，右侧是一个监视面板，显示您CPU上每个线程的当前状态。 有些笔记本电脑使用时钟调制和乘数降低来降低计算机的性能和功耗 ......
SAP Fiori Tools 里 proxy 中间件的使用场景介绍
使用 proxy 中间件可以让开发人员通过配置的方式连接不同的后台系统，或者是切换不同的 SAP UI5 版本。 下面是一个典型的 ui5.yaml 里的 proxy 配置文件的例子： - name: fiori-tools-proxy afterMiddleware: compression co ......
MySQL日志及分类
日志是数据库的重要组成部分，主要用来记录数据库的运行情况、日常操作和错误信息。 在 MySQL 中，日志可以分为二进制日志、错误日志、通用查询日志和慢查询日志。对于 MySQL 的管理工作而言，这些日志文件是不可缺少的。分析这些日志，可以帮助我们了解 MySQL 数据库的运行情况、日常操作、错误信息 ......
SQL server-收缩数据库和事务日志
SQL server的事务日志增长比较快 delete完数据后空间不会立即释放，导致占用大量磁盘空间 有复制关系的情况下，即便模式改成simple也不能手动清理，可以执行以下命令回收空间 命令可以连续执行，直到达到缩减效果 --截断事务日志 BACKUP LOG databasename TO DI ......
文件系统类型基本介绍以及NTFS,exFAT,FAT32,XFS和EXT4文件系统适用场景(转载)
windows上常见的exFAT,NTFS,FAT32 区别 NTFS：最早出现在windowsNT的日志文件系统，有文件加密（权限管理）、磁盘文件压缩（节省磁盘空间）、目录索引（方便快速查找）、支持长文件名（255个字符）、磁盘预警、大容量（根据簇的不同最大容量可以达到16~256TB，但存储文件 ......
C++11之decltype类型推导（使用场景、推导四规则、cv限定符）
系列文章C++11之正则表达式（regex_match、regex_search、regex_replace） C++11之线程库（Thread、Mutex、atomic、lock_guard、同步） C++11之智能指针（unique_ptr、shared_ptr、weak_ptr、auto_pt ......
WM_大促之前的全链路压测监控篇（下）后面包含skywalking 细节 一般有用 看1
大促之前全链路压监控篇 1. skywalking服务监控 1.1 skywalking简介 Skywalking 是一个APM系统，即应用性能监控系统，为微服务架构和云原生架构系统设计 它通过探针自动收集所需的指标，并进行分布式追踪，通过这些调用链路以及指标，Skywalking APM会感知应用 ......
golang的zap日志切割
package internalimport ( "github.com/flipped-aurora/gin-vue-admin/server/global" rotatelogs "github.com/lestrrat-go/file-rotatelogs" "go.uber.org/zap/ ......
yolov5训练栏杆检测模型日志记录
yolov5训练栏杆检测模型日志记录 (wind_2021) H:\PytorchProject\yolov5_train_xinru_2023050901> (wind_2021) H:\PytorchProject\yolov5_train_xinru_2023050901> (wind_202 ......
MySQL（二十二）其他数据库日志（一）通用查询日志和错误日志
MySQL（二十二）其他数据库日志（一）通用查询日志和错误日志 1 MySQL支持的日志 1.1 日志类型 慢查询日志：记录执行时间超过long_query_time的所有查询，方便我们对查询进行优化 通用查询日志：记录所有连接的起始和终止时间，以及连接发送给数据库的所有指令，对复原操作的实际场景、 ......
MySQL（二十二）其他数据库日志（二）bin log二进制日志
MySQL（二十二）其他数据库日志（二）bin log二进制日志 bin log二进制日志 bin log 即 binary log，二进制日志，也叫做变更日志 它记录所有更新数据的DDL和DML语句，但是不包含没有修改数据的语句（如Select、show等），以事件的形式记录保存在二进制文件中 可 ......
单例模型中懒汉模型，饿汉模型，枚举与日志等级
1.单例模型 将构造器私有化，控制创建对象的个数 懒汉模型 时间换空间 符合单线程 多线程不可以 synchronized 同步锁 使单例可以一直用 但效率不行 单例模型一般使用在一台机器 Asynchronized 异步锁 饿汉模型 空间换时间 可以解决安全利用JVM 利用static只初始化一次 ......
浅析城市一网统管形势下的智慧城管系统场景应用
平台可对车辆抓拍摄像机采集的车辆数据进行记录并展示，可按照每天、车牌号、车辆类型等进行检索查看，实现工地三车监管，即渣土车、搅拌车、运料车，进而实现车辆的动态记录。 ......
AI智慧安监：打电话/玩手机智能检测算法的场景应用
TSINGSEE可提供多种成熟AI算法及算法定制服务，火焰识别、抽烟识别、反光衣识别、人脸识别、未戴口罩识别、疲劳驾驶检测、越界检测等，覆盖智能城市、智慧安监、智慧建筑、智慧农业等行业，算法具备高精度、高性价比、高适配性等特点。感兴趣的用户可以前往演示平台进行体验。 ......
MySQL笔记之文件和日志
一、存储文件 1、存放位置 MySQL数据库会在data目录下，以数据库为名，为每一个数据库建立文件夹，用来存储数据库中的表文件数据。 不同的数据库引擎，每个表的扩展名也不一样 ，例如： MyISAM用“.MYD”作为扩展名，Innodb用“.ibd”等。 2、FRM表结构信息文件 无论是哪种存储引 ......
linux定时备份日志文件脚本，重启jar简易脚本
1. 编写脚本文件saveLogs.sh （备份文件到指定位置重命名，然后情况文件继续写入） cp /opt/zcgl/zcgl.log /opt/zcgl/logs/zcgl-`date +%Y%m%d`.log & sleep 2 > zcgl.log 2. 定时脚本crontab 打开设置：c ......
PG系、Oracle、MySQL数据库在特定场景下结果差异分析
PG系、Oracle、MySQL数据库在特定场景下结果差异分析 作者：余从佳更新时间：2022-07-01 10:52人气值：416 本文主要介绍以PolarDB O引擎、ADB PG为代表的PG系数据库在某种特定事务场景下，其事务结果与Oracle、MySQL不同的现象，并分析该现象出现的原因。 ......
MySQL（十九）MySQL事务日志（一）RedoLog
MySQL（十九）MySQL事务日志（一）RedoLog 事务的四种特性：原子性、一致性、持久性和隔离性都是基于什么机制实现的？ 事务的隔离性由锁机制实现 而事务的原子性、一致性和持久性则由事务的 redo 和 undo 日志来实现的 redo log是重做日志，提供再写入操作，恢复提交事务修改 ......
MySQL（十九）MySQL事务日志（二）UndoLog
MySQL（十九）MySQL事务日志（二）UndoLog 1 undo 日志概述 redo log是事务持久性的保障，而undo log则是事务原子性和一致性的保证，如上图，在事务中更新数据的前置操作其实是需要将数据写入到 undo log 方便回滚。 事务需要保证原子性，也就是事务中的操作 ......