链路 场景 日志mdc

MySQL日志维护与监控脚本

MySQL数据库的管理维护过程中,MySQL错误日志(MySQL Error Log)与MySQL慢查询日志(MySQL Slow Log),一般不会自动清理,也不会轮转/切换,这个跟MySQL的二进制日志(binlog)有所不同,所以如果数据库管理员对其不维护的话,这些日志随着时间的推移以及一些特 ......
脚本 MySQL 日志

用户模板和用户场景

(1)名字:小明 (2)年龄:20 (3)收入:0 (4)代表的用户在市场上的比例和重要性:当代大学生 (5)使用这个软件的典型场景:外出运动 (6)使用本软件/服务的环境 :网络覆盖范围内 (7)知识层次和能力:熟练使用手机 (8)用户的动机、目的和困难:记录行踪、记录运动轨迹 1.背景: (1) ......
用户 场景 模板

flume传输日志文件到hdfs笔记

1、flume官网 https://flume.apache.org/ 2、安装kerberos客户端 由于我在hdfs开启了kerberos认证,所以要先装kerberos客户端: yum install krb5-devel krb5-workstation -y再将kerberos serve ......
文件 笔记 flume 日志 hdfs

【转】汇总项目中遇到的git使用场景

转自https://blog.csdn.net/baidu_27652997/article/details/130728645 文章目录1.gitLab之间迁移(保留提交记录和分支)2.合并多个项目为一个(保留所有提交记录)3.将项目中某个文件夹拆分出来单独使用(保留提交记录)4.分支的单文件合并 ......
场景 项目 git

(转)直击痛点,详解 K8s 日志采集最佳实践

原文:https://developer.aliyun.com/article/749468 导读:上一篇文章主要介绍 Kubernetes 日志输出的一些注意事项,日志输出最终的目的还是做统一的采集和分析。在 Kubernetes 中,日志采集和普通虚拟机的方式有很大不同,相对实现难度和部署代价也 ......
痛点 日志 K8s K8 8s

(转)常见日志收集方案及相关组件

原文:https://www.cnblogs.com/hujinzhong/p/15005523.html 一、常见日志收集方案 1.1、EFK ​ 在Kubernetes集群上运行多个服务和应用程序时,日志收集系统可以帮助你快速分类和分析由Pod生成的大量日志数据。Kubernetes中比较流行的 ......
组件 常见 方案 日志

API全场景零码测试机器人,华为云发布ATGen in CodeArts TestPlan

摘要:华为云ATGen现开放对外邀测,欢迎预约。 本文分享自华为云社区《API全场景零码测试机器人,华为云发布ATGen in CodeArts TestPlan》,作者:华为云头条 。 众所周知,软件服务及组件之间的交互主要依赖大量的API接口。 以华为云300多个商用云服务为例,平均每个服务含5 ......
机器人 CodeArts TestPlan 场景 机器

mysql日志

# mysql三大日志 ## redo log **redo组成**:表空间号+数据页号+偏移量+修改数据长度+具体修改的数据 `redo log` 它是物理日志,记录内容是“**在某个数据页上做了什么修改**”,属于 `InnoDB` 存储引擎特有。 mysql的数据是以页为单位的,当我们查询数据 ......
mysql 日志

Linux 日志收集器:syslog,syslog-ng,rsyslog

### 一 参考:https://www.cnblogs.com/zhaoyong631/p/14441090.html 基本上,它们都是相同,它们都允许在中央存储库中记录来自不同类型系统的数据。 但是它们是三个不同的项目,每个项目都试图通过更多的可靠性和功能性来改进前一个项目。 ### 二 参考: ......
syslog syslog-ng rsyslog Linux 日志

从飞书妙记秒开率提升,看火山引擎A/B测试在研发场景的应用

作者:DataTester 用户体验是决定互联网产品能否长久生存的关键,每一个基于产品功能、使用和外观的微小体验,都将极大地影响用户留存和满意度。 对于企业协作平台飞书而言,用户体验旅程从打开产品页面的一瞬间就已开始,这里有一个十分重要的指标——页面秒开率,秒开率是指页面在一秒之内打开的比率。飞书为 ......
火山 场景 引擎

DataLeap的全链路智能监控报警实践(一):常见问题

随着字节跳动业务的快速发展,大数据开发场景下需要运维管理的任务越来越多,然而普通的监控系统只支持配置相应任务的监控规则,已经不能完全满足当前需求,在日常运维中开发者经常会面临以下几个问题: 任务多,依赖关系复杂:很难查找到重要任务的所有上游任务并进行监控。如果监控所有任务,又会产生很多无用报警,导致 ......

[笔记]计算机网络_数据链路层_数据链路层概述

大的要来力(悲) 数据链路层是历年考试重点,要求在了解数据链路层基本概念的基础上,重点掌握滑动窗口机制、三种可靠传输协议、各种MAC协议、HDLC协议、PPP协议,特别是CSMA/CD协议和以太网帧格式,以及局域网的争用期和最小帧长的概念、二进制指数退避算法 等等各种贵物,此外中继器、网卡、集线器、 ......
链路 数据 计算机网络 笔记

浅谈mysql索引类型(normal、unique、full textl) 的区别和使用场景

mysql索引类型 mysql索引类型normal,unique,full text的区别是什么? normal:表示普通索引 unique:表示唯一的,不允许重复的索引,如果该字段信息保证不会重复例如身份证号用作索引时,可设置为unique full textl: 表示 全文搜索的索引。 FULL ......
索引 场景 类型 normal unique

自定义logger写入日志到kafka中

# 1.引入开源组件logback-kafka-appender ```xml com.github.danielwegener logback-kafka-appender 0.2.0-RC2 ch.qos.logback logback-classic ``` # 2.logback-sprin ......
logger kafka 日志

基于 log4j2 插件实现统一日志脱敏,性能远超正则替换

# 前言 [金融用户敏感数据如何优雅地实现脱敏?](https://mp.weixin.qq.com/s/ljChFiNLzV6GLaUDjehA0Q) [日志脱敏之后,无法根据信息快速定位怎么办?](https://mp.weixin.qq.com/s/tZqOH_8QTKrD1oaclNoewg ......
正则 插件 性能 log4j2 日志

day09-SpringCloud Sleuth+Zipkin-链路追踪

# SpringCloud Sleuth+Zipkin-链路追踪 官网:[spring-cloud/spring-cloud-sleuth: Distributed tracing for spring cloud (github.com)](https://github.com/spring-cl ......
链路 SpringCloud Sleuth Zipkin day

Spring Web 日志记录切面

# Spring Web 日志记录切面 应用: 在我们进行 rest 接口编写时需要对该接口的耗时、参数、请求路径、返回值进行对应的记录 ## 日志注解 把日志封装成注解的形式可以更好的供使用者使用,同时也利于解耦合 - 代码 ```java @Target({ElementType.TYPE, E ......
切面 Spring 日志 Web

计算机网络-----数据链路层

《数据链路层的几个共同问题》 《差错检测》 《点对点协议PPP》 《解决!ppp中的透明传输问题》 在PPP协议中帧的标志字段(表示一个帧的开始或结束)为0x7E(01111110) 转义字符为0x7D(01111101) 方法一:字节填充 ,适合于异步传输时 (1)数据字段遇到标志字段的编码则将0 ......
链路 计算机网络 数据

异步日志登录

# 异步日志登录 > 项目亮点 : 放在公司的通用组件库中: 日志记录组件库 - 系统的用户操作日志记录【解耦合】 自定义注解 + AOP + 异步多线程/MQ + 数据模型设计 + 设计模式【单例模式+工厂模式】 - 效果: - 开发者只需要在业务方法上,添加一个注解 @Log 就可以实现执行这个 ......
日志

【Redis】Redis 常见数据类型和应用场景

1 前言 我们都知道 Redis 提供了丰富的数据类型,常见的有五种:String(字符串),Hash(哈希),List(列表),Set(集合)、Zset(有序集合)。 随着 Redis 版本的更新,后面又支持了四种数据类型: BitMap(2.2 版新增)、HyperLogLog(2.8 版新增) ......
Redis 场景 常见 类型 数据

Day01学习日志

Day01学习日志 Markdown的一些使用方法 一.标题 想要打出标题,先输#,然后按一下空格 ,就可以输入标题内容了,回车即可看见写好的标题。 输入一个#就是一级标题,输入两个#就是二级标题,以此类推。 二.字体 需要字体加粗,可以在该字段两端加上** 需要字体斜体 ,可以在该字段两端加上* ......
日志 Day 01

使用Loki收集监控linux日志

简介 Loki 是受Prometheus启发的水平可扩展、高可用、多租户日志聚合系统。它的设计非常具有成本效益且易于操作。它不索引日志的内容,而是索引每个日志流的一组标签。 系统架构 1、Promtail收集并将日志发送给Loki的 Distributor 组件 2、Distributor会对接收到 ......
linux 日志 Loki

自动化测试怎么用?自动化测试应用场景

随着软件项目越来越复杂,传统的手动测试已经无法满足质量需求和时间效率。因此,自动化测试成为了越来越多项目的必要选择。 自动化测试是指通过编写脚本或使用工具,将测试用例自动运行、自动执行和自动检查结果,以提高测试效率、降低测试成本和人为误差。这种方法比传统的手动测试更为准确、快捷、方便和可靠。 自动化 ......
场景

使用定时任务+脚本方式对nginx进行日志切分

使用定时任务+脚本方式对nginx进行日志切分 nginx路径:/home/nf/nginx nginx日志路径:/home/nf/nginx/logs 切分目标文件:access.log error.log 创建脚本: 1 vim /home/nf/cut_nginx_log.sh 1 #!/bi ......
脚本 任务 方式 nginx 日志

go 实现ringbuffer以及ringbuffer使用场景介绍

> ringbuffer因为它能复用缓冲空间,通常用于网络通信连接的读写,虽然市面上已经有了go写的诸多版本的ringbuffer组件,虽然诸多版本,实现ringbuffer的核心逻辑却是不变的。但发现其内部提供的方法并不能满足我当下的需求,所以还是自己造一个吧。 源码已经上传到github ``` ......
ringbuffer 场景 go