机制serilog vnext日志
Util应用框架基础(六) - 日志记录(一) - 正文
本文介绍Util应用框架如何记录日志. 日志记录共分4篇,本文是正文,后续还有3篇分别介绍写入不同日志接收器的安装和配置方法. 概述 日志记录对于了解系统执行情况非常重要. Asp.Net Core 抽象了日志基础架构,支持使用日志提供程序进行扩展,提供控制台日志等简单实现. Serilog 是 . ......
logback日志框架
logback 是 springboot默认自带的日志框架。只要引入springboot依赖即可使用。具体的 配置(输出格式，存储位置，级别等)可通过 logback.xml(放在 resource 下)进行配置 logback.xml ` <!-- Console 输出设置 --> <append ......
轮询机制是什么意思（通俗理解轮询）
轮询，英文polling。 轮询是按照某种算法进行顺序触发，轮询时会保存当前执行后的索引，以便于下次执行时可以拿到开始索引位置，以达到负载均衡的目的。（表述不是太明确，望指正） 轮流则是常规意义上的有顺序排列，而轮询则是按照某种算法进行排列。 案例供思考 1、 一艘船漏水了，上面20个人，但是只有一 ......
Android深入学习之观察者模式与ViewModel的实现机制
1.观察者模式 Observer Pattern Define a one-to-many dependency between objects so that when one object changes state, all its dependents are notified and up ......
Spring Gateway 同时拦截输入输出做日志操作
Spring Gateway 同时拦截输入输出做日志操作,包括request body, 和response body 主要靠代理模式，参考 https://stackoverflow.com/questions/47182961/copy-of-the-request-response-body- ......
日志系统搭建
1.定义docker-compose version: '3' services: elasticsearch: image: elasticsearch:7.6.2 container_name: elasticsearch privileged: true user: root environm ......
复制集机制及原理
复制集的作用 数据分发：将数据从一个区域复制到另一个区域 读写分离：读写折分到不同的结点 异地灾备：中心结点故障时自动转移到灾备结点 典型复制集结构 由3个及以上据有投票权的结算构成 一个主结点，接受数据写入及进行投票 二个及以上从节点，从主结点读取数据及进行投票 不推荐使用2个数据结点+1个投票结 ......
当前大数据时代的一个流式日志采集工具——Flume
1.什么是流式日志？ 大数据时代的数据大概的说可以分为流式的data以及批式的data 什么意思呢？ 顾名思义就是，对data进行处理的方式不一样，流式就是像流水一样，不断流入，它是每时每刻都有的，实时的都需要进行收集然后处理； 反观批式data，它是一批一批的来，等到收集到一批（达到某个阈值）da ......
Python：logging日志模块
Python：logging日志模块 1、logging日志的介绍 ，在现实生活中，记录日志非常重要，比如:银行转账时会有转账记录；飞机飞行过程中，会有个黑盒子（飞行数据记录器）记录着飞机的飞行过程，那在咱们python程序中想要记录程序在运行时所产生的日志信息，怎么做呢? 可以使用 logging ......
python的垃圾回收机制
python解释器在执行到定义变量的语法时，会申请内存空间来存放变量的值，而内存的容量是有限的，这就涉及到变量值所占用内存空间的回收问题，当一个变量值没有用了（垃圾）就应该将其占用的内存回收 从逻辑层面分析，定义变量将变量值存起来的目的是为了以后取出来使用，而取得变量值需要通过其绑定的直接引用（如x ......
MySQL学习(14)redo日志
前言 InnoDB存储引擎以页为单位从磁盘中加载到内存中，进行数据的管理。我们进行增删改查操作本质上是访问页面，其中包括读页面、写页面、创建新页面等操作。在访问页面之前，需要将页从磁盘中加载到Buffer Pool中才可以访问。在Buffer Pool中修改了数据后，会加入到flush链表中，但是f ......
Kubernetes日志采集Sidecar模式介绍
Kubernetes（K8S）作为CNCF（cloud native computing foundation）的一个核心项目，背靠Google和Redhat的强大社区，近两年发展十分迅速，在成为容器编排领域中领导者的同时，也正在朝着PAAS底座标配的方向发展。 日志采集方式 日志作为任一系统不可或 ......
elfk收集k8s日志-sidecar
本文介绍通过elk + filebeat方式收集k8s日志，其中filebeat以sidecar方式部署。elfk最新版本：7.6.2 k8s日志收集方案3种日志收集方案：1. node上部署一个日志收集程序 Daemonset方式部署日志收集程序，对本节点 /var/log 和 /var/lib/ ......
python的日志模块logging
logging模块是系统自带的无需安装直接导入使用 在日志配置中，stream=sys.stdout 为控制台输出日志，filename="devops.log"为日志写入到文件，filemode="w"为每次执行代码覆盖写，filemode = 'a'为追加日志，format="%(asctime ......
查看linux日志
# 显示尾部的最新10行日志 journalctl -n # 显示尾部指定行数的日志 journalctl -n 15 # 实时滚动显示最新日志 journalctl -f 与tail -f类似 # 查看指定服务的日志 journalctl /usr/local/bin/clash journalc ......
linux文件系统与日志分析
Linux文件系统 inode表结构 每一个inode表记录对应的保存了以下信息： inode number 节点号 文件类型 权限 UID GID 链接数（指向这个文件名路径名称个数） 该文件的大小和不同的时间戳 指向磁盘上文件的数据块指针 有关文件的其他数据 ls -i：查看inode号 sta ......
ELK日志收集&&日志收集方案
31. ELK日志收集 日志分析系统 - k8s部署ElasticSearch集群 - 帝都攻城狮 - 博客园 (cnblogs.com) https://blog.csdn.net/miss1181248983/article/details/113773943 31.1 日志收集方式 1.nod ......
k8s通过sidecar模式收集pod的容器日志至ELK
架构： 已完成的部署1、ES集群及kibana部署 https://blog.51cto.com/yht1990/6080981 2、kafaka+zookeeper集群 https://blog.51cto.com/yht1990/6081518 准备sidecar镜像(filebeat)找一台服 ......
Java类加载机制
类加载机制 将class文件中的二进制数据读取到内存中，并对其进行校验，解析和初始化，将类型数据存放在方法区，实例对象存放在堆，作为方法区该类的数据访问接口。这就是类加载。 加载 通过全限定名获取二进制字节流 将字节流代表的静态存储结构转化为方法区的运行时数据结构 在堆中生成一个代表该类的Class ......
通过日志恢复SQL Server的历史数据
通过日志还原 方案一： 前提条件 1.必须有一个完整的备份，且这个备份必须是在修改、删除数据之前做的。 2.在更新、删除数据之后，做日志备份，该log备份将用于还原之前的数据 建议使用备份数据库进行还原操作，确认无误再对原库进行操作，或同步数据 开始还原操作： 此处使用SQL management界 ......
mysql8.x通过备份文件及binlog日志恢复数据
问题简述 记一次mysql数据库被误删（是整个库被删了）后的还原 前提条件 数据库版本为mysql8.x以上 具有库被删除前的完整备份 数据库开启binlog 还原步骤 第一步：通过完整备份还原被删的库 注意事项：还原后切勿让其他用户连接，操作数据库。待使用binlog日志恢复数据后再对库进行操作， ......
为虚拟机制作快照，制作还原点
为虚拟机制作快照，制作还原点 将虚拟机关机制作，效率高 我的虚拟机，快照管理器，拍照，快照列表里有所创建的快照，（转到） Linux的目录结构 /就是顶级目录 eg：/usr/local/hello.txt window系统 D:\data\work\Hello.txt ......
C++笔记 -- 使用STL的function实现回调机制(回调函数)
1.使用普通函数 示例一 代码： #include <iostream> #include <functional> // 定义一个回调函数类型 using Callback = std::function<void(int)>; // 定义一个函数，用于演示回调函数的使用 void perform ......
MySQL开启二进制日志
MySQL的二进制日志（Binary Log）是一个记录数据库所有更改的日志文件，用于数据复制和恢复等操作。在MySQL的配置文件my.cnf（或my.ini）中，可以配置二进制日志的相关参数。以下是一些常见的MySQL二进制日志配置项： log-bin：此选项用于启用二进制日志功能。可以在选项后指 ......
Java安全机制之一——SecurityManager和AccessController
前言： 在看socket相关代码的时候，AbstractPlainSocketImpl中的一段代码吸引了我，其实之前见过很多次类似的代码，但一直不想去看，只知道肯定和权限什么的相关，这次既然又碰到了就研究一下，毕竟也不能对java基本代码一无所知。 static { java.security.Ac ......
文件系统和日志分析
文件系统 查看inode号 ls -i /stat +文件名 atime 最后一次查看文件 需要打开文件才会变更 mtime 最近修改文件内容时间 注意（更改完内容之后，ctime也会改变） ctime 最近更改文件元信息的时间 比如改变时间 查看日志 是为了关注里面的内容 相同设备上 inode ......
docker日志收集docker插件+loki+grafna
实现收集docker容器日志方式： dokcer安装插件，将日志发送到loki，grafna展示日志。 1、安装loki wget https://raw.githubusercontent.com/grafana/loki/v2.9.1/cmd/loki/loki-local-config.yam ......
防止DOS攻击（检测nignx日志若某个IP短时间的PV过大则使用防火墙将其禁掉）
#!/bin/bash time=`date|awk '{print $3"\\\\/"$2"\\\\/"$6}'` awk '$4~/'"${time}"'/{print $0}' access.log |awk '{ip[$1]++}END{for (i in ip)print i,ip[i]} ......