postgresql概念 日志
什么是软件设计领域的容错率概念
软件设计领域中的容错率 容错率是软件设计领域中一个至关重要的概念，它指的是系统在面对错误、异常或故障时继续正常运行的能力。容错设计旨在提高系统的可靠性和稳定性，确保用户能够在各种情况下获得一致的、可用的服务。在全栈开发中，容错率不仅仅是一个技术问题，更是一个涉及架构、设计和用户体验的综合性挑战。 1 ......
python3使用libpcap给ESL命令添加日志记录
操作系统 ：CentOS 7.6_x64 FreeSWITCH版本 ：1.10.9 python版本：3.9.12 libpcap版本：1.11.0b7 FreeSWITCH的ESL模块用起来很方便，可以控制FreeSWITCH实现具体业务需求，但该模块没有提供ESL命令执行日志，不便于排查问题，本 ......
PostgreSQL锁，第1部分:行锁
理解PostgreSQL锁对于构建可伸缩的应用程序和避免停机是很重要的。现代计算机和服务器有许多CPU核心，可以并行执行多个查询。数据库包含许多一致的结构，这些结构由并行运行的查询或后台进程所做的更改可能导致数据库崩溃，甚至损坏数据。因此，我们需要能够阻止来自并发进程的访问，同时更改共享内存结构或行 ......
PostgreSQL锁，第2部分:重量级锁
应用程序开发人员和dba的PostgreSQL锁可见性在大多数情况下与重量级锁相关。复杂的数据库锁定操作需要使用来自系统目录的视图进行完整的检测。应该清楚哪个对象被特定的数据库“后端”进程锁定。任何锁的另一个名称是“瓶颈”。为了使数据库操作并行，我们应该将单个瓶颈分解为多个特定于操作的任务。 目录示 ......
为PostgreSQL优化调整Linux内核参数
为了获得最佳性能，PostgreSQL数据库依赖于正确定义的操作系统参数。配置不当的操作系统内核参数可能导致数据库服务器性能下降。因此，必须根据数据库服务器及其工作负载来配置这些参数。在这篇文章中，我们将讨论一些可能影响数据库服务器性能的重要Linux内核参数，以及如何调优这些参数。 SHMMAX ......
预写日志 + 了解checkpoint参数
在执行大量写操作的系统上，调优检查点对于获得良好的性能至关重要。然而，检查点是我们经常发现混淆和配置问题的地方之一，那么让我带你了解一下检查点，它们做什么以及如何在PostgreSQL中调优它们。 虽然有一些关于它的文档，但我决定用可能更容易理解的语言来写它——不是作为开发人员，而是作为 Postg ......
PostgreSQL中的复制延迟
PostgreSQL 是一种流行的开源关系数据库管理系统，广泛用于存储和管理数据。PostgreSQL 中可能遇到的常见问题之一是复制滞后。 在这篇博客中，我们将讨论什么是复制延迟、它发生的原因以及如何在 PostgreSQL 中缓解它。 什么是复制滞后？ 复制延迟是指数据写入主数据库的时间与复制到 ......
【Djngao基础】日志记录
1.日志核心组件 1.1 记录器对象-logger 在日志系统中，根据日志的重要性，将日志换分为5个等级： DEBUG：调试信息，也是最详细的日志信息，记录项目中任何发生的事，多用于调测； INFO：重要信息，记录业务流程中的重要节点信息； WARNING：警告日志，记录可能影响系统正常运行或可能出 ......
Angular 依赖注入领域里 optional constructor parameters 的概念介绍
Angular 依赖注入（DI）是一个强大且灵活的设计模式，它可以帮助我们更好地管理和组织我们的代码。构造函数参数的可选性（Optional）是 Angular DI 系统的一个重要特性。这种特性允许我们将某些服务或值作为可选依赖注入到组件或服务中，这样，如果这些服务或值不存在，我们的代码仍然可以正 ......
可观测性建设实践之 - 日志分析的权衡取舍
指标、日志、链路是服务可观测性的三大支柱，在服务稳定性保障中，通常指标侧重于发现故障和问题，日志和链路分析侧重于定位和分析问题，其中日志实际上是串联这三大维度的一个良好桥梁。 但日志分析往往面临成本和效果之间的权衡问题，没有完美的方案只有适合的方案，本文将结合实战经验，介绍一种日志分析的实现，分析如 ......
Linux文件管理：理解基本概念与常用命令
1. 文件系统基础 1.1 树状文件结构 Linux文件系统采用树状结构，以根目录（/）为起点，所有文件和目录都位于其下。理解这个层次结构是理解Linux文件管理的关键。 1.2 文件与目录 在Linux中，一切皆文件。文件可以是文本文件、二进制可执行文件、目录等。目录用于组织文件，使其更有层次感。 ......
可视化全链路日志追踪
来源：https://tech.meituan.com/2022/07/21/visualized-log-tracing.html 1. 背景 1.1 业务系统日益复杂 随着互联网产品的快速发展，不断变化的商业环境和用户诉求带来了纷繁复杂的业务需求。业务系统需要支撑的业务场景越来越广、涵盖的业务逻 ......
Exchange意外登录日志
最近在审计Exchange邮件系统的时候，发现大量用户半夜登录的日志。而且都是成功的，几乎没有失败的情况。其中Logon Type 8表示用户从网络登录。 Logon type 8: NetworkCleartext. A user logged on to this computer from t ......
详解CCE服务：一站式告警配置和云原生日志视图
本文分享自华为云社区《新一代云原生可观测平台之CCE服务日志和告警篇》，作者：云容器大未来。 告警和日志是运维人员快速定位问题、恢复异常的主要手段。运维人员日常的工作模式往往是先接收告警信息，再根据告警信息初步判断异常的范围和影响，通过相关组件的日志定位出故障原因，进行系统恢复。因此，如何给运维人员 ......
postgresql从入门到精通 - 第35讲：中间件PgBouncer部署|PostgreSQL教程
PostgreSQL从小白到专家，是从入门逐渐能力提升的一个系列教程，内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容，希望对热爱PG、学习PG的同学们有帮助，欢迎持续关注CUUG PG技术大讲堂。 第35讲：中间件PgBouncer部署 11月25日(周六)19:30- ......
Python使用sys.excepthook统一处理异常，并将异常信息记录到日志中
import sys import time import traceback from datetime import datetime from selenium import webdriver from selenium.webdriver.common.by import By from ......
Golang学习笔记-自定义日志轮转及输出
package pkg import ( "fmt" "log" "log/slog" "os" "time" ) var controlLogger *slog.Logger var fileLogger *slog.Logger const ( timeFormat = "2006-01-02" ......
3.1 指令级并行：概念与挑战
3.1 指令级并行：概念与挑战 指令集并行ILP的定义 处理器使用流水线来重叠指令的执行并提高性能，指令之间的这种潜在重叠被称为指令级并行，因为指令可以并行计算。 利用ILP有两种主流方法 1.依靠硬件来帮助动态地发现和利用并行性的方法（桌面端CPU常用，例如酷睿系列）； 2. 依靠软件技术在编译时 ......
Java登陆第十二天——网络编程(一)网络的概念
网络 由两台或者更多的计算机组成的网络，称之为计算机网络。 在同一个网络中，不同的计算机可以互相通信。因为他们使用的都是相同的协议。 (通信：两台设备之间通过网络实现数据传输。) 假设某处的一个计算机网络使用的网络协议为ABC。那么另一处网络协议为EFG的计算机网络，就无法与该ABC网络协议进行通信 ......
threejs—01—概念
一、物体如何移动 所有的物体不管是PerspectiveCamera()还是mesh()构造函数，都是继承Object3D()的。 因为继承，所以，camera实例和mesh实例，不仅可以访问自己构造函数的函数原型prototype对象里的东西，也可以访问Object3D()函数的属性。 其中，Ob ......
手把手教你玩转 SpringBoot 日志
一、日志重要吗 程序中的日志重要吗？ 在回答这个问题前，笔者先说个事例： 笔者印象尤深的就是去年某个同事，收到了客户反馈的紧急bug。尽管申请到了日志文件，但因为很多关键步骤没有打印日志，导致排查进度很慢，数个小时都没能排查到问题，也无法给出解决对策。导致了客户程序一直阻断，最终产生了不少损失。 事 ......
以太坊交易信息中的logs和topics概念
1. 看一个logs和topics的交易记录: Topics中的 0xddf252ad1be2c89b69c2b068fc378daa952ba7f163c4a11628f55a4df523b3ef是啥意思呢？ 1.1.合约交易关键字段解释 { "jsonrpc": "2.0", //RPC版本号， ......
python脚本把日志转成excel
之前go写的，转成了python版本，日志是json格式的，按行读取 {"aid":"1111","cid":"2222","callback_url":"http:\/\/ad.toutiao.com\/track\/activate\/?callback=B.eDCQxxxxxGCB&os=0& ......
算法概念
算法的定义：解决问题的过程中用到的所有方法和步骤。 算法的描述方法：自然语言、流程图、计算机语言。 算法的三大结构： 顺序结构、选择结构、循环结构。 算法的特点： 1、有穷性。（算法的操作步骤应是有限的。生活算法与程序算法都是有穷的，没有永远完不成任务的生活算法。） 2、确定性。（算法的每一步都应是 ......
core中间件全局日志
参考学习项目zradmin 在Configure中配置请求参数缓存 //使可以多次多去body内容 app.Use((context, next) => { context.Request.EnableBuffering(); return next();//请求通道走向下一步 }); 在Confi ......
Sqlserver日志传送高可用搭建
1.原理 主数据库定时备份事务日志到共享文件夹，辅助数据库定时从共享文件夹把事务日志备份复制到本地文件夹中，辅助数据库定时将本地文件夹中的事务日志备份还原到数据库上。 2.修改服务启动账户 2.1.为什么修改 如果使用默认的NT SERVICE\MSSQLSERVER用户启动SQLServer，NT ......
postgresql中执行select查询语句卡住问题的处理
1、问题描述 研发环境搭建的分布式的数据库Tbase。Tbase本质上是基于postgresql-xl创建的分布式数据库。 昨天，研发的同事反馈，这个数据库中，对某个表执行select查询的时候，都是卡住的。 客户端一直没有影响。 2、问题分析 我这边通过pg的客户端进行连接，发现除了这个表，其他的 ......
记录一次 postgresql 优化案例（ 嵌套循环改HASH JOIN ）
今天同事给我一条5秒的SQL看看能不能优化。 表数据量： select count(1) from AAAA union all select count(1) from XXXXX; count 1000001 998000 (2 rows) 原始SQL： SELECT A1.PK_DEPT, A ......
ElasticSearch的日志配置
ElasticSearch默认情况下使用Log4j2来记录日志，日志配置文件的路径为$ES_HOME/config/log4j2.properties，配置方法见Log4j2的官方文档。 参考path-settings，通过指定path.logs，可以指定日志文件的保存路径。 在日志配置文件$ES_ ......
Nginx loki监控日志的学习
Nginx loki监控日志的学习 背景 学习自: https://mp.weixin.qq.com/s/Qt1r7vzWvCcJpNDilWHuxQ 增加了一些自己的理解 第一部分nginx日志的完善 在logformat的后面增加一个: log_format json_analytics esc ......