loki

day28 基于Loki的日志收集系统-基于Loki特性的场景变现及优化 (9.8-9.9)

9.8-基于Loki的日志收集系统 一、EFK vs LPG 架构和组件 Loki:Loki是一个开源的水平可扩展日志聚合系统,由Promtail、Loki和Grafana组成。 EFK:EFK是一个集成的解决方案,由Elasticsearch、Fluentd和Kibana组成。 存储和查询: Lo ......
Loki 场景 特性 系统 日志

如何使用loki查询日志中大于某一数字的值的日志

简介 loki是一款轻量级的日志收集中间件,比elk体系占用的内存更小,采用go语言开发,可以利用grafana来查询loki中存储的日志,loki存储日志只对提前预设的标签做索引,所以日志存储空间占用比elk小很多。 方法 loki只对提前预设的标签做索引,但如果我们想给标签之外的文本根据其值代表 ......
日志 数字 loki

使用 OpenTelemetry 和 Loki 实现高效的应用日志采集和分析

在之前的文章陆续介绍了 如何在 Kubernetes 中使用 Otel 的自动插桩 以及 Otel 与 服务网格协同实现分布式跟踪,这两篇的文章都将目标聚焦在分布式跟踪中,而作为可观测性三大支柱之一的日志也是我们经常使用的系统观测手段,今天这篇文章就来体验下应用日志的操作闭环。 背景 OpenTel ......
OpenTelemetry 日志 Loki

Grafana系列-Loki-基于日志实现告警

系列文章 Loki 系列文章 前言 实际应用中除了基于 Metrics 告警, 往往还有基于日志的告警需求, 可以作为基于 Metrics 告警之外的一个补充. 典型如基于 NGINX 日志的错误率告警.本文将介绍如何基于 Loki 实现基于日志的告警. 本文我们基于以下 2 类实际场景进行实战演练 ......
Grafana 日志 Loki

Nginx loki监控日志的学习

Nginx loki监控日志的学习 背景 学习自: https://mp.weixin.qq.com/s/Qt1r7vzWvCcJpNDilWHuxQ 增加了一些自己的理解 第一部分nginx日志的完善 在logformat的后面增加一个: log_format json_analytics esc ......
Nginx 日志 loki

docker日志收集docker插件+loki+grafna

实现收集docker容器日志方式: dokcer安装插件,将日志发送到loki,grafna展示日志。 1、安装loki wget https://raw.githubusercontent.com/grafana/loki/v2.9.1/cmd/loki/loki-local-config.yam ......
docker 插件 grafna 日志 loki

Docker loki+promtail+grafana安装

docker-compose.yaml version: "3" networks: loki: services: loki: image: grafana/loki:2.9.0 ports: - "3100:3100" command: -config.file=/etc/loki/local- ......
promtail grafana Docker loki

loki::allocator

三个class,第一层是chunk,第二层是vector<chunk> FixedAllocator,第三层是vector<vector<chunk>> SmallObjallocator。第一层的chunk负责实际内存的管理,一个chunk管理一个unsigned char[blockSize * ......
allocator loki

采用二进制文件方式安装loki和promtail

1. 下载二进制文件 官方下载地址:https://github.com/grafana/loki/releases 下载如图所示的这俩文件,Grafana采用yum方式安装 cd /usr/local/src wget https://github.com/grafana/loki/release ......
二进制 promtail 方式 文件 loki

Loki not alerting Alertmanager

4 I got it working atlast . Below is my ruler config ruler: storage: type: local local: directory: /etc/loki/rulestorage rule_path: /etc/loki/rules al ......
Alertmanager alerting Loki not

轻量级日志 Loki 全攻略

前言 在对公司容器云的日志方案进行设计的时候,发现主流的 ELK(Elasticsearch,Logstash,Kibana)或者 EFK(Elasticsearch,Filebeat or Fluentd,Kibana)比较重,再加上现阶段对于 ES 复杂的搜索功能很多都用不上,最终选择了 Gra ......
轻量 轻量级 全攻略 日志 Loki

轻量级日志系统Loki--安装配置详细步骤讲解

Loki对标EFK/ELK,由于其轻量的设计,备受欢迎,Loki相比EFK/ELK,它不对原始日志进行索引,只对日志的标签进行索引,而日志通过压缩进行存储,通常是文件系统存储,所以其操作成本更低,数量级效率更高由于Loki的存储都是基于文件系统的,所以它的日志搜索时基于内容即日志行中的文本,所以它的 ......
轻量 轻量级 步骤 系统 日志

Loki部署

一、安装grafana [root@loki ~]# yum install -y https://dl.grafana.com/enterprise/release/grafana-enterprise-10.0.0-1.x86_64.rpm二、安装loki[root@loki ~]# wget ......
Loki

Loki+Promtail+Grafana 监控 K8s 日志

Loki 架构: 1、loki:服务端,负责存储日志和处理查询 2、promtail:采集端,负责采集日志发送给loki 3、grafana:负责采集日志的展示 创建 yml 文件 cat > loki-rbac.yaml loki-nodeport.yaml loki-nodeport.yaml ......
Promtail Grafana 日志 Loki K8s

Autocheck之Loki

> Simple IOC and YARA Scanner > 1. 文件名IOC正则表达式匹配完整的文件路径/名称 > 2. Yara规则检查Yara签名匹配文件数据和进程内存 > 3. 哈希检查将已知的恶意哈希(MD5,SHA1,SHA256)与扫描的文件进行比较 > 4. C2连接后检查将进程 ......
Autocheck Loki

cenots7安装Loki+promtail+grafana

loki是主服务器,负责存储日志和处理查询 promtail是代理,负责收集日志并将其发送给 loki Grafana用于 UI 展示 1、官方网站上下载对应的loki和promatail版本包 https://github.com/grafana/loki/releases/ 打开链接后,往下翻 ......
promtail cenots7 grafana cenots Loki

Kubernetes轻量级日志工具Loki安装及踩坑记录

# Loki简介 Loki是Grafana出品的一个轻量级日志系统,熟悉ELK的都知道ELK使用起来的成本,而且仅仅是日志检索使用ELK的话有点大材小用了。Loki8技术栈中使用了以下组件。 - Promtail 用来将容器日志发送到 Loki 或者 Grafana 服务上的日志收集工具,该工具主要 ......
轻量 轻量级 Kubernetes 工具 日志

k3s 基础 —— 配置 loki

[官方文档](https://grafana.com/docs/loki/latest/getting-started/) ![](https://img2023.cnblogs.com/blog/1062332/202307/1062332-20230704144205955-1486747855 ......
基础 loki k3s k3 3s

使用Loki收集监控linux日志

简介 Loki 是受Prometheus启发的水平可扩展、高可用、多租户日志聚合系统。它的设计非常具有成本效益且易于操作。它不索引日志的内容,而是索引每个日志流的一组标签。 系统架构 1、Promtail收集并将日志发送给Loki的 Distributor 组件 2、Distributor会对接收到 ......
linux 日志 Loki

prometheus Loki日志采集分析工具,loki与ELK的区别

一、Loki是什么? Loki是由Grafana Labs开源的一个水平可扩展、高可用性,多租户的日志聚合系统的日志聚合系统。它的设计初衷是为了解决在大规模分布式系统中,处理海量日志的问题。Loki采用了分布式的架构,并且与Prometheus、Grafana密切集成,可以快速地处理大规模的日志数据 ......
prometheus 工具 日志 Loki loki

Loki 日志收集系统

一.系统架构 二.组成部分 Loki 的日志堆栈由 3 个组件组成: promtail:用于采集日志、并给每条日志流打标签,每个节点部署,k8s部署模式下使用daemonset管理。 loki:用于存储采集的日志, 并根据标签查询日志流。单节点部署,一般和监控组件部署在同一节点。 Grafana:提 ......
系统 日志 Loki

如何在k8s集群中安装配置loki并使用grafana可视化管理

按照以下步骤在 Kubernetes 集群中安装 Loki 并使用 Grafana 进行可视化管理: 在 Kubernetes 中安装 Loki。您可以使用 Helm Package Manager 的 Loki Chart 进行安装,也可以手动在 Kubernetes 上安装 Loki。 安装 P ......
集群 grafana loki k8s k8

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统

说到分布式日志存储系统,大家肯定对ELK、EFK这些工具并不陌生。可是它们都基于Elasticsearch存储,搭建复杂,耗资源,上手难。所以,个人非常推崇Grafana Labs开源的Loki 轻量级日志聚合分析系统 Loki使用标签来作为索引,而不是对全文进行检索,所以在搜索上会有一定的局限性。 ......
errorlog 错误 系统 Mysql 日志

Loki 日志管理

一、loki Installation | Grafana Loki documentation 1、loki介绍 Loki是 Grafana Labs 团队发布的开源项目,是一个水平可扩展,高可用性,多租户的日志聚合系统。 项目受 Prometheus 启发,官方的介绍就是:Like Promet ......
日志 Loki

grafana loki

Loki内存中的数据多久写到磁盘中一次 在Loki中,内存中的数据通常被称为临时数据,它们会在一定时间后被写入到磁盘中。 写入的时间间隔可以通过Loki的chunk_target_size和max_chunk_age选项来配置。这些选项可以在Loki的配置文件中进行设置,例如: chunk_targ ......
grafana loki

Grafana 系列文章(十四):Helm 安装Loki

前言 写或者翻译这么多篇 Loki 相关的文章了, 发现还没写怎么安装 😓 现在开始介绍如何使用 Helm 安装 Loki. 前提 有 Helm, 并且添加 Grafana 的官方源: helm repo add grafana https://grafana.github.io/helm-cha ......
Grafana 文章 Helm Loki

Grafana 系列文章(十):为什么应该使用 Loki

👉️URL: https://grafana.com/blog/2020/09/09/all-the-non-technical-advantages-of-loki-reduce-costs-streamline-operations-build-better-teams/ 📝Descript ......
Grafana 文章 Loki

Grafana 系列文章(九):开源云原生日志解决方案 Loki 简介

简介 Grafana Labs 简介 Grafana 是用于时序数据的事实上的仪表盘解决方案。它支持近百个数据源。 Grafana Labs 想从一个仪表盘解决方案转变成一个可观察性 (observability) 平台,成为你需要对系统进行调试时的首选之地。 完整的可观察性 可观察性。关于这意味着 ......
解决方案 Grafana 方案 简介 文章

Grafana 系列文章(十三):如何用 Loki 收集查看 Kubernetes Events

前情提要 IoT 边缘集群基于 Kubernetes Events 的告警通知实现 IoT 边缘集群基于 Kubernetes Events 的告警通知实现(二):进一步配置 概述 在分析 K8S 集群问题时,Kubernetes Events 是超级有用的。 Kubernetes Events 可 ......
Kubernetes Grafana Events 文章 Loki

Grafana 系列文章(十一):Loki 中的标签如何使日志查询更快更方便

👉️URL: https://grafana.com/blog/2020/04/21/how-labels-in-loki-can-make-log-queries-faster-and-easier/ 📝Description: 关于标签在 Loki 中如何真正发挥作用,你需要知道的一切。它可 ......
更快 Grafana 标签 文章 日志
共31篇  :1/2页 首页上一页1下一页尾页