原理filter dubbo日志
day26 海量数据下的EFK架构优化升级-初识日志收集组件Fluentd （9.4-9.5）
9.4-1-海量数据下的EFK架构优化升级(1) 一、数据背景 在海量数据场景下，日志管理和分析是一项重要任务。为了解决这个问题，EFK 架构（Elasticsearch + Fluentd + Kibana）已经成为流行的选择。然而，随着数据规模的增加，传统的 EFK 架构可能面临性能瓶颈和可用性 ......
C++多态底层原理：虚函数表
虚函数表 C++ 对象模型 在有虚函数的情况下，C++对象的模型可以概括为：虚函数表指针+数据struct。在对象所在的内存里：前8个字节（64位系统）是虚函数表所在地址，后边是对象中的member data。在多态的实现里，父指针就是根据所指向内存里的第一个地址来找到对应的虚函数表从而实现多态。 ......
新版日志系统建设，利用clickhouse替换ES架构
目录背景采集端消费端版本迭代性能对比Vector存储端引擎支持数据模型架构设计集群监控展示端子目录路由配置账号设置免密码登录总结 背景 随着业务量的大幅提升，日志存储要求越来越大，写入IO越来越高，需要对整个日志系统进行升级，使用ES作为存储引擎的成本也越来越高，需要一个针对日志场景，更高性价比的存 ......
程序启动添加全局异常捕获和Dump日志记录
Dump日志记录 /// <summary> /// 功能描述：程序全局异常捕获Dump文件记录 /// </summary> public static class MiniDump { [Flags] public enum Option : uint { // From dbghelp.h: ......
分布式日志追踪ID实战 | 京东物流技术团队
本文通过介绍分布式应用下各个场景的全局日志ID透传思路，以及介绍分布式日志追踪ID简单实现原理和实战效果，从而达到通过提高日志查询排查问题的效率。 背景 开发排查系统问题用得最多的手段就是查看系统日志，相信不少人都值过班当过小秘吧：给下接口和出入参吧，麻烦看看日志里的有没有异常信息啊等等，但是在并发 ......
【源码系列#05】Vue3响应式原理（Ref）
proxy 只接受对象入参，所以我们需要 ref 来解决值类型的数据相应。如果传入 ref 的是一个对象，内部也会调用 reactive 方法进行深层响应式转换 ......
Linux驱动开发笔记（六）：用户层与内核层进行数据传递的原理和Demo
前言 驱动作为桥梁，用户层调用预定义名称的系统函数与系统内核交互，而用户层与系统层不能直接进行数据传递，进行本篇主要就是理解清楚驱动如何让用户编程来实现与内核的数据交互传递。 温故知新 设备节点是应用层（用户层）与内核层交互； 使用预先的结构体进行操作，如系统open函数对应了驱动中文件操作及的op ......
深度解析 PyTorch Autograd：从原理到实践
本文深入探讨了 PyTorch 中 Autograd 的核心原理和功能。从基本概念、Tensor 与 Autograd 的交互，到计算图的构建和管理，再到反向传播和梯度计算的细节，最后涵盖了 Autograd 的高级特性。 关注TechLead，分享AI全维度知识。作者拥有10+年互联网服务架构、A ......
营业日志 —— FFT
Q: 【模板】多项式乘法（FFT） 给定一个 \(n\) 次多项式 \(F(x)\)，和一个 \(m\) 次多项式 \(G(x)\)。 请求出 \(F(x)\) 和 \(G(x)\) 的卷积。 暴力很容易实现，但是时间复杂度为 \(O(n^2)\) 如何优化？ 使用 FFT 可以有效将复杂度降至 \ ......
2024了，我不想再用AOP收集业务操作日志了 | 京东云技术团队
0.背景 在近期的项目中，系统涉及到针对系统的业务操作日志统计功能，由于本系统位于业务链路的中心环节，负责接收上游系统的数据，并将基于用户操作产生的数据传递至下游系统，鉴于业务链路的复杂性和操作场景的多样性，我们计划通过对核心业务数据进行全生命周期的日志记录来提升问题解决的效率，并为用户提供更多的工 ......
Iterator集合底层原理
//Itr是 ArrayList中的一个内部类 private class Itr implements Iterator<E> { int cursor; // index of next element to return 光标，表示是迭代器里面的那个指针，默认指向0索引的位置 int last ......
中间件 ZK分布式专题与Dubbo微服务入门 2-3 zookeeper文件夹主要目录介绍
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12690 1 重点关注 1.1 最常用的目录 bin 执行启动关闭zookeeper命令 conifg 进行配置文件配置 recipes 案例代码 docs 文档参考 2 课程内容 2.1 zo ......
中间件 ZK分布式专题与Dubbo微服务入门 2-2 zookeeper下载、安装
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12686 1 重点关注 1.1 zookeeper的安装 下载zookeeper 在以下链接下载3.4.11 http://archive.apache.org/dist/zookeeper/ ......
中间件 ZK分布式专题与Dubbo微服务入门 2-1 JDK的安装（linux）
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12684 1 重点关注 1.1 jdk的安装 下载jdk 用fileZilla上传jdk到linux环境 home路径下 在home路径下解压压缩包 tar -zxvf jdk-8u202-1i ......
金字塔原理
第1章 为什么要用金字塔结构 上一篇←《金字塔原理》→下一篇 如果受众希望通过阅读你的文章、听你的演讲或培训，来了解你对某一问题的观点，那么他将面临一项复杂的任务。因为即使你的文章篇幅很短，比如只有两页纸，文章中也会包括大约100个句子。读者必须阅读、理解每一句话，并且寻找每句话之间的联系，前前后后 ......
【ASP.NET Core】使用SignalR推送服务器日志
【ASP.NET Core】使用SignalR推送服务器日志 一个多月前接手了一个产线机器人项目，上位机以读写寄存器的方式控制机器人，服务器就是用 ASP.NET Core 写的 Web API。由于前一位开发者写的代码质量问题，导致上位机需要16秒才能启动。经过我近一个月的改造，除了保留业务逻辑代 ......
Dubbo
Dubbo是一个高性能、轻量级的开源Java RPC框架，Dubbo提供了三大核心能力：面向接口的远程方法调用，智能容错和负载均衡，以及服务自动注册和发现。 RPC（Remote Procedure Call，远程过程调用）是一种基于消息传递的通信协议，允许一台计算机（客户端）调用另一台计算机（服务 ......
Flink SideOutput 和 Filter 分流对比
Flink SideOutput 和 Filter 分流对比 Flink 分流有Filter、Split（已经废弃移除）、Side Output进行分流，到底时有什么区别，哪个种更好呢？ 对比 代码对比 直接上代码对比： import org.apache.flink.streaming.api.d ......
越狱版和免越狱版iphone手机imessages群发,imessages短信,imessages推信,苹果imessage群发实现原理 - 手机端
Apple公司全线在mac os与ios两个操作系统上内置了FaceTime与iMessage两个应用。完美替代运营商的短信与电话。并且FaceTime与iMessage的帐号不仅仅与Apple ID 绑定，同时也与使用这Apple ID的手机号码绑定，这样的漏洞自然给无孔不入的群发垃圾信息商们提供 ......
ssh 原理和技巧转载
转载自：ssh原理和技巧 SSH 是用于计算机之间的加密登录的一种网络协议 在早期互联网使用当中，都是使用明文进行通信的，一旦消息被截获，内容就暴露无疑。1995 年，芬兰学者 Tatu Ylonen 设计了 SSH 协议，将登录信息全部加密，成为互联网安全的一个基本解决方案，迅速在全世界获得推广， ......
istio-sidecar自动注入原理
0.原理 istio通过添加MutatingWebhook识别打了自动注入标签的Pod-create请求，请求pilot暴露的sidecar注入接口，pilot根据template生成sidecar并修改patch到pod元数据中返回完成sidecar注入。 1.指定namespace打注入标签 k ......
深度学习的原理详解
最近ChatGPT很火，让更多的人意识到未来利用机器的深度学习来完成事情，做出一些决策，将会成为未来的一个趋势。基于深度学习的数据训练这些技能将成为程序员必备的专业技能之一。所以我们有理由持续的关注深度学习与机器训练这个领域，今天给大家说明白目前主流深度学习的一些基本的流程原理,以及目前深度学习的一 ......
Volcano 原理、源码分析（二）
0. 总结前置 1. 概述 2. 寻找调度器中的 PodGroup 2.1 从 PodGroup 到 JobInfo 的封装 2.2 从 Pod 到 TaskInfo 的封装 3. 控制器中 PodGroup 和 Pod 的创建逻辑 3.1 从 main 开始寻找 SyncJob 的踪迹 3.2 S ......
python pip更新异常日志
解决pip升级导致的ERROR: Could not install packages due to an EnvironmentError问题今天执行pip install -U pip命令想更新pip的时候，遇到了下面的问题： 后来上网查了一下发现很多方法都是让直接执行 ！！（必须在管理员模式去 ......
“深度学习”能非常智能的本质原理是什么
在开始学习”AI深度学习”之前，我们要先搞明白AI深度学习能非常智能的本质原因是什么，只有搞懂了本质，才能作为你学习与掌握 “AI深度学习”的基石，为后续的学习打下坚实的基础。所以搞懂今天这边文章非常的重要，我接下来将用一个例子，来说明”AI深度学习”，能使我们的计算机程序非常智能的本质原因是什么。 ......
概率霍夫变换（Progressive Probabilistic Hough Transform）原理详解
概率霍夫变换（Progressive Probabilistic Hough Transform）的原理很简单，如下所述： 1.随机获取边缘图像上的前景点，映射到极坐标系画曲线； 2.当极坐标系里面有交点达到最小投票数，将该点对应x-y坐标系的直线L找出来； 3.搜索边缘图像上前景点，在直线L上的点 ......
docker部署ELK日志系统
第一步：部署ES docker pull elasticsearch:7.17.0 创建ES目录与配置文件 mkdir -p /opt/es/config mkdir -p /opt/es/data echo "http.host: 0.0.0.0" >>/opt/es/config/elastic ......
AOP用于日志管理
我在项目中使用AOP作日志管理，首先自定义注解syslog，再写一个aspect切面类，使用@around环绕通知，通过参数中的joinpoint切点，通过动态代理获取当前类的对象，这样就可以获取到类名等信息，可以通过一些别的方法比如getArgs，获取方法的参数等等 @Aspect@Compone ......
企业级微服务项目实战《学成在线》学习日志（一）
项目架构 先来看看项目架构图： 我们主要搞的就是微服务层和数据层。 而这个项目比较大，框架就分成了三个端： 环境搭建 在开发这个项目前，你需要了解java,ssm,.springboot,springcloud,springcloudAlibaba,nacos,mysql,虚拟机,docker,SS ......
面试官喜欢问Nacos原理？直接把这篇文章甩给他！
大家好，我是三友~~ 今天就应某位小伙伴的要求，来讲一讲Nacos作为服务注册中心底层的实现原理 不知你是否跟我一样，在使用Nacos时有以下几点疑问： 临时实例和永久实例是什么？有什么区别？服务实例是如何注册到服务端的？服务实例和服务端之间是如何保活的？服务订阅是如何实现的？集群间数据是如何同步的 ......