第一站clickhouse架构

day26 海量数据下的EFK架构优化升级-初识日志收集组件Fluentd (9.4-9.5)

9.4-1-海量数据下的EFK架构优化升级(1) 一、数据背景 在海量数据场景下,日志管理和分析是一项重要任务。为了解决这个问题,EFK 架构(Elasticsearch + Fluentd + Kibana)已经成为流行的选择。然而,随着数据规模的增加,传统的 EFK 架构可能面临性能瓶颈和可用性 ......
海量 架构 组件 Fluentd 数据

第一次作业

陈春君的第一次作业 这个作业属于哪个课程https://edu.cnblogs.com/campus/zjlg/23rjjsjc 这个作业的目标 1. 创立自己的博客,完善账号信息2.发表随笔,介绍自己以及表达对课程的期望 姓名-学号 陈春君-2021339930005 一、自我介绍 个人信息 我叫 ......
第一次

新版日志系统建设,利用clickhouse替换ES架构

目录背景采集端消费端版本迭代性能对比Vector存储端引擎支持数据模型架构设计集群监控展示端子目录路由配置账号设置免密码登录总结 背景 随着业务量的大幅提升,日志存储要求越来越大,写入IO越来越高,需要对整个日志系统进行升级,使用ES作为存储引擎的成本也越来越高,需要一个针对日志场景,更高性价比的存 ......
clickhouse 架构 系统 日志

No Magic—复杂机电产品系统架构开发套件

CATIA Magic,原名MagicDraw,俗称No Magic,被达索收购后融入3DExperience产品协同研发管理平台中,形成更具协同体验的系统工程解决方案。该软件提供对SysML/UML/UAF语言的完整支持,提供独有的MagicGrid方法论,涵盖:业务和任务分析、利益攸关者需要及需... ......
机电产品 套件 架构 系统 Magic

园子开店记-周边第一款:鼠标垫设计图出炉

一边会员救园,一边尝试开网店,为了让这破园子能生存下去,我们在努力着。 万事开头难,开头起名难,而我们却在开头第一步就摔了一跤,起了一个糟糕的名字。在园友们雪亮的评论中我们意识到自己的错误,于是改繁归简,返璞归真,淘宝店铺名称用了最简单最熟悉的“博客园”。原来开头并不难,是我们自找难题。 ......
设计图 鼠标垫 园子 鼠标 周边

大模型实战营第一课心得笔记

1、了解专用模型和通用大模型,以及书生浦语大模型开源历程、轻量级、中量级以及重量级三种不同大模型系列,和其他大模型的性能对比。 2、了解从模型到应用的主要步骤以及书生大模型各步骤采取的主要技术,如训练数据,预训练、微调、开源评测体系等。 3、现有的疑问:书生中量级的使用商业成本以及具体功能性能表现, ......
实战 模型 心得 笔记

InterLM训练营 第一课笔记

大模型在ChatGPT发布之后,成为今年最热的话题与研究方向,也有人把今年称为AI元年 通用大模型 书生·浦语大模型 开源历程 书生·浦语大模型系列 性能 从模型到应用 针对上述的步骤中所用到的不同技术,提供了不同的开源框架 数据 预训练 微调 评测 OpenCompass 部署 智能体 Lagen ......
训练营 InterLM 笔记

手摸手带你学ClickHouse

《手摸手带你学ClickHouse》之安装部署 《手摸手带你学ClickHouse》之访问接口 《手摸手带你学ClickHouse》之导入导出数据 《手摸手带你学ClickHouse》之MergeTree系列表引擎 ClickHouse是俄罗斯第—大搜索引擎Yandex开发的列式储存数据库,这个列式 ......
ClickHouse

Google Adsense探索系列_第一弹

本文首发于“坚持住”网站:https://hanginthere.space/2023/12/29/google-adsense%e6%8e%a2%e7%b4%a2%e7%b3%bb%e5%88%97_%e7%ac%ac%e4%b8%80%e5%bc%b9_adsense-%e7%ac%ac%e4% ......
Adsense Google

似乎有点理解指令集和架构的区别了

架构就是造房子的图纸,而指令集就是造房子的材料【玩过俄罗斯方块可能就比较好理解什么是指令集了】 比如指令集里只有:L型的砖,I型的砖,田字形的砖等; 而架构就是基于上面的砖(指令集)设计好的房子的造法,即最底层是用什么砖,往上是用什么砖等等; 不过还是有疑问,如果真的是这么理解的话,那图纸一模一样, ......
指令 架构

记第一步的脚印

作为一名电子人,也从业多年了,遇到过各种问题和各式挑战,这些年来,心里总想能有一个安静的地方能写点东西来记录一下自己的经验、经历、思考、感悟,或人生。 也许姑且当个树洞吧。 终于来到了博客园,这里恬静安详,像是一位老友,在这里记录生活,应该是蛮不错的感受吧。 新路历程,就此启航。 ......
脚印

DDD落地实践-架构师眼中的餐厅 | 京东云技术团队

本文以餐厅场景为叙事主线,以领域驱动为核心思想,结合架构设计与功能设计方法论。是从领域分析到落地的全过程案例,内容偏重于落地,因此不乏一些探讨,欢迎指正。 文章较长、全程干货、耐心读完、必有收获。 本文不针对餐厅的实现细节,重在探讨设计思想和方法。 1、领域设计 让我们抛开技术人员的本能技术视角、站 ......
架构 餐厅 团队 技术 DDD

Ef Core花里胡哨系列(7) 使用Ef Core也能维护表架构?

Ef Core花里胡哨系列(7) 使用Ef Core也能维护表架构? 我们这里指的并不是查询,而是利用Ef的迁移原理,生成可用的其它表架构操作的Sql。 例如你想在Ef Core里建表,并且可能程序里有多个provider,那么写Sql将是一件痛苦的事情,我们就是利用Ef Core迁移时的操作,来为 ......
Core 架构 Ef

第一天:安装Vmware虚拟机软件

一、首先,先去官网下载VMware Workstation for Windows http://www.vmware.com/products/workstation.html 注意:最新版为Workstation 17 Pro,请安装这个PRO版,不然不能同时开启多个虚拟机。 二、安装步骤:(图 ......
Vmware 软件

ClickHouse(20)ClickHouse集成PostgreSQL表引擎详细解析

目录PostgreSQL创建一张表实施细节用法示例资料分享参考文章 PostgreSQL PostgreSQL 引擎允许 ClickHouse 对存储在远程 PostgreSQL 服务器上的数据执行 SELECT 和 INSERT 查询. 创建一张表 CREATE TABLE [IF NOT EXI ......
ClickHouse PostgreSQL 引擎 20

字节面试:DDD架构,如何落地?

文章很长,且持续更新,建议收藏起来,慢慢读!疯狂创客圈总目录 博客园版 为您奉上珍贵的学习资源 : 免费赠送 :《尼恩Java面试宝典》 持续更新+ 史上最全 + 面试必备 2000页+ 面试必备 + 大厂必备 +涨薪必备 免费赠送 :《尼恩技术圣经+高并发系列PDF》 ,帮你 实现技术自由,完成职 ......
字节 架构 DDD

API架构大全(SOAP、Restful、GraphQL、Grpc、Websocket)

一、SOAP SOAP是一种基于XML的简单对象访问协议,适合企业应用 二、Restful Restful基于HTTP应用,提供简介和可靠的网络通信 三、GraphQL GraphQL是一种用于构建和查询API的语言,用来请求特定数据应用,减少多次请求的网络开销,响应速度快 四、Grpc Grpc是 ......
架构 Websocket Restful GraphQL 大全

计算机网络学习第一天OSI与TCP/IP模型

OSI模型与TCP/IP模型 协议是水平的,由语法、语义和同步三部分组成,服务是垂直的。 从上往下依次封装(PCI+SDU=PDU)。 1. 物理层 主要传输比特,用光、电、其他形式的电磁波传输和表示数据,里面需要中继器和集线器设备。 2. 数据链路层 主要将网络层的IP数据包(分组)封装成帧(包含 ......
计算机网络 模型 OSI TCP IP

优惠券系统架构分层测试

数据层测试:主要测试优惠券数据存储的正确性和可靠性,包括优惠券的生成、存储、读取等操作是否符合要求。 网络层测试:主要测试网络通信的稳定性和安全性,包括网络连接、数据传输、加密传输等是否正常。 业务逻辑层测试:主要测试优惠券业务逻辑的正确性和合理性,包括优惠券的领取、使用、过期等逻辑是否符合业务需求 ......
优惠券 架构 系统

大数据开发的总体架构

很多小伙伴在学习了多年大数据后,最后不得不感慨:“大数据的知识太繁杂了,我已经被淹没在大数据的海洋里了!”确实是的,在大数据学习的过程中,随着学习的深入,越来越多的新名词和新框架让学习者有种欲哭无泪的感觉,那么,这篇博文就对大数据开发的一个总体架构做一个介绍吧,让大家学习过程中,不至于迷失方向。先上 ......
架构 总体 数据

第一天:计算机基础及服务器硬件组成

一、计算机系统的组成: 二、Linux调取计算器,及不同进制之间切换 1、bc ,命令进入计算器 2、obase=2 ,切换到2进制模式,类似也可以用obase=16,即切换到16进制 三、冯.诺依曼体系: 四、服务器硬件组成 1、CPU (1)指令集:CISC 复杂指令集 (X86),服务器上主流 ......
服务器 硬件 计算机 基础

Java学习第一节

数据类型 基本数据类型 整数类型 byte 1字节 short 2字节 int 4字节 long 8字节 浮点数类型 float 4字节 double 8字节 字符类型 char 2字节 布尔类型 boolean 1bit 引用数据类型 字符串类型 String 变量 内存地址 -->但为了好记起个 ......
Java

低代码如何实现插件化架构?

大家好,本文介绍了实现插件化的低代码架构的思路,以及在Meta3D(开源Web3D低代码平台)中具体实现的方案 需求 有同学想做个编辑器,希望可以随意替换引擎、编辑器UI,能以插件的形式进行扩展,问该如何实现? 下面,我们首先给出抽象的解决方案: 抽象的解决方案 如上图所示,编辑器由多个积木组成,其 ......
架构 插件 代码

java学习第一节

数据类型 -->约束在内存中开辟多大的空间 基本数据类型 整数类型 byte 1字节 short 2字节 int 4字节 long 8字节 浮点数类型 float 4字节 double 8字节 字符类型 char 2字节 布尔类型 boolean 1bit 引用数据类型 字符串类型 String 变 ......
java

2024年的第一天,我在博客园的新篇章

亲爱的读者们,大家好!在这个充满希望和期待的2024年的第一天,我怀着激动的心情在博客园开通了我的个人博客。这是我与你们分享生活、思考和感悟的崭新平台,也是我持续追逐写作梦想的新起点。 我始终坚信,文字是连接世界的精巧桥梁,更是抒发内心世界的卓绝工具。它能记录我们的生活,激荡我们的思绪,更能传递我们 ......
新篇 新篇章 博客 2024

浅谈sql执行流程、innodb架构设计、buffer pool缓存池

一.从服务端到数据库sql执行流程: 1.SQL接口:负责处理接收到sql的语句 2.查询解析器:负责将sql变成数据库可以看懂的语言 3.查询优化器:选择最优的查询路径(针对你编写的复杂sql语句生成查询路径树,然后从中选择一条最优的查询路径) 4.执行器:根据执行计划调用存储引擎接口(执行器会根 ......
缓存 架构 流程 innodb buffer

问题记录:MySQL查询第一次后获得结果后,再进行多次查询发现返回结果不变,执行到dao层不再执行sql

问题描述:查询MySQL数据库实时更新的数据,查询第一次后获得结果后,再进行多次查询发现返回结果不变,执行到dao层不再执行sql,问题原因是mapper文件中开启了二级缓存,获取一次结果后再次调用查询时直接从缓存中取,导致返回结果不能实时更新 直接放结论,是mybatis中的二级缓存问题 二级缓存 ......
结果 第一次 问题 MySQL dao

20.业务架构分析工具 plantuml

plantuml 介绍 UML:统一建模语言 plantuml:第三方插件工具 plantuml 官网:https://plantuml.com/zh/ plantuml 中文文档:https://ceshiren.com/t/topic/4530 plantuml 在线绘图地址:https://p ......
架构 plantuml 业务 工具 20

14.业务架构分析

业务知识梳理 业务架构:业务模块之间的关系 技术架构:技术组件之间的关系与通讯方式 组织架构:协作团队的组织关系 数据架构:数据的关联关系 业务架构分析工具 思维导图 plantuml @startmindmap * 登录 ** 账号密码登录 *** 账号输入框 *** 密码输入框 *** 登录按钮 ......
架构 业务 14

第一章 奇点

第一章 奇点 “我觉得咱们新来一个集体,应该做个自我介绍吧。”站在讲台上的是徐潇的班主任,个子不高,但那眼神令他不怒自威。“从我开始吧,我叫张超,是 2 班的班主任,在接下来的三年中,就由我带着大家一起学习了。”语毕,掌声稀稀拉拉的响了起来。“给你们两分钟,然后从你开始。”他指着徐潇说道。 徐潇既然 ......
共3770篇  :4/126页 首页上一页4下一页尾页