实时bytehouse技术

Rsync + Lsync 实时同步数据部署

1、环境 服务器名称 IP地址 备注 backup-24-109 172.16.24.109 源 backup-24-108 172.16.24.108 目标 2、源主机Rsync安装 # dnf -y install rsync # vi /etc/rsync_exclude.lst test t ......
实时 数据 Rsync Lsync

混合多云第二课——混合技术如何每年为京东节省上亿元成本?

大家好,我叫侯竹玲,欢迎大家收看我在京东做研发。接下来我来介绍混合多云第二课 全场景混布。 为什么要介绍混部?因为现在除了互联网企业以外,各大国央企、金融企业都在探索全量业务容器化,那么容器化之后又希望不同的特征业务的工作负载,能够进行不同的调度,充分利用负载之间消峰填谷的这种效应,让工作负载可以更 ......
成本 技术

特斯拉FSD技术优化改进分析

特斯拉FSD技术优化改进分析 特斯拉FSD Beta v11.3.1 版本:全新视觉化功能改进 特斯拉的全自动驾驶系统一直在不断地改进和升级,这次的更新增加了一些令人兴奋的新功能,这次加入更人性化的控制、更精确的路线规划以及更生动的视觉效果。马斯克在推特上表示,最新的FSD Beta 是「一个很重要 ......
技术 FSD

为什么是技术合伙人被踢出局

业务体量以及技术变迁的缘故 如果业务只是几千的访问,单体技术就可以,通俗来说就是找个毕业两三年的大学生就可以搞定的事情。但如果业务大了,访问过万甚至过千万,就需要分布式技术。也就是服务器要搞好几台,数据库需要拆分成好几个。如果当时找来的合伙人就已经拥有过千万访问的技术,就很难被踢出局。技术也是会变迁 ......
合伙人 技术

新来个技术总监,把 RabbitMQ 讲的那叫一个透彻,佩服!

整体阅读时间,在 40 分钟左右。 大家好,我是楼仔! 常见的消息队列很多,主要包括 RabbitMQ、Kafka、RocketMQ 和 ActiveMQ,相关的选型可以看我之前的系列,这篇文章只讲 RabbitMQ,先讲原理,后搞实战。 文章很长,如果你能一次性看完,“大哥,请收下我的膝盖”,建议 ......
总监 RabbitMQ 技术

区块链技术以及简单的说明

区块链技术是一种分布式数据库技术,它允许多个用户在没有中央机构或中介的情况下进行交易和共享数据。具体来说,区块链技术将所有的交易和数据记录在一个被称为区块链的公共账本上,这个账本由众多的节点组成,每个节点都有一份完整的副本。每个区块包含一个或多个交易记录,以及一个用于验证这些交易的哈希值。这些区块被 ......
区块 技术

东方联盟揭示了 CatB 勒索软件的规避技术

据观察,CatB 勒索软件操作背后的威胁行为者使用一种称为DLL 搜索顺序劫持的技术来逃避检测并启动有效载荷。 CatB,也称为 CatB99 和 Baxtoy,于去年年底出现,据说是基于代码级相似性的另一种勒索软件 Pandora 的“进化或直接更名”。 值得注意的是,Pandora 的使用归因于 ......
联盟 技术 软件 CatB

浅析基于AI视频智能检测预警技术在矿山安全生产场景中的应用

通过识别皮带和人员及姿势,检测到皮带上坐人时,将立刻触发告警并抓图留证,并且语音提醒通知前方;事件触发后生成带有标记框的视频录像文件。 ......
安全生产 矿山 场景 智能 技术

mock技术之moco

地址:https://github.com/dreamhead/moco,可以查看详细文档和源码 下载地址:https://repo1.maven.org/maven2/com/github/dreamhead/moco-runner/ 选择需要的版本下载jar包,放入目录,例如D:\mock fo ......
技术 mock moco

Servlet技术

1. Servlet (1)Servlet 技术是对原生 Java API 进行了封装,形成了一套新的 API,称为 Servlet API。方便我们进行动态网页开发。 (2)一个 Servlet 程序就是一个按照 Servlet 规范编写的 Java 类,程序员只需要编写代码去实现 Servlet ......
Servlet 技术

技术同学如何面对裁员浪潮?

转载:https://www.cnblogs.com/imyalost/p/16830624.html 经常看我文章的同学应该知道,我今年经历了一次裁员。 裁员后我复盘了裁员让我明白的一些职场规则,以及对自己的一些触动。 具体内容可以看前面的文章:《30岁被裁,我想明白的几件事》。 近几个月一直在寻 ......
浪潮 同学 技术

传统企业,如何构建性能测试技术体系

转载:https://www.cnblogs.com/imyalost/category/848600.html 之前有朋友介绍,帮一家知名的美妆零售企业,做过一次技术咨询,给我的个人感触还是比较大的。 可能是我在互联网企业工作的比较久,已经习惯了尝试新鲜技术和方法,通过快速的工程实践去落地解决问题 ......
性能 体系 传统 技术 企业

性能测试技术笔记(二):如何准备测试环境和数据

转载:https://www.cnblogs.com/imyalost/p/17023276.html 这篇文章,继续分享工作笔记中关于性能测试的内容。 上一篇文章聊了如何快速上手压测工作的几个切入点和注意事项,这些内容可以帮助我们更快的介入项目。 但实际工作中,前期的准备工作也是很繁琐的,其中测试 ......
性能 环境 笔记 数据 技术

性能测试技术笔记(一):如何快速上手压测工作

转载:https://www.cnblogs.com/imyalost/p/17022275.html 新年第一个工作日,继续整理之前的技术笔记。 前面通过三篇的内容,将自动化测试相关的技术笔记做了整理汇总。 这篇内容,主要是我刚开始做性能测试时的一些记录,对新手或者刚进入一个新项目的同学,应该有所 ......
性能 笔记 技术

性能测试技术笔记(三):如何设计一个压测平台

转载:https://www.cnblogs.com/imyalost/p/17031603.html 前面两篇笔记介绍了如何快速上手压测项目以及压测前准备测试环境和测试数据的一些方法。 这篇文章,我想分享下关于压测平台功能设计和技术实现方案的一些技术笔记内容,内容主要来源于两方面: 18年我所在性 ......
性能 笔记 平台 技术

一种基于实时大数据的图指标解决方案

在电商金融等多个领域,现在主要利用图来建模,并由业务人员根据图指标提出需求。但图指标时效性差、创建修改程序十分繁琐,元数据没有同意的管理分类,这导致开发运维都十分困难,根据此痛点,今天来介绍一项基于实时大数据的图指标解决方案。 ......
实时 指标 解决方案 方案 数据

大数据计算引擎 EasyMR:拥抱开源,引领技术创新

身处数字经济时代,随着大数据应用越来越广泛,越来越多的企业和组织开始关注大数据基础平台的建设和运营。在认识到其的重要性之后,如何具体着手搭建或采购大数据基础平台成为下一步需要解决的问题。 在大数据基础平台中,大数据组件是非常重要的一部分,包括数据存储、数据处理、数据分析、数据可视化等。在选择大数据组 ......
技术创新 引擎 数据 EasyMR 技术

【Unity3D】Unity3D技术栈

1 前言 ​ 本文梳理了笔者在学习 Unity3D 的过程中,对 Unity3D 的理解和学习路线,以帮助读者循序渐进地学习 Unity3D,后续笔者仍会持续更新 Unity3D 相关技术栈,并同步到本文中。 ​ 1)Unity 相关网站 Unity 官网:https://unity.cn/ Uni ......
Unity3D Unity3 Unity 技术 3D

Web前端技术栈(待更新......)

一、HTML 1、什么是HTML 1.1、初识HTML HTML:==Hyper Text Markup Language(超文本标记语言)== 超文本包括:文字、图片、音频、视频、动画等 HTML5的优势 ①世界知名浏览器厂商对HTML5的支持 ​ 1、微软 ​ 2、Google ​ 3、苹果 ​ ......
前端 技术 Web

ByteHouse:基于 ClickHouse 的实时计算能力升级

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 ByteHouse 是火山引擎数智平台旗下云原生数据分析平台,为用户带来极速分析体验,能够支撑实时数据分析和海量离线数据分析;便捷的弹性扩缩容能力,极致的分析性能和丰富的企业级特性,助力客户数字化转型。 ByteH ......
ClickHouse 实时 ByteHouse 能力

系统设计中的有限状态机FSM技术解析

FSM(有限状态机)是一种数学模型,用于描述系统或程序的行为,SM的状态机设计要点包括确定状态集合、转移函数、初始状态和结束状态,绘制状态图和转移表格,以及状态机的实现。其设计要点包括以下几个方面: 确定状态集合:需要明确系统可能的所有状态,并将其表示为一个状态集合。状态集合应该包含系统的所有可能状 ......
状态 系统 技术 有限 FSM

【云原生-DevOps】企业级DevOps平台搭建及技术选型-CICD篇

又是开篇 上一篇文章我们大概分享了DevOps项目管理中怎么企业级搭建 本篇文章主要介绍两个子系统【CICD、效能看板】 CICD系统 CI(Continuous Integration):指持续集成,它属于开发人员的自动化流程。 持续集成是一种软件开发实践,团队开发成员经常提交代码到代码仓库,通常 ......
DevOps 平台 技术 企业 CICD

读后笔记 -- Java核心技术(第11版 卷I )Chapter1-2 Java 程序设计

本书源码(下载对应版本的代码):https://horstmann.com/corejava/index.html Java 17 API 文档:https://docs.oracle.com/javase/17/docs/api 配套视频讲解(卷一):https://space.bilibili. ......
读后 Java 程序设计 Chapter1 核心

【UE技术案例】场景交互雪

一. “画笔”与“画板” 1.1 RT的使用 Render Target 可以当Texture使用,相当于一张画布,通过蓝图节点或函数在上面绘制图案 Render Target 的两种使用方式: 直接使用 Draw Material to Render Target,直接绘制材质 Begin Dra ......
场景 案例 技术

【分布式技术专题】「分布式技术架构」一文带你厘清分布式事务协议及分布式一致性协议的算法原理和核心流程机制(Paxos篇)

概念简介 Paxos是一种基于消息传递具有高度容错特性的一致性算法,是目前公认的解决分布式一致性问题最有效的算法之一。 发展历史 Paxos算法的发展历史追溯到古希腊,当时有一个名为“Paxos“的小岛, 岛上采用一会的形式通过法令, 议会中议员通过信使进行消息传递,议员与信使都是兼职的,他们随时都 ......
分布式 技术 一致性 算法 架构

python进阶:带你学习实时目标跟踪

摘要:本程序主要实现了python的opencv人工智能视觉模块的目标跟踪功能。 本文分享自华为云社区《python进阶——人工智能实时目标跟踪,这一篇就够用了!》,作者:lqj_本人 。 前言 本程序主要实现了python的opencv人工智能视觉模块的目标跟踪功能。 项目介绍 区域性锁定目标实时 ......
实时 目标 python

千亿参数开源大模型 BLOOM 背后的技术

假设你现在有了数据,也搞到了预算,一切就绪,准备开始训练一个大模型,一显身手了,“一朝看尽长安花”似乎近在眼前 …… 且慢!训练可不仅仅像这两个字的发音那么简单,看看 BLOOM 的训练或许对你有帮助。 近年来,语言模型越训越大已成为常态。大家通常会诟病这些大模型本身的信息未被公开以供研究,但很少关 ......
模型 背后 参数 BLOOM 技术

基于Kafka和Elasticsearch构建实时站内搜索功能的实践

目前我们在构建一个多租户多产品类网站,为了让用户更好的找到他们所需要的产品,我们需要构建站内搜索功能,并且它应该是实时更新的。本文将会讨论构建这一功能的核心基础设施,以及支持此搜索能力的技术栈。 ......
Elasticsearch 实时 功能 Kafka

ChatGPT强势爆红,背后的技术原理是?一文轻松搞懂!

作者:小牛呼噜噜 | https://xiaoniuhululu.com 计算机内功、源码解析、科技故事、项目实战、面试八股等更多硬核文章,首发于公众号「小牛呼噜噜」 大家好,我是呼噜噜,最近一段时间被ChatGPT疯狂刷屏,自从2022年11月发布上线后,不仅 5 天时间便突破百万用户,月活用户突 ......
强势 原理 背后 ChatGPT 技术

逐句回答,流式返回,ChatGPT采用的Server-sent events后端实时推送协议Python3.10实现,基于Tornado6.1

善于观察的朋友一定会敏锐地发现ChatGPT网页端是逐句给出问题答案的,同样,ChatGPT后台Api接口请求中,如果将Stream参数设置为True后,Api接口也可以实现和ChatGPT网页端一样的流式返回,进而更快地给到前端用户反馈,同时也可以缓解连接超时的问题。 Server-sent ev ......
Server-sent 实时 Tornado6 ChatGPT Python3