思考题 分布式mvc-mvp-mvvm架构
关于对MySQL高可用架构进行SQL阻断实现
通过Proxy SQL 实现SQL阻断 简介 由于安全管理，对高危SQL进行阻断 以下是测试环境MySQL物理架构图： 配置 在架构原有的基础上进行配置，通过proxy SQL进行SQL阻断配置，如下： -- 配置ProxySQL到MySQL各类账户（如存在则忽略该步） # 步骤一 在proxySQ ......
8第八章 分布式任务调度&人工审核
# 第八章 分布式任务调度&人工审核 ## [目标](#目标) - 能够理解什么是分布式任务调度 - 能够掌握xxl-job的基本使用 - 能够使用xxl-job解决黑马头条项目中定时任务的功能 - 能够完成自媒体文章人工审核功能 - 能够完成自媒体端文章上下架同步的问题 ## [1 分布式任务调 ......
4第四章 分布式事务与自媒体素材管理
# 第四章 分布式事务与自媒体素材管理 ## 目标 - 能够理解什么是分布式事务 - 能够理解CAP定理和BASE理论 - 能够掌握seata要解决的问题 - 能够完成seata集成到项目中使用 - 能够掌握分布式文件系统fastdfs的基本使用 - 能够完成素材管理功能 - 能够完成自媒体文章列 ......
微服务架构必读篇 - 网关
## 前言 由于互联网的高速发展，网络数据请求数激增，使得服务器承受的压力越来越大。在早期的系统架构中，为减轻单台服务器的压力，通常使用 Load Balancer 来将网络流量平摊到多个服务器中。如今后端服务的种类和数量在不断变多，传统的 Load Balancer 为主的系统架构的局限性就变得明 ......
celery 之 celery介绍架构和安装、celery执行异步任务、包结构celery、celery执行延迟任务和定时任务、django中使用celery、接口缓存
[toc] # 一、celery介绍架构和安装 ### 1、celery :分布式的异步任务框架，主要用来做： - 异步任务 - 延迟任务 - 定时任务 》如果只想做定时任务，可以不使用celery，有别的选择 ### 2、celery 框架，原理 ``` 1）可以不依赖任何服务器，通过自身命令，启 ......
11celery介绍架构和安装，celery执行异步任务，包结构celery，celery执行延迟任务和定时任务，django中使用celery，接口缓存
# 1 celery介绍架构和安装 ```python # celery :分布式的异步任务框架，主要用来做： - 异步任务 - 延迟任务 - 定时任务 》如果只想做定时任务，可以不使用celery，有别的选择 # celery 框架，原理 1）可以不依赖任何服务器，通过自身命令，启动服务(内部支持 ......
Spring Cloud 如何引入云原生网关，创新微服务架构
在传统的微服务体系中，Spring Cloud Alibaba 和 Zuul 常被用作配合 Spring Cloud 使用的微服务网关。然而，这些传统的 Java 网关在面对大规模流量的场景下仍存在种种问题。例如 Zuul 由于采用了非异步 IO 的架构，导致了其在面对高流量的情况下容易出现阻塞的现... ......
Momenta系统架构师C++实习一面
[TOC] 上来自我介绍之后，面试官很直接的说不问项目，直接问你C++相关问题，接下来就开始了一个小时的八股拷打。 ## C++部分 1. `介绍一下智能指针` **原理** 智能指针是一个类，用来存储指向动态分配对象的指针，==负责自动释放动态分配的对象，防止堆内存泄漏==。动态分配的资源，交给一 ......
DeepSpeed + Kubernetes 如何轻松落地大规模分布式训练
随着 ChatGPT 的广泛应用，各种大规模语言模型层出不穷，其中包括 EleutherAI 推出的 200 亿参数的 GPT-NeoX-20B 和 BigScience 发布的 1760 亿参数的 Bloom 模型。 ......
vivo 自研鲁班分布式 ID 服务实践
本文介绍了什么是分布式id，分布式id的业务场景以及9种分布式id的实现方式，同时基于vivo内部IT的业务场景，介绍了自研鲁班分布式Id服务的实践。 ......
关于微服务-分布式任务调度
应用场景 分布式任务调度主要用于以下场景： 分布式系统中的定时任务：在分布式系统中，有时需要在不同的服务节点上执行一些定时任务，例如数据同步、数据清理、定期报表生成等。分布式任务调度可以确保任务在各个节点上按时执行，并提供任务管理和监控能力。 大规模数据处理：当需要处理大量数据时，分布式任务调度可以 ......
【AI 充电】揭秘大语言模型实践：分布式推理的工程化落地才是关键！
## 分布式推理成为大模型落地的首选方案 随着 3 月 15 日 OpenAI 重磅发布了 GPT4，其在司法考试、程序编程上的惊艳表现，将大家对大模型的热情推向了顶点，人们纷纷讨论是否我们已经进入到通用人工智能的时代。与此同时，基于大语言模型的应用也如雨后春笋出现在大家面前，其在协同办公、客服对话 ......
常见的Web应用程序架构
资料：Common web application architectures | Microsoft Learn 微软的这篇文章，讨论了常见的web应用程序架构。大概可以分为三类： 1，新建的asp.net Core web项目，单体架构，在单个项目场景中，通过使用文件夹来实现关注点分离。如图： ......
微服务架构必读篇 - 网关
前言 -- 由于互联网的高速发展，网络数据请求数激增，使得服务器承受的压力越来越大。在早期的系统架构中，为减轻单台服务器的压力，通常使用 Load Balancer 来将网络流量平摊到多个服务器中。如今后端服务的种类和数量在不断变多，传统的 Load Balancer 为主的系统架构的局限性就变得明 ......
【从零开始学微服务】06.微服务架构的建设思路
>大家好，欢迎来到万猫学社，跟我一起学，你也能成为**微服务专家**。 微服务看起来很美，但其实是需要一个技术体系或平台体系来支撑并且落地的。微服务架构建设分为两种思路： - 框架模式 - 服务网格（Service Mesh）模式 接下来我们对上面的两个思路进行详细的介绍和对比。 # 框架 框架模式 ......
读发布！设计与部署稳定的分布式系统（第2版）笔记15_快速失败和替换
 # 1. 快速失败而非缓慢响应 ## 1.1. 如果响应缓慢比没有响应更糟，那么最坏的情况肯定是缓慢的失败响应 ......
聊天机器人的人工智能架构设计探讨如何设计高效的聊天机器人人工智能架构，提高其性能
作者：禅与计算机程序设计艺术 《65. 聊天机器人的人工智能架构设计 - 探讨如何设计高效的聊天机器人人工智能架构，提高其性能》 1. 引言 65. 聊天机器人的人工智能架构设计 - 探讨如何设计高效的聊天机器人人工智能架构，提高其性能》 1.1. 背景介绍 随着人工智能技术的快速发展，自然语言处理 ......
Adam优化算法在大规模分布式模型训练中的应用：模型整合与性能提升
作者：禅与计算机程序设计艺术 标题：45. Adam优化算法在大规模分布式模型训练中的应用：模型整合与性能提升 1. 引言 1.1. 背景介绍 随着深度学习模型的规模越来越大，训练过程需要大量的计算资源和时间。为了让模型能够高效地训练，一些优化算法被提出，以减少训练时间和提高模型性能。其中，Adam ......
2.具有紧支集的分布
# 2.具有紧支集的分布 ## 2.1:定义 在上一节中,我们引入了分布的定义,从泛函的角度来看,可以看作是基本空间$\mathscr{D}(X)$上的连续线性泛函.或者可以用如下的条件判断:对任意的紧子集$K\subset X$,都存在$C,k$使得: $$ |\langle u,\varphi\ ......
亚马逊实践 | 构建可持续发展的架构模型
可持续发展概念源于对系统性文明危机和世界问题的科学和社会意识形态研究。世界级的进步学术社群和政治精英在二十世纪末就认识到了这些问题的存在。他们将即将到来的二十一世纪视为充满不确定性、全球灾难进程逐步升级的时代。可持续发展对多个领域产生影响，目前已成为各国家、组织的战略重点。 亚马逊云科技开发者社区为 ......
对荒野中逃生的人来说，思考也是行动，行动亦是思考。
# 日常生活中的生存原则：找回思考与行动的平衡 在荒野的求生挑战中，我们深刻理解了思考与行动相互依存的重要性。然而，当我们身处舒适的日常生活中，我们往往会陷入两个极端：一是盲目行动而不思考，二是过度思考而迟迟不行动。这些情况都表明我们失去了思考和行动的平衡，而重新找回这个平衡，就需要我们将生存原则应 ......
分布式计算框架-MapReduce
MapReduce是分散->汇总模式的分布式计算框架，可供开发人员开发相关程序进行分布式数据计算。 MapReduce提供了2个编程接口:Map Reduce 其中 Map功能接口提供了分散的功能，由服务器分布式对数据进行处理。 Reduce功能接口提供了汇总（聚合）的功能，将分布式的处理结果汇总统 ......
支撑 “千万设备日活” 的创米数联 7 年微服务架构演进之路
作为小米生态链的一员，创米采用微服务架构支撑其千万日活的 IOT 设备。随着智能家居市场的快速迭代，创米面临着发布和迭代的稳定性挑战，同时需要解决多方 IOT 接入面临的性能和安全挑战。本文将为您一一道来创米是如何应对这些挑战的。 ......
P4Spring-02-Spring系统架构与Spring-03-核心概念
Spring-02-Spring系统架构 String Framework是Spring生态圈中最基础的项目，也是其他项目的根基 Core Container：核心容器 AOP：面向切面编程 Aspects：AOP思想实现 Data Access：数据访问 Data Integration：数据集成 ......
聊聊测试团队的基础架构建设
大概20年这个时候，听过公司一位架构师的分享，他提到了基础架构团队的定位和主要产出，即为整个技术团队提供所有研发活动开展所必须的基础设施。 关于技术基础设施的目标，他定义了如下三点： 成为全站稳定运行的基石 成为业务高速发展的保障 成为大家值得依赖的伙伴 换个角度，从测试工程师的视角来看，测试团队的 ......
即时通讯技术文集（第18期）：IM架构设计基础知识合集 [共16篇]
为了更好地分类阅读 52im.net 总计1000多篇精编文章，我将在每周三推送新的一期技术文集，本次是第18 期。 [- 1 -] IM系统的MQ消息中间件选型：Kafka还是RabbitMQ？ [链接] http://www.52im.net/thread-1647-1-1.html [摘要] ......
关于人工智能项目学习的思考
在我们学习一个小的项目的时候，我们别看我们有时候使用的是一个个封装好的库的模型，看起来很简单。我们可以从其中学到哪些东西呢？接下来我来总结一下。 1、对于一个NLP任务中，例如机器翻译，我们首先可以学习到机器翻译的整体过程，从数据选择->数据处理->模型选择->训练->模型评估。 2、数据的获取应该 ......