思考题 分布式mvc-mvp-mvvm架构
【scipy 基础】--统计分布
scipy.stats子模块包含大量的概率分布、汇总和频率统计、相关函数和统计测试、掩蔽统计、核密度估计、准蒙特卡罗功能等等。 这个子模块可以帮助我们描述和分析数据，进行假设检验和拟合统计模型等。 1. 主要功能 具体来说，scipy.stats子模块包括以下主要功能： 类别 说明 连续统计分布 包 ......
对Laxcus分布式操作系统的认知、价值、痛点解决的回答
下面是一位网友的提问，回答贴出来供大家参考，欢迎在下方留言评论。 问： Laxcus分布式操作系统有哪些与众不同的地方？它的价值在哪里？解决了哪些市场痛点？我公司现在已经使用Linux操作系统部署了一堆服务器，你如何说服我弃用Linux使用Laxcus？ 回答： Laxcus分布式操作系统是操作系统 ......
读像火箭科学家一样思考笔记11_实践与测试（上）
1. 测试存在的问题 1.1. 我们日常生活中的大多数决定靠的不是测试数据，而是直觉和有限的信息 1.2. 没有做过实验 1.2.1. 推出一款新产品 1.2.2. 更换职业 1.2.3. 尝试一种新的营销手段 1.2.4. 常找借口说，我们之所以不做测试，是因为缺乏资源 1.2.4.1. 新方法若 ......
工作&提升自身能力的一点思考
最近工作不顺，有一点思考，无处记录发到这里，多是胡言乱语，对其他人有一点作用就是超出预期了 工作至今6年多了，现在做推荐算法相关工作，我却一直认为自己不擅长提升业务指标，之前简单地以为是口味不同，最近思索之后发现是能力不足，例如 面对开放问题，不懂得如何做取舍，做出当下正确的判断 面对现有的系统，不 ......
《深入理解CentOS 7内核：架构和核心组件解析》
深入理解CentOS 7内核：架构和核心组件解析 CentOS 7作为一款流行的Linux发行版，其内核是整个系统的核心引擎，负责管理硬件资源、进程调度、文件系统等关键任务。深入理解CentOS 7内核的架构和核心组件对于系统管理员和开发人员来说是至关重要的，因为它直接影响到系统的性能、稳定性和安全 ......
VM虚拟机安装系统出现架构不兼容提示
报错内容： 无法打开此虚拟机的电源，因为此虚拟机需要使用 Arm 计算机架构，而该架构与此 X86 计算机架构主机不兼容。请参见知识库文章 84273。 解决方法： 这是因为镜像所需的架构和计算机本身的架构不兼容，比如我下载的就是arm64架构的iso镜像，但是我本身的电脑是win11系统，是x86 ......
聊聊分布式 SQL 数据库Doris(六)
负载均衡 此处的负载均衡指的是FE层的负载均衡. 当部署多个 FE 节点时，用户可以在多个 FE 之上部署负载均衡层来实现 Doris 的高可用。官方文档描述: 负载均衡 。 实现方式 实现方式有多种，如下列举。 开发者在应用层自己进行重试与负载均衡。 JDBC Connector 发现一个连接挂掉 ......
Hadoop-3.3.6分布式集群搭建步骤
1.下载JDK8 Linux 安装Openjdk 2.下载Hadoop3.3.6 Hadoop 安装及环境变量配置 3.创建hadoop数据存储的目录 mkdir -p /opt/hadoop/tmp /opt/hadoop/hdfs/data /opt/hadoop/hdfs/name 4.配置h ......
聊聊分布式 SQL 数据库Doris(五)
阅读 Doris SQL 原理解析，总结下Doris中SQL解析流程： 词法识别：解析原始SQL文本，拆分token 语法识别：将token转换成AST 单机逻辑查询计划：将AST经过一系列的优化（比如，谓词下推等）成查询计划，提高执行性能与效率。 分布式逻辑查询计划：根据分布式环境（数据分布信息、 ......
读像火箭科学家一样思考笔记10_反转的力量
1. 案例 1.1. 火星轨道探测器的原定程序是在距离火星地面150千米的安全高度切入轨道 1.2. 但事与愿违，它在距离地面57千米的高度进入火星，已经深入到大气层中了 1.3. 坠毁 1.4. 原因 1.4.1. 建造火星轨道探测器的洛克希德·马丁公司（Lockheed Martin）使用的是英 ......
SD Host控制器微架构设计
微架构设计思路 ahb_slave_if中的寄存器可以在datasheet中进行描述 sd_clk - 时钟产生模块的接口描述 sd_data_fsm和sd_cmd_fsm - 状态机描述 发送时序需要遵守,并且在发送的时候需要产生CRC 接受时序需要遵守,并且要接收CRC,进行比较 FiFo中有存 ......
为什么全序集降位和和逆序对在同一长度的排列的分布相同？
引入 在 q-analog 中，我们知道： \[\sum_{p\in S}q^{\operatorname{maj}(p)}=\sum_{p\in S}q^{\tau(p)}=\binom{\sum a_i}{a_1,a_2,\dots,a_n}_q \]其中 \(S\) 是 \(a_i\) 个 \ ......
关于人工智能算法的深度思考（总结）
1、神经元其实并不神奇，神奇的是它以某种相互联系的方式，可以在训练得到答案并核对答案后，立即对所走的路径上的权重进行更新（反向传播），更新的依据是答案误差大小，误差大则更新也大，误差小则更新就小。 所走路径：所有单次训练被激活的神经元的组合。 2、根据1，我们完全可以重新设计更好的神经元和神经网络， ......
在x86_64的ubuntu下载并运行aarch64架构的容器
在x86_64的ubuntu下载并运行aarch64架构的容器 docker仓库官网 https://hub.docker.com/ docker操作相关指令 #拉取docker镜像 sudo docker pull 镜像名称 #加载本地docker文件 sudo docker load -i 文件 ......
读像火箭科学家一样思考笔记09_重构问题
1. 了解找到正确问题而不是解决正确问题的重要性 1.1. 不是我们应该问的正确问题 1.1.1. 我们要寻找更好的问题，而不是更好的答案 1.1.2. 我们最初构思出来的问题并不是最好的问题 1.1.3. 我们发现的第一个难题往往也不是最应该解决的难题 1.2. 突破性思维与普通常识截然相反，它并 ......
关于点赞业务对MySQL和Redis和MongoDB的思考
点赞 在我个人理解中,点赞业务比较频繁,很多人业务可能都会有这个,比如:博客,视频,文章,动态,评论等,但是不应该是核心业务,不应该大量地请求MySQL数据库,给数据库造成大量的资源消耗,MySQL的数据库是非常宝贵的. 以某音为例,当我去搜索的时候,全抖音比较高的点赞数目应该是在1200w - ......
读像火箭科学家一样思考笔记08_发散思维
1. 接受不着边际的想法 1.1. 6只蜜蜂和6只苍蝇放进瓶里，谁会先找到出口 1.1.1. 蜜蜂喜欢光，由于瓶底靠近光源，它们会不断地撞向瓶底，直到累死或饿死 1.1.2. 蜜蜂是收敛思维者，它们把精力集中在看似最明显的出路上，而这种行为最终导致失败 1.1.3. 苍蝇无视“光的召唤”，它们“四处 ......
软件测试/人工智能|AutoGPT原理与架构介绍
简介 我们生活中已经有越来越多的人工智能融入了，手机汽车等等接入了越来越多的人工智能，人工智能就像是我们的一个助手一样。不仅能够理解我们的需求，而且还能够与我们一起学习与成长。人工智能已无缝融入我们工作、生活，并帮助我们有效完成各种目标。大模型技术的发展与应用，使以上想法成为现实。特别是ChatGP ......
科普：多领域分布式协同仿真
分布式协同仿真是一种在分布式计算环境中进行协同工作的仿真方法。使用该方法进行协同仿真时，仿真任务将被分发到多个计算节点上，并且这些节点可以同时工作以模拟完整的系统行为。分布式协同仿真已被广泛应用于工程、科学和军事领域，以便更好地模拟和理解大规模和复杂系统的行为。 分布式协同仿真有以下特点： 1.集成 ......
Kafka分布式消息队列
一、Kafka的的介绍 （一）、概述 1、Kafka是由LinkedIn开发的一个分布式的消息系统，底层使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。 2、Kafka是一个分布 ......
如何做好架构设计，架构设计有章可循吗？ | 京东云技术团队
设计一个系统的过程，就是建造一座大厦的过程，架构设计的质量直接决定了大厦的质量。 在我们进行系统的架构设计时，总是会遇到一系列的问题，比如一个大型系统的架构应该如何起步，从哪里开始设计？系统是否应该划分成多个模块，应该怎么划分模块才更加的合理？亦或是觉得产品提出的需求非常不合理，完全影响我们正常的架 ......
C++ lambda 内 std::move 失效问题的思考
最近在学习 C++ Move 时，有看到这样一个代码需求：在 lambda 中，将一个捕获参数 move 给另外一个变量。 看似一个很简单常规的操作，然而这个 move 动作却没有生效。 具体代码如下 std::vector<int> vec = {1,2,3}; auto func = [=]() ......
读像火箭科学家一样思考笔记07_探月思维
1. 挑战“不可能”的科学与企业 1.1. 互联网 1.1.1. 和电网一样具有革命性，一旦你插上电源，就能让自己的生活充满活力 1.1.2. 互联网的接入可以帮助人们摆脱贫困，拯救生命 1.1.3. 互联网还可以提供与天气相关的信息 1.2. 用廉价、可靠的互联网接入来照亮世界，并不是一件容易的事 ......
Web开发技术架构设计
Web开发技术架构设计是一项非常重要的工作，它关系到Web应用的性能、安全、可靠性等方面。以下是Web开发技术架构设计中需要考虑的几个方面： 1、前端技术架构设计 前端技术架构设计是Web开发技术架构设计中重要的一环。前端技术架构设计包括界面设计、交互设计、视觉设计、前端框架和库的选择、代码规范等方 ......
3高级篇--商城业务--压测--缓存--分布式锁
高级篇--商城业务 部分 本笔记从谷粒商城的P141（性能测试）开始记录 一、性能与压力测试 压力测试考察当前软硬件环境下系统所能承受的最大负荷并帮助找出系统瓶颈所在。压测都是为了系统在线上的处理能力和稳定性维持在一个标准范围内，做到心中有数。 使用压力测试，我们有希望找到很多种用其他测试方 ......
数据仓库中的架构
数据仓库的架构和相关建设规范 1.数据仓库的定义 官方定义 数据仓库是一个面向主题的、集成的、随时间变化的、但信息本身相对稳定的数据集合，用于对管理决策过程的支持。 这个定义的确官方，但是却指出了数据仓库的四个特点。 特点 面向主题：数据仓库都是基于某个明确主题，仅需要与该主题相关的数据，其他的无关 ......
分布式通讯方式比较（RPC、RMI、JMS、WebService、TIBCO）
在分布式服务框架中，最基本的问题就是网络服务间的远程通讯。根据计算机网络通讯的基本原理，网络服务间的通讯就是将数据流从一台PC传输到另一台PC，这一切都是基于网络传输协议与网络IO实现的。网络传输技术发展至今，我们常用的协议都是基于Socket而扩展出的传输协议，主要有HTTP、TCP、UDP，网络 ......
利用 docker 实现JMeter分布式压测
在工作中经常需要对一些关键接口做高QPS的压测，JMeter是由Java 语言开发，没创建一个线程（虚拟用户），JVM默认会为每个线程分配1M的堆栈内存空间。受限于单台试压机的配置很难实现太高的并发。所以，通过JMeter实现分布式，可以整合多台主机的硬件资源，实现同时对被测试接口进行压力测试。 ......
如何做好架构设计，架构设计有章可循吗？
设计一个系统的过程，就是建造一座大厦的过程，架构设计的质量直接决定了大厦的质量。 在我们进行系统的架构设计时，总是会遇到一系列的问题，比如一个大型系统的架构应该如何起步，从哪里开始设计？系统是否应该划分成多个模块，应该怎么划分模块才更加的合理？亦或是觉得产品提出的需求非常不合理，完全影响我们正常的架 ......
《架构漫谈》阅读笔记3
今天阅读了《架构漫谈》第三章的内容。 作为软件工程师或者架构师，我们大部分时候是要去解决别人的问题，“别人”是谁，是值得好好思考的。明白了问题的主体，这个主体就自然会带来很多边界约束。找出问题的主体，是做架构的首要问题。 要正确的认识问题，需要问两个问题： 这是谁的问题？ 有什么问题？ 架构漫谈的第 ......