分布式 缓存 业务 商城
缓存：系统设计中至关重要的一环
什么是缓存？ 缓存就像是一个超快速的存储区域，保存了计算机或手机经常使用的内容的副本，这样可以在不访问较慢的主存储器的情况下快速获取。 一个现实中的例子可以是，每当我们购买杂货时，通常会倾向于大量购买，这样可以让杂货多存放一段时间，避免频繁去市场购买，这其实就是将杂货缓存在我们附近，而不是每次都从市 ......
从分布式计算的角度看pytorch和TensorFlow哪个更优？
背景： pytorch框架是一个从学术圈出来的框架，因此pytorch并不原生支持分布式计算，而且在大模型火爆的今年以外好像在深度学习领域使用分布式计算的场景确实不多，所以pytorch并不原生支持分布式计算的事情好像也并无大碍，而且pytorch可以通过安装第三方库的方式实现同步形式的分布式计算。 ......
分布式缓存
单点redis的问题 数据丢失问题：Redis是内存存储，服务重启可能会丢失数据。解决：数据持久化 并发能力问题：单节点并发能力不足。解决：主从集群，读写分离。 故障恢复：需要自动的故障恢复手段。解决：Redis哨兵，实现健康检测和自动恢复。 存储能力问题：单节点Redis难以满足海量数据存储。解决 ......
《业务安全实战演练》时效绕过测试10
一、大多有利用的案例发生在验证码以及业务数据的时效范围上，在之前的总结也有人将12306的作为典型，故，单独分类。 1、时间刷新缺陷 12306网站的买票业务是每隔5s，票会刷新一次。但是这个时间确实在本地设置的间隔。于是，在控制台就可以将这个时间的关联变量重新设置成1s或者更小，这样刷新的时间就会 ......
【业务安全实战演练】密码找回模块测试08
一、验证码客户端回显测试 典型场景： 任意用户登录 使用验证码的场景： 人机验证：防止机器操作，爆破表单。唯一凭据：唯一性判断，任意账户登录。 找回密码测试中要注意验证码是否会回显在响应中，有些网站程序会选择将验证码回显在响应中，来判断用户输入的验证码是否和响应中的验证码一致，如果一致就会通过校验 ......
redis分布锁
1.什么是redis分布式锁 Redis分布式锁是一种利用Redis实现的锁机制，用于在分布式系统中保护共享资源的访问。它利用Redis的原子性操作和过期时间设置来实现互斥访问。 在分布式环境中，多个进程或线程可能同时访问共享资源，如果没有合适的机制来保护共享资源，就会导致数据不一致或竞争条件的发生 ......
【业务安全实战演练】业务流程乱序测试07
一、流程乱序测试 1 、测试原理和方法 该项测试主要针对业务流程的处理流程是否正常，确保攻击者无法通过技术手段绕过某些重要流程步骤，检验办理业务过程中是否有控制机制来保证其遵循正常流程。例如业务流程分为三步：第一步，注册并发送验证码；第二步，输入验证码；第三步，注册成功。在第三步进行抓包分析，将邮箱 ......
Redis缓存
Redis（Remote Dictionary Server）是一个开源的高性能键值对（key-value）存储系统，常被用作数据库、缓存和消息代理。它支持多种数据结构，如字符串、哈希表、列表、集合和有序集合。 为什么要用Redis？ 使用Redis有多个原因，包括： 高性能：Redis是基于内存存 ......
Seata：打造行业首个分布式事务产品
在 2019 年，我们基于 Dubbo Ecosystem Meetup，收集了 2000 多份关于“在微服务架构，哪些核心问题是开发者最关注的痛点？”的调研问卷。最终分布式事务问题在调研中占比最大，约占 54%。 ......
将Abp默认事件总线改造为分布式事件总线
@目录原理创建分布式事件总线实现自动订阅和事件转发使用启动Redis服务配置传递Abp默认事件传递自定义事件项目地址 原理 本地事件总线是通过Ioc容器来实现的。 IEventBus接口定义了事件总线的基本功能，如注册事件、取消注册事件、触发事件等。 Abp.Events.Bus.EventBus是 ......
记一次 .NET 某药厂业务系统 CPU爆高分析
一：背景 1. 讲故事 前段时间有位朋友找到我，说他们的程序出现了CPU爆高，让我帮忙看下怎么回事？这种问题好的办法就是抓个dump丢给我，推荐的工具就是用 procdump 自动化抓捕。 二：Windbg 分析 1. CPU 真的爆高吗 还是老规矩，要想找到这个答案，可以使用 !tp 命令。 0: ......
seata分布式事务不生效
Fegin调用使用了Fallback降级或抛出的异常被全局处理 解决： 1.通过 GlobalTransactionContext.reload(RootContext.getXID()).rollback() 进行手动回滚 服务A @Service public class ServiceAImp ......
DeepSpeed分布式训练
一、DeepSpeed 总纲 官方文档：DeepSpeed 官方英文文档 cpoy下来的原版 DeepSpeed 模型的训练是使用DeeSpeed引擎完成的 DeepSpeed引擎可以包装任何 torch.nn.module 类型的模型 二、训练 1、通过 deepspeed.initialize ......
分布式资源管理和调度
分布式资源管理和调度 分布式资源管理和调度是指在分布式系统中有效地管理和调度系统中的资源，以满足各种任务的需求。在一个分布式系统中，资源可以包括计算资源（如CPU、内存）、存储资源（如磁盘空间）、网络带宽等。 分布式资源管理的目标是实现高效的资源利用和公平的资源分配。它需要考虑以下几个方面： 资源发 ......
【最佳实践】京东小程序-LBS业务场景的性能提升
随着业务需求猛增、各种AB场景线上测试，交互复杂度提升，所以对门详的整体交互体验，小程序加载速度、列表的滚动性能以及业务数据层面都有更高的要求，因此作为前端研发团队，我们也迎来了一些新的挑战。 ......
李强 分布式计算、云计算与大数据 作者:林伟伟 著出版社:机械工业出版社出版时间:2015年11月
前 言背景分布式计算从20世纪六七十年代发展到现在，一直是计算机科学技术的理论与应用的热点问题，特别是*近几年，随着互联网、移动互联网、社交网络应用的发展，急需分布式计算的新技术——云计算、大数据，以满足和实现新时代计算机的应用需求。云计算、大数据等新技术本质上是分布式计算的发展和延伸，现有的书籍一 ......
分布式限流
Spring - 高并发系统限流-漏桶算法和令牌桶算法_spring 限流_当走的路甚远的博客-CSDN博客6种 分布式限流方案，我替你整理好了_Micrle_007的博客-CSDN博客 ......
《业务安全实战演练》业务数据安全测试
一、业务数据安全测试 1、商品支付金额篡改 案例1 靶场链接地址：Dashboard | Web Security Academy - PortSwigger。 使用提供的用户名和密码进行登录 wiener:peter 登录后查看我们的余额现在是100元 然后回到主页选择夹克进行购买 将夹克先添加到 ......
《业务安全实战演练》业务安全测试流程梳理
一、业务安全测试 1、 业务安全测试流程 1.1 测试准备 准备阶段主要包括对业务系统的前期熟悉工作，以了解被测试业务系统的数量、规模和场景等内容。 针对白盒测试，可以结合相关开发文档去熟悉相关系统的业务。 针对黑盒测试，可通过实际操作还原业务流程的方式理解业务。 1.2 业务调研 业务调研阶段主 ......
【项目学习】谷粒商城学习记录8 - 购物车
【项目学习】谷粒商城学习记录8 - 购物车 本节起将不对一些重复细节进行详细说明 一、环境搭建 & 准备工作 1.1. 创建新模块 注意java版本信息后面在pom.xml文件里修改 导入公共模块依赖 写配置信息 启动类加上注册发现和Feign功能 修改网关- id: gulimall_cart_r ......
uniGUI学习之禁用缓存(75)
引用了第三方js,css等文件，但是因为缓存的原因，修改后没有及时生效。方法一： 在ServerModule的OnHTTPCommand事件中，加入以下代码 AResponseInfo.CacheControl := 'max-age=0, no-cache, no-store, must-reva ......
页面缓存
页面缓存根据需求分为以下3类 类小程序：根据用户的跳转方法来决定如何操作页面缓存堆栈 历史记录：根据用户访问的历史记录缓存一定数量的页面，超过限定数量时采用新进先出 面包屑：根据面包屑结构，缓存当前页面的祖先页面 类小程序 需要解决的问题 实现以下常用跳转方法 navigateTo 保留当前页面，跳 ......
【转载】Springboot2.x 使用 Redisson 分布式可重入锁
参考 https://blog.csdn.net/weixin_43749805/article/details/131399516 https://github.com/redisson/redisson （官方仓库） https://github.com/redisson/redisson/tr ......
vue 组件缓存 keep-alive的include失效
include中添加的name属性，必须与对应的vue组件文件中的name属性保持一致 详见：https://www.jianshu.com/p/ab5191eb7f1d 翻译 搜索 复制 ......
2023-12-19 微信小程序开发之canvas生成图片存在缓存情况 ==》 生成第一次canvas，之后生成的canvas就不变了（开发工具存在此情况，真机实测不存在，所以就不用管了）
如图中数据 测试1： 满11元可用，第一次生成拿到的数据中确实是11元，之后生成的数据发生了变化，比如99元，把这份数据赋值给canvas时，生成的画布还是和第一次一样； 测试2：我在满**元可用这里的**用随机数替代，按理说如果是我提供的数据有问题那我用了随机数总能保证生成不同的数据了吧，结果是随 ......
业务负载分配
题目描述 现有一个服务器集群（服务器数量为 serverNum），和一批不同类型的任务（用数组 task表示，下标表示任务类型，值为任务数量）。 现需要把这批任务都分配到集群的服务器上，分配规则如下： 应业务安全要求，不同类型的任务不能分配到同一台服务器上 一种类型的多个任务可以分配在多台服务器上 ......
销售点分布调查
题目描述 终端部门按层级管理销售负责人，即：销售总裁直接对接公司分布在若干个国家的销售负责人，每个国家的销售负责人对接本国各大区负责人，大区负责人对接本区内各省负责人，各省负责人对接本省各市负责人等等…… 这里假设每个级别的负责人都仅向唯一的上级领导汇报。 假设共有N（N<100）位销售负责人，每人 ......
分布式锁
一、为什么使用分布式锁 保障集群服务的一致性 二、Redis 分布式锁实现 1、Java客户端现有问题 在程序运行结束和释放锁的两步操作中会存在时间窗口，可能存在线程不安全问题 2、使用Lua脚本实现 -- 目标：获取缓存值，如值与预期相等，则释放分布式锁 -- Lua 内置了一个 redis 对象 ......
分布式架构的演变过程
1. 单应用架构 此时用户量很少，所有功能全部都在一个应用中，应用和数据库部署在一台机器上。 2. 应用服务器和数据库服务器分离 随着系统访问量的再度增加，webserver机器的压力在高峰期会上升到比较高，这个时候开始考虑增加一台服务器，将数据库分离出去。 3. 应用服务器集群 突然有一天，发现系 ......