分布式 事务 方案
7-springboot-多数据源事务管理-jta+atomikos的分布式事务
jta+atomikos的分布式事务 <!--jta+atomikos分布式事务--><dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jta-atomikos</arti ......
老系统优化方案
前言：接手一个老系统，我们可以从哪些方面去思考如何优化呢？ 参考链接：常见性能优化策略的总结，作者：美团技术团队 首先，需要了解项目背景，以及优化诉求； 再次，分析问题所在代码，画出业务流程图；最后选择合适的优化方案：代码（算法）、数据库调优、SQL语句调优、缓存、异步、JVM调优、多线程和分布式。 ......
基于AI视频智能分析技术的人员睡岗离岗检测方案及应用场景
支持离岗时间自定义设置，检测离开多长时间才算离岗，可根据岗位规定，允许值班人员上班上洗手间的时间，超过时间即触发告警，减少误报几率。 ......
图片显示（后端返回接口在预览中展示图片，响应无返回）后端返回二进制图片前端乱码解决方案
https://blog.csdn.net/weixin_46801282/article/details/123386264 解决方案一:后端把图片转码成base64再发送过来 router.get('/test', (req, res) => { fs.readFile('./test.png' ......
火山引擎 VeDI 零售行业解决方案 聚焦精准营销场景提升品牌转化
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 你知道，为了能让你买到合适的商品，品牌商们有多努力吗？ 精准营销并不是一个新词，但近年来，随着营销渠道/平台的更加丰富，精准营销的应用场景也正在经历新一轮的拓展，比如在短视频领域，凭借更灵活的展现形式（移动端）、更 ......
爬取的数据，存到mysql中、爬虫和下载中间件、加代理，cookie，header，加入selenium、去重规则源码分析（布隆过滤器）、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫：写的一个个类 -引擎： -调度器：排队，去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
0 爬取的数据，存到mysql中 、1 爬虫和下载中间件、 2 加代理，cookie，header，加入selenium、3 去重规则源码分析（布隆过滤器） 、4 scrapy-redis实现分布式爬虫
0 爬取的数据，存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......
智慧轨道交通运维监控解决方案
智慧交通运维一体化管理解决方案，从IT设施的全生命周期进行监测和预警，将人工运维转化为自动运维，将被动维护转化为主动维护，将单点监控转化综合监测，提高态势感知、风险监测、故障告警、大数据分析等能力。对铁路运输全网信息进行跨地域、跨网段、跨设备的全维度可视化监测，主动监测和发现网络异常事件，实时告警，... ......
Chrome公网访问本地服务跨域问题【解决方案】
第一步：在chrome浏览器地址栏输入：chrome://flags/#block-insecure-private-network-requests，打回车 ，打回车。 ......
在制品WIP处理方案[转]
WIP在制品的概念：如前期所述，按期间的在制品与按订单在制品处理是不相同的，这个基于成本管理逻辑与需求不同。但是，项目实践中，SAP的标准WIP方案，往往不能满足客户的需求，这就需要进行分析，并变通执行。 SAP标准方案-在制品WIP总览： 首先需认真体会，理解上图所描述的SAP标准在制品逻辑。 S ......
JS 超大文件上传解决方案:分片断点上传(一)
以ASP.NET Core WebAPI 作后端 API ，用 Vue 构建前端页面，用 Axios 从前端访问后端 API ,包括文件的上传和下载。 准备文件上传的API #region 文件上传 可以带参数 [HttpPost("upload")] public JsonResult upl ......
JavaScript 超大文件上传解决方案:分片断点上传(一)
IE的自带下载功能中没有断点续传功能，要实现断点续传功能，需要用到HTTP协议中鲜为人知的几个响应头和请求头。 一. 两个必要响应头Accept-Ranges、ETag 客户端每次提交下载请求时，服务端都要添加这两个响应头，以保证客户端和服务端将此下载识别为可以断点续传的下载： Accept-R ......
PHP 超大文件上传解决方案:分片断点上传(一)
PHP用超级全局变量数组$_FILES来记录文件上传相关信息的。 1.file_uploads=on/off 是否允许通过http方式上传文件 2.max_execution_time=30 允许脚本最大执行时间，超过这个时间就会报错 3.memory_limit=50M 设置脚本可以分配的最大 ......
浅谈集合之线程安全方案
List 一般方法 自定义 ArrayList 子类：手动同步/加锁，复杂度高。 Vector（Java 1.0）： 特点：大量方法签名使用 synchronized 对象锁（全局锁）。 说明：性能差。 Collections.synchronizedList：（Java 1.2）同步代理类 特点： ......
Solon2 接口开发: 分布式 Api Gateway 开发预览
建议使用专业的分布式网关产品，比如： nginx apisix [推荐] k8s ingress controller 等... 对 Solon 来讲，只有 Gateway：它调用本地接口时，则为本地网关；调用远程接口时，则为分布式网关。 1、一个简单的分布式接口网关效果预览 基于上一节的 ApiG ......
分布式锁的实现
多线程对同一资源的竞争，需要用到锁，例如Java自带的Synchronized、ReentrantLock。但只能用于单机系统中，如果涉及到分布式环境（多机器）的资源竞争，则需要分布式锁。分布式锁的主要作用： 保证数据的正确性： 比如：秒杀的时候防止商品超卖，表单重复提交，接口幂等性。 避免重复处理 ......
django 使用django-bootstrap4插件时，使表单呈2列或其他列分布时的写法
前言 django 使用django-bootstrap4插件时，使表单呈2列或其他列分布时的写法。 在django-bootstrap4中没有内置的方法设置表单内容成几列分布，这里采用bootstrap4的栅格布局实现效果 具体操作 forms.py class RegisterForm(User ......
MySQL大数据表处理的三种方案，查询效率嘎嘎高！
场景： 当我们业务数据库表中的数据越来越多，如果你也和我遇到了以下类似场景，那让我们一起来解决这个问题 数据的插入,查询时长较长 后续业务需求的扩展 在表中新增字段 影响较大 表中的数据并不是所有的都为有效数据 需求只查询时间区间内的 评估表数据体量 我们可以从表容量/磁盘空间/实例容量三方面评估数 ......
Linux 解决方案1 --- 数据同步
一、概要 1. 承上启下 (1) Rock Linux 系列4 SSH (2) Rocky Linux 系列5 rsync (3) Rocky Linux 系列6 inotify-tools 2. 问题的提出 (1) 我们需要解决什么问题？ a. 网站发布之后多个节点的文件同步； b. 数据库备份文 ......
分布式理论
一、分布式理论 1.CAP理论 CAP理论是说对于分布式数据存储，最多只能同时满足一致性（C，Consistency）、可用性（A， Availability）、分区容忍性（P，Partition Tolerance）中的两者。 1.一致性 是指对于每一次读操作，都能够读到最新写入的数据，且每个节点 ......
多线程顺序执行四种方案
一、方案一（join） public static void main(String[] args) { final Thread t1 = new Thread(() -> System.out.println("线程1执行")); Thread t2 = new Thread(() -> { t ......
微前端解决方案
微前端已经是一个非常成熟的领域了，但开发者不管采用哪个现有方案，在适配成本、样式隔离、运行性能、页面白屏、子应用通信、子应用保活、多应用激活、vite 框架支持、应用共享等用户核心诉求都或存在问题，或无法提供支持。本文提供一种基于 iframe 的全新微前端方案，完善的解决了这些核心诉求。 将微前端 ......
一种基于实时大数据的图指标解决方案
在电商金融等多个领域，现在主要利用图来建模，并由业务人员根据图指标提出需求。但图指标时效性差、创建修改程序十分繁琐，元数据没有同意的管理分类，这导致开发运维都十分困难，根据此痛点，今天来介绍一项基于实时大数据的图指标解决方案。 ......
C++ 迪利克雷（Dirichlet）分布
遇到一个要使用 dirichlet 分布的情形，发现 C++ 标准库中没有现成的。查阅维基百科发现，虽然它挺复杂，但是它跟 Gamma 分布有如下关系： 设有 K 个相互独立且分别满足 Gamma 分布的分布： $$Y_1 \sim Gamma(\alpha_1, \theta), ..., Y_K ......
分布式协议与算法实战 - 分布式算法 gossip QuorumNWR PBFT ZAB
Gossip 二阶段提交协议和Raft需要大部分节点能够工作，在极端情况，如只有一个节点能正常运行，这些方法就不适用了。根据Base理论要实现最终一致性。 Gossip协议利用一种随机、带有传染性的方式，将信息传播到网络中，并在一定时间内使所有节点数据一致。 直接邮寄（Direct Mail）：直接 ......
爬虫相关 scrapy架构介绍、scrapy解析数据、settings相关配置，提高爬取效率、持久化方案、全站爬取cnblogs文章、
==scrapy架构介绍== # 引擎(EGINE) 引擎负责控制系统所有组件之间的数据流，并在某些动作发生时触发事件。 # 调度器(SCHEDULER) 用来接受引擎发过来的请求, 压入队列中, 并在引擎再次请求的时候返回. 可以想像成一个URL的优先级队列, 由它来决定下一个要抓取的网址是什么, ......
C# 动态创建类，动态创建表，支持多库的数据库维护方案
简介 本文主要介绍使用 利用 SqlSugar 来实现多数据库的维护 ，动态建类CRUD，动态建表 ，全局过滤器 ，跨库查询等功能 1、创建表 SqlSugar支持了3种模式的建表(无实体建表、实体建表，实体特性建表)，非常的灵活 可以多个数据库 MYSQL MSSQL ORACLE SQLITE ......