分布式 一代 框架 任务
fastapi框架
@fastapi框架 官方：https://fastapi.tiangolo.com/zh/ fastapi，一个用于构建 API 的现代、快速（高性能）的web框架。 fastapi是建立在Starlette和Pydantic基础上的，Pydantic是一个基于Python类型提示来定义数据验证、 ......
分布式电源选址定容，储能选址定容。 matlab程序 粒子群(
分布式电源选址定容，储能选址定容。matlab程序粒子群(考虑时序与不考虑)、改进灰狼（考虑时序）：以总网损最低或电压偏差最低为目标函数。多目标粒子群：网损和电压。IEEE69节点系统为例（matpower进行潮流计算，可换其他节点，可改分布式电源数据例子为3个分布式电源），对比接入前后电压、网损变 ......
异步编排多任务异步执行
参考: https://blog.csdn.net/teachy/article/details/104971814 创建线程池: /** * 自定义线程池 * int corePoolSize, 核心线程数 = CPU核数 * int maximumPoolSize,最大线程数 = CPU核数 * ......
GitHub创建Github Action流水线来定时执行任务
1、github Action （工作流） 简单理解就是自动化部署、测试。也就是之前人工手动部署变为现在由机器（服务器）自动部署、测试了。 2、新建任务脚本 找一个自己的不重要的仓库（必须是public），创建任务脚本record.sh，脚本就是定期要做的动作 #!/usr/bin/env bash ......
分布式系统的技术栈
构建分布式系统的目的是增加系统容量，提高系统的可用性。说白了就是干两件事。一是提高整体架构的吞吐量，服务更多的并发和流量，二是为了提高系统的稳定性，让系统的可用性更高。 1、如何提高整体架构的吞吐量，服务更多的并发和流量？ 1） 提高系统性能的常用技术 缓存系统：在分布式系统中，添加缓存可以有效提高 ......
分布式系统架构的问题和解决思路
1、亚马逊做分布式服务架构，遇到了哪些问题，如何解决的？ 1) 采用分布式系统架构后出现的问题： 一个线上故障的工单会在不同的服务和不同的团队中转过来转过去； 每个团队都可能成为一个潜在的 DDoS 攻击者，除非每个服务都要做好配额和限流； 监控和查错变得更为复杂。除非有非常强大的监控手段； 服务发 ......
分布式的原理
分布式系统是建立在网络之上的多台计算机，这些计算机通过网络协调工作，共同完成某个任务的系统。 分布式系统具有以下主要特点： 多台计算机：由多台网络连接的计算机组成。 分布式数据存储：数据存放在多台计算机上，需要进行分布式数据管理。 分布式计算：任务在多台计算机上共同完成，需要进行负载均衡和协调。 无 ......
阿里飞天系统中分布式系统设计
一、协调服务(女蜗) 女娲（Nuwa）系统为飞天**提供高可用的协调服务**（Coordination Service），是构建各类分布式应用的核心服务，它的作用是采用类似文件系统的树形命名空间来让分布式进程互相协同工作。例如，当集群变更导致特定的服务被迫改变物理运行位置时，如服务器或者网络故障、配 ......
Java Jackson框架使用小技巧
Jackson框架： Jackson是一个简单的、功能强大的、基于Java的应用库。它可以很方便完成Java对象和Json对象(xml文档or其它格式）进行互转。Jackson社区相对比较活跃，更新速度也比较快。 Jackson库有如下几大特性： - 高性能且稳定：低内存占用，对大/小JSON串，大 ......
本地事务&分布式事务
一、本地事务 1、事务的基本性质 数据库事务的几个特性：原子性(Atomicity)、一致性(Consistency)、隔离性或独立性(Isolation) 和持久性(Durabilily)，简称就是 ACID。 原子性：一系列的操作整体不可拆分，要么同时成功，要么同时失败 一致性：数据在事务的前后 ......
linux 定时任务只保留7天内的文件和目录
shell脚本 #!/bin/bash ######################### #删除7天之前的文件 # ######################### tmp_path=/tmp/test/* find ${tmp_path} -maxdepth 0 -type d -ctime ......
老杜MyBatis框架从入门到精通（一）MyBatis概述
mybatis做为目前国内最为流行的开源orm框架，我们平时在使用时会感受到其带来的诸多便利，但是很少去深入分析，mybatis源码代码量不多，功能丰富，是一个很好的学习样例，本系列文章就和大家一起来学习mybatis框架 本系列笔记根据动力节点B站上老杜讲的mybatis教程整理~ 学习地址：ht ......
hadoop中distcp的mapreduce任务中的task0详解及优化
distcp 是 Hadoop 中一个用于数据复制的工具，可用于大规模数据复制场景。在 distcp 执行过程中，会运行多个 MapReduce 任务，其中第一个任务通常被称为 "task0" 或 "main task"。 task0 主要负责以下操作： 解析命令行参数并生成 distcp 配置。 ......
最后的分布式事务 有用
第1章 分布式事务 课程安排 第一篇章： 分布式事务基础知识 分布式事务的解决方案分析 2PC方案： atomik os 最终一致性方案 -事务消息： RocketMQ 第二篇章： 最终一致性方案-本地消息表（seata框架AT模式） 最终一致性方案-TCC补偿：（seata框架TCC模式） 分布式 ......
Go开源世界主流成熟ORM框架gorm实践分享
在GoLang世界中有很多优秀的ORM库，今天就介绍主流之一的GORM三方库，了解其核心功能，然后从其支撑数据类型模型和约定开始巩固其基础，接着以安装gorm库及其mysql驱动为基础编写常见CRUD代码示例，进入了解其事务、转换、分片等知识，最后演示其Json序列化示例。 ......
量化之 win 平台下部署与执行定时任务
量化之 win 平台下部署与执行定时任务 该教程在 win 11 的平台下是没问题的，其他版本系统唤醒计算机可能需要自己调试下。创建任务计划执行 python 脚本流程如下： 效果图 每天股市收盘后，任务计划唤醒计算机执行数据更新，指标计算，然后生成自动复盘文档，自动推送到 github ，自动部署 ......
【QoS预测】基于概率分布检测的混合集成QoS预测
论文题目： A probability distribution detection based hybrid ensemble QoS prediction approach 问题： 随着Web服务数量的快速增长，如何在大规模场景中发现服务以满足用户个性化需求已成为业界和学术界的热门话题。基于Qo ......
Django-rest-framework框架
web应用模式、API接口、接口测试工具postman、如何在浏览器中测试、restful规范、序列化反序列化、基于Django原生编写五个接口、drf介绍和快速使用、drf之APIView源码分析 ......
Django-rest-framework框架
一、web应用模式 Django框架就是一种web框架,专门用来写web项目,之前学的,写的BBS项目,图书管理系统,用的都是前后端混合开发 -后端人员，写后端，也要写【模板语法】 》xx.html的python代码 -全栈开发-->前后端混合时代，比较多 从今天开始,学的是前后端分离 -后端人员， ......
搭建框架的思想
梳理框架实现的功能需求 支持编写测试自动化用例（测试方法） 用例数据 >excel，yaml，py文件也可以 读取Excel操作 收集用例，运行，生成报告 日志处理 配置文件 >配置 被测函数，环境URL，用例文件名等，数据库地址用户名密码，接口地址 邮件发送（框架实现，jenkins集成） 支持数 ......
利用redis实现 分布式锁
利用redis实现 分布式锁 1.给需要添加锁的地方添加锁 @GetMapping("/get") public String test(HttpServletRequest request) throws InterruptedException { System.out.println("beg ......
rocket mq实现分布式事务
使用rocket mq实现分布式事务 发送半消息 -> 执行本地事务 -> 回查本地事务执行状态 -> 第二个服务消费事务消息 1.参照下面链接去安装rocketmq https://blog.csdn.net/weixin_43464076/article/details/127766159 ro ......
基于C#和Blazor开发的前后端分离框架
Known是基于C#和Blazor开发的前后端分离快速开发框架，开箱即用，跨平台，一处代码，多处运行。 开源地址 https://gitee.com/known/Known 开发环境 .NET 7 VS2022 概述 基于C#和Blazor实现的快速开发框架，前后端分离，开箱即用。 跨平台，单页应用 ......
【分布式事务】解决方案
2PC 说到2PC就不得不聊数据库分布式事务中的 XA Transactions。 在XA协议中分为两阶段: 第一阶段：事务管理器要求每个涉及到事务的数据库预提交(precommit)此操作，并反映是否可以提交. 第二阶段：事务协调器要求每个数据库提交数据，或者回滚数据。 优点： 尽量保证了数据的强 ......
【分布式事务】TCC改造
转载自：https://mp.weixin.qq.com/s/8TUXkxJwDTEInYtITboeVQ 注意事项： 空回滚： 悬挂： 幂等控制： 业务数据并发访问控制：TCC的一阶段Try预留资源后，二阶段操作前，预留的资源不会被释放；如果此时其他分布式事务尝试修改相关资源，会出现分布式事务的并 ......
ET框架6.0分析二、异步编程
概述 ET框架很多地方都用到了异步，例如资源加载、AI、Actor模型等等。ET框架对C#的异步操作进行了一定程度的封装和改造，有一些特点： 显式的或者说强调了使用C#异步实现协程机制（其实C#的异步编程天生就能实现这种用法） 强制单线程异步 没有使用C#库的Task，自己实现了ETTask等类 实 ......
何谓分布式体系结构，举例说明
分布式体系结构可以看作是将一个大型系统或应用程序分解成多个小的、相互独立的子系统或模块，并将这些子系统或模块部署在不同的计算节点上，通过网络连接起来共同完成整个系统或应用程序的功能。 举例来说，一个电子商务平台可以被拆分成多个子系统或模块，如用户认证、商品管理、订单处理、支付等。每个子系统或模块都可 ......
spring框架_ApplicationContext实现
ApplicationContext实现 ApplicationContext有四个经典实现 ClassPathXmlApplicationContext :经典容器，基于classpath下xml格式的配置文件来创建 FileSystemXmlApplicationContext:基于磁盘路径下x ......
python控制windows 任务计划程序 获取具体单一任务
import win32com.client TASK_ENUM_HIDDEN = 1 TASK_STATE = {0: 'Unknown', 1: 'Disabled', 2: 'Queued', 3: 'Ready', 4: 'Running'} scheduler = win32com.cli ......
程序开发中spring框架要怎么学习呢?
Spring框架很难么？ 程序开发中spring框架要怎么学习呢? Spring学习路径 SpringFramework 大家通常提到的Spring其实是指SpringFramework，它是一个开源的Java企业级应用开发框架，提供了一套完整的编程与配置模型，降低了应用的开发复杂度，让开发者能够更 ......