分布式 中间件 客户端 客户
SuperSocket 服务端 和 SuperSocket.ClientEngine 客户端及普通客户端
internal class Program { //static void Main(string[] args) //{ // byte[] arr = new byte[1024]; // 1.创建socket对象 // Socket socket = new Socket(AddressFa ......
jmeter分布式测试安装部署步骤
一、下载linux版本的jdk 注：下载的jdk和jmeter要与window的jdk和jmeter一致 下载地址：https://www.oracle.com/java/technologies/downloads/#java11 二、在虚拟机中使用su root 超级管理员的账号进行操作，在/u ......
MySQL客户端建立连接的两种类型
MySQL客户端建立连接的两种类型 通常，默认情况下，客户端连接MySQL服务器有两种类型： 使用 Unix 套接字文件通过文件系统中的文件进行连接（默认/tmp/mysql.sock）， 或者使用通过端口号连接的 TCP/IP（此类通常涉及远程网络交互）。 Unix 套接字文件连接比 TCP/IP ......
Vcenter 虚拟机迁移: 未接收到客户机操作系统检测信号。客户机操作系统无响应
现象 执行 vMotion 迁移时，显示以下兼容性警告： 从 source_server 迁移: 未接收到客户机操作系统检测信号。客户机操作系统无响应，或 VMware Tools 配置不正确 (Migration from source_server: No guest OS heartbeats ......
NestJs 中间件
https://docs.nestjs.cn/9/middlewares 中间件简介 中间件是在路由处理程序 之前 调用的函数。 中间件函数可以访问请求和响应对象，以及应用程序请求响应周期中的 next() 中间件函数。 next() 中间件函数通常由名为 next 的变量表示。 Nest 中间件实 ......
使用wsimport快速生成soap客户端代码
在jdk的bin目录下 cmd进入操作界面 使用命令 wsimport.exe -encoding utf-8 -keep -s 输出java文件路径 wsdl文件路径 ......
Redis 使用Redisson+Rlock实现分布式锁
使用setnx+Lua脚本实现分布式锁会有一个问题：如果操作共享资源的时间大于过期时间，就会出现锁提前过期的问题，进而导致分布式锁直接失效。如果锁的超时时间设置过长，又会影响到性能。 如果操作共享资源的操作还未完成，锁过期时间能够自己续期就好了 对这个问题 Redisson 提供了现成的解决方案。 ......
Jmeter搭建分布式压测环境
最近在做性能测试，本来以为一台压力机就够啦，但是在压测一个查询接口的时候，当TPS达到500多的时候就开始报错，经过定位是压力机出现啦瓶颈，于是决定对压力机做一下分布式，经过调试环境部署成功，再次压测时候问题解决。下面记录一下部署分布式环境的过程。 使用的工具及版本： JDK：1.8.0_211 J ......
frp内网穿透环境搭建--服务端ubuntu 客户端win10
前提条件：1个公网ip服务器，例如腾讯云服务器ubuntu20 下载frp软件，下的是0.33.0版本，该版本直接把软件封装成服务，能用ubuntu直接定义开机自启等 github：https://github.com/fatedier/frp.git 注意查看ubuntu系统的架构是arm还是am ......
安装MYSQL_5.0/8.0教程（附数据库和客户端工具下载链接）
1. Mysql5.7下载 网盘下载（推荐）： 链接：https://pan.quark.cn/s/d98d2536f847提取码：kbyN 官网下载： mysql下载地址： https://dev.mysql.com/downloads/windows/installer/8.0.html 跳转到 ......
详解大数据中必不可少的消息中间件 kafka（3.x 新版本）
楔子 本次来聊一聊 kafka，相信大家都知道它是一个应用于大数据实时领域、基于发布/订阅模式的分布式消息中间件（或者说消息队列），能够和不同的进程进行通信，从而实现上下游之间的消息传递。有了消息队列之后，上游服务和下游服务就无需直接通信了，上游服务将消息发送到队列中，下游从队列中去取即可，从而实现 ......
分布式系统——分布式ID方案
分布式ID介绍 在分布式系统中，我们经常需要生成全局唯一的标识符，例如订单号，用户id，消息id等。这些标识符通常被称为分布式id。分布式id有以下几个常见的要求： 全局唯一：不同的节点或服务不能生成重复的id。 高性能：生成id的速度要快，不能成为系统的瓶颈。 低延迟：生成id的过程要尽可能简单， ......
分布式系统——并发条件下如何保证缓存与DB数据一致性
什么是数据一致性 我们常说的数据一致性指的是在程序运行过程中本地缓存、分布式缓存、数据库三者之间的数据一致性 常见的本地缓存有 hashmap、currenthashmap、guava cache、caffeine 分布式缓存常见的有 redis、memcache 常见数据不一致常见有： 本地缓存与 ......
多维随机变量及其分布
《二维随机变量》 注意 在分布函数中 P{X<=x 且 Y<=y} 而且有性质： 这个性质在求概率密度的未知数时有用 这个公式结合一下二维前缀和算法就能很好明白了 《二维离散型随机变量》 注意一下分布律的求法，其中的概率记住：X与Y是 且 《二维连续型随机变量》 具体练习看书P65 《高数知识》 到 ......
Hive 如何巧用分布函数percent_rank()剔除极值求均值
场景描述 前期写过一篇关于剔除订单极值求订单均值的案例，之前使用的是 dense_rank 函数对订单金额进行排序后，过滤掉最大值最小值后进行处理，最近工作刚好使用到分布函数percent_rank，想起来应该也可以用到这个场景； percent_rank() 简介 percent_rank() 函 ......
flask CBV写法/中间件/异常捕获/请求与响应/session/请求扩展
flask cbv写法 基于类的视图写法 from flask import Flask, request from flask.views import MethodView, View app = Flask(__name__) app.debug = True # 必须要继承MethodVie ......
分布式系统——基于Redis的分布式锁的实现
分布式锁的介绍 分布式锁是分布式系统中用于协调多个进程或线程之间并发访问共享资源的一种机制。在分布式系统中，由于各个节点之间的通信存在延迟、故障等问题，可能会导致数据的不一致性。为了保证数据的一致性，需要使用分布式锁来协调各个节点的并发访问。 在分布式系统中，多个节点同时访问共享资源可能会导致以下问 ......
大数据经典论文解读 - 分布式锁 Chubby
Chubby 在谷歌“三驾马车”中3个系统都是单Master系统，这个Master是系统的单点，一旦Master故障集群就无法提供服务。使用Backup Master，通过监控机制进行切换。但是： 如何实现Backup Master和Master完全同步？ 监控程序也是单点，如何确定是Master宕 ......
人工智能运用--我的银行大众客户存款增长预测模型介绍（2）
特征处理的实现代码如下： #先对年龄缺失值进行处理，这里先按28岁填充处理客户年龄，因为年龄基本服从正态分布，初步考虑分为0-20,20-30,30-40,40-50,50-60，70-80,80-100分别标记为 age_class1,......,age_class8'''Train['NTRL ......
人工智能运用--我的银行大众客户存款增长预测模型介绍
很久以前就想研究一下到底是怎么因素影响银行个人存款，特别是大众客户（个人日均存款1万-10万元客户）的存款变化到底同说明有关系？ 初步的设想是利用大学数学数据统计的基本方法，列出可能的影响因素，通过公开的数字进行分析评价，但受限于数据来源、数据规模、影响因数如服务质量、地域等的量化困难，一直没有认真 ......
Redis添加分布式锁
1.不是高并发的场景 stringRedisTemplate.opsForValue.setIfAbsent("zql","人在代码在",10,TimeUnit.SECONDS);//只加过期限制 2.高并发的场景 如果加锁的过期时间小于业务执行时间，那么需要给每个线程的锁加这个线程的唯一标识，让每 ......
ceph分布式存储搭建
CEPH分布式存储搭建 本文通过参考臧 雪 园 老师的文档根据实际操作做修改，详细视频链接参考： https://edu.51cto.com/course/15982.html 集群配置信息： 安装的ceph版本： 配置所需源的地址 wget -O /etc/yum.repos.d/CentOS-B ......
redis使用setnx+lua实现分布式锁
在Redis中，使用SETEX命令（对应RedisTemplate的setIfAbsent方法）可以实现一个最简易的分布锁。SETEX命令当key不存在的话，才会设置key的值，如果可以已经存在，就不做任何操作。 为了避免锁无法被释放，就给这个key（也就是锁）设置一个过期时间。 为了保证解锁操作的 ......
正则表达式--获取两个字符串中间的字符串
public static void main(String[] args) { // String text3 = "啊啊啊标题@多项选择题描述@呵呵呵呵"; // String reg3 = "(?<=标题@)[\\s\\S]*(?=描述@)"; // Pattern p3 = Pattern. ......
SignalR服务端及客户端实现
服务器端： 引用nuget： 1、Microsoft.AspNet.SignalR.SelfHost 2、Microsoft.Owin.Cors internal class Program { static void Main(string[] args) { string uri = "http ......
windows下使用pytorch进行单机多卡分布式训练
现在有四张卡，但是部署在windows10系统上，想尝试下在windows上使用单机多卡进行分布式训练，网上找了一圈硬是没找到相关的文章。以下是踩坑过程。 首先，pytorch的版本必须是大于1.7，这里使用的环境是： pytorch==1.12+cu11.6 四张4090显卡 python==3. ......
876. 链表的中间结点
876. 链表的中间结点 给你单链表的头结点 head ，请你找出并返回链表的中间结点。 如果有两个中间结点，则返回第二个中间结点。 示例 1： 输入：head = [1,2,3,4,5] 输出：[3,4,5] 解释：链表只有一个中间结点，值为 3 。 示例 2： 输入：head = [1,2,3, ......
kafka（java客户端）生产者消费者不能连接虚拟机kafka
报错如下： ...:localhost:9092... java.net.ConnectException: Connection refused: no further information at sun.nio.ch.SocketChannelImpl.checkConnect(Native ......
c++socket编程之客户端编写
开头 用WIN API完成了socket客户端的编写 cursor很适合用于写这种单文件的WIN API代码编写，写的很规范，它帮助我完成了API的调用，参数的选择和异常值处理，自己去写还挺费时间 但不得不吐槽下，我提的几个处理中文和处理多任务的需求，无论我换何种说法，它实现的都不太好，甚至还有错误 ......