分布式 中间件 客户端 客户
Linux 中间件 | Perl 及 Perl 模块安装
Perl 作为脚本语言，应用范围也比较广泛。 本文环境，Amazon Linux release 2，全程用 root 用户。 Perl 安装 一、通常系统会自带，先确认一下 rpm -qa | grep perl 二、没有自带，或者版本不满足，可手动安装 官网下载需要的版本，后续步骤改成自己下载的 ......
分布式锁
参考：https://www.cnblogs.com/wangyingshuo/p/14510524.html 介绍 多线程环境下控制对共享资源的访问以保证数据一致性。 特点：跨进程、跨服务、跨服务器 互斥性 ——任意时刻，只有一个客户持有锁 超时释放——持有锁超时，可以释放，防止死锁 可重入——一 ......
中间件
中间件的介绍 官方定义：中间件就是一个用来处理Django的请求和响应的框架级别的钩子。它是一个轻量。低级别的插件系统，用于在全局范围内改变Django的输入和输出。每个Django中间件都负责一些特定的功能。 说直白一点中间件是帮助我们在视图函数执行之前和执行之后都可以做一些额外的操作。中间件的本 ......
云原生K8S精选的分布式可靠的键值存储etcd原理和实践
今天再下一个Go语言编写分布式键值存储的云原生组件ectd，了解其定义理、应用场景和特性，熟悉其整体架构和常用术语，进一步研究其读写和日志复制的原理，最后完整部署单示例和多实例集群和介绍一些常见命令。 ......
力扣 876. 链表的中间节点
876. 链表的中间结点 - 力扣（LeetCode） 这道题刚开始我是直接暴力遍历链表一遍得到长度，然后再通过长度的一半来再次遍历确定要返回的结点。 看题解发现有更简单更直观的方法，快慢指针法 1 struct ListNode* middleNode(struct ListNode* head) ......
JMeter+Jenkins分布式压测持续集成
Jenkins job配置 参数化构建 运行分布式shell脚本：sh ... 生成测试报告 配置生成html测试报告，需要安装插件 HTML Publisher JMeter 性能脚本 编写jmeter脚本/自定义Java脚本，脚本参数化，并且可带参数命令行执行 自定义Java脚本 jmeter脚 ......
贷款助贷个贷顾问客户助贷系统
贷款管理系统，不限坐席、支持一键拨号、支持通话录音、支持一键对接绝大多数数据商、客户实时提醒、公海自动回收、黑名单限制、支持上门拜访登记、支持业绩统计、支持客户信息推广录入等等，欢迎体验。本人亲自开发，支持二次开发。 使用php语言开发，thinkphp6+mysql+redis+websocket ......
一款 SpringBoot 项目下最优雅的 HTTP 客户端工具RetrofitHttp
大家都知道okhttp是一款由square公司开源的java版本http客户端工具。实际上，square公司还开源了基于okhttp进一步封装的retrofit工具，用来支持通过接口的方式发起http请求。 如果你的项目中还在直接使用RestTemplate或者okhttp，或者基于它们封装的Htt ......
retrofit-plus是一款基于retrofit2实现的轻量级httpClient客户端工具
因为其简单与出色的性能，Retrofit 是安卓上最流行的HTTP Client库之一。 不过它的缺点是在Retrofit 1.x中没有直接取消正在进行中任务的方法。如果你想做这件事必须手动杀死，而这并不好实现。 Square几年前曾许诺这个功能将在Retrofit 2.0实现，但是几年过去了仍然没 ......
7-springboot-多数据源事务管理-jta+atomikos的分布式事务
jta+atomikos的分布式事务 <!--jta+atomikos分布式事务--><dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jta-atomikos</arti ......
redis stream 命令行客户端和java客户端使用
redis stream 是发布订阅机制的升级版本，或者说是 redis pub/sub 的升级版，是redis 5的新增特色，redis的 stream就是一个简单的消息队列。 redis 的发布订阅极度不可靠，它不支持持久化，不管是消费者下线，还是消息积压都会导致消息丢失 消息积压的默认处理方式 ......
redis rejson 命令行客户端使用和java客户端使用
下载rejson插件 地址Releases · RedisJSON/RedisJSON (github.com) 1.04版本下面有直接编译号的，别的版本需要手动编译 下载以后吧文件放到 redis-6.0.9/module 目录下面 module 需要自己创建，放在别的地方也可以 需要修改权限: ......
爬取的数据，存到mysql中、爬虫和下载中间件、加代理，cookie，header，加入selenium、去重规则源码分析（布隆过滤器）、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫：写的一个个类 -引擎： -调度器：排队，去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
.net mvc使用websocket服务器及客户端简易代码
.net MVC服务端 Func<AspNetWebSocketContext, Task> func = new Func<AspNetWebSocketContext, Task>(async (socketContext) => { WebSocket socket = socketConte ......
客户端由于"Identity Theft"被加入黑名单
问题：客户端总是连不上。 登陆到WLC检查，客户端在exclusion list中。原因是"Identity Theft"。 根本原因：客户端的IP地址在WLC的client上已经存在。 解决方法：忘记wifi，重新连接获取新的IP地址解决 ......
0 爬取的数据，存到mysql中 、1 爬虫和下载中间件、 2 加代理，cookie，header，加入selenium、3 去重规则源码分析（布隆过滤器） 、4 scrapy-redis实现分布式爬虫
0 爬取的数据，存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......
LeetCode|876. 链表的中间结点
题目链接：876. 链表的中间结点 难度简单829收藏分享切换为英文接收动态反馈 给你单链表的头结点 head ，请你找出并返回链表的中间结点。 如果有两个中间结点，则返回第二个中间结点。 示例 1： 输入：head = [1,2,3,4,5] 输出：[3,4,5] 解释：链表只有一个中间结点，值为 ......
Solon2 接口开发: 分布式 Api Gateway 开发预览
建议使用专业的分布式网关产品，比如： nginx apisix [推荐] k8s ingress controller 等... 对 Solon 来讲，只有 Gateway：它调用本地接口时，则为本地网关；调用远程接口时，则为分布式网关。 1、一个简单的分布式接口网关效果预览 基于上一节的 ApiG ......
分布式锁的实现
多线程对同一资源的竞争，需要用到锁，例如Java自带的Synchronized、ReentrantLock。但只能用于单机系统中，如果涉及到分布式环境（多机器）的资源竞争，则需要分布式锁。分布式锁的主要作用： 保证数据的正确性： 比如：秒杀的时候防止商品超卖，表单重复提交，接口幂等性。 避免重复处理 ......
django 使用django-bootstrap4插件时，使表单呈2列或其他列分布时的写法
前言 django 使用django-bootstrap4插件时，使表单呈2列或其他列分布时的写法。 在django-bootstrap4中没有内置的方法设置表单内容成几列分布，这里采用bootstrap4的栅格布局实现效果 具体操作 forms.py class RegisterForm(User ......
分布式理论
一、分布式理论 1.CAP理论 CAP理论是说对于分布式数据存储，最多只能同时满足一致性（C，Consistency）、可用性（A， Availability）、分区容忍性（P，Partition Tolerance）中的两者。 1.一致性 是指对于每一次读操作，都能够读到最新写入的数据，且每个节点 ......
客户端保存文件组件FileSaver.js的简单使用
FileSaver.js 是在客户端保存文件的解决方案，非常适合需要生成文件 语法： FileSaver saveAs(Blob/File data, optional DOMString filename, optional Boolean disableAutoBOM) 示例： <canvas ......
第7章【拓展思考】航空公司客户流失分析
一、实战背景 如今的营销已经远远不同于过去了，那个一张传单一则广告的时代结束了，这是个大数据的时代。 一个时代有一个时代的生存法则，那些没有适应时代的企业，即使曾经是个庞然大物，今天也几乎不见踪影。 在航空公司这个特殊的领域，国内竞争还是很严峻的，一个顾客的流失造成的损失是4-5个新顾客的流入所不能 ......
C++ 迪利克雷（Dirichlet）分布
遇到一个要使用 dirichlet 分布的情形，发现 C++ 标准库中没有现成的。查阅维基百科发现，虽然它挺复杂，但是它跟 Gamma 分布有如下关系： 设有 K 个相互独立且分别满足 Gamma 分布的分布： $$Y_1 \sim Gamma(\alpha_1, \theta), ..., Y_K ......
分布式协议与算法实战 - 分布式算法 gossip QuorumNWR PBFT ZAB
Gossip 二阶段提交协议和Raft需要大部分节点能够工作，在极端情况，如只有一个节点能正常运行，这些方法就不适用了。根据Base理论要实现最终一致性。 Gossip协议利用一种随机、带有传染性的方式，将信息传播到网络中，并在一定时间内使所有节点数据一致。 直接邮寄（Direct Mail）：直接 ......
docker-selenium分布式环境搭建（基于selenium的grid分布式框架）
说明：docker-selenium分布式是基于selenium的grid分布式框架进行搭建 以下是docker-selenium分布式网络拓扑图： 从图中可以看出： 1）docker-selenium可以用作浏览器兼容性测试； 2）docker-selenium分布式，可以提高测试用例的执行效率， ......
Redis实现分布式锁
Redis实现分布式锁 前言 分布式锁的实现有三种方式 数据库乐观锁 基于Redis的分布式锁 基于Zookeeper的分布式锁 分布式锁满足的条件 为了确保分布式锁可用，我们至少要保证锁的实现同时满足以下几个条件 互斥性：在任意时刻只有一个客户端能持有锁 不会死锁：即使有一个客户端在持有锁的期间发 ......
分布式ID生成-雪花算法(Snowflake)
1 描述 使用原生Java方式生成雪花算法, 雪花算法是推特公司开源的生成唯一ID的算法, 性能更高，可以避免对第三方依赖的使用, 减少耦合 1）能满足高并发分布式系统环境下ID不重复 2）基于时间戳，可以保证基本有序递增，即按照时间趋势递增（有些业务场景对这个有要求） 3）算法本身不依赖第三方的库 ......
scrapy架构介绍、scrapy解析数据、scrapy解析数据、持久化方案、全站爬取cnblogs文章、爬虫和下载中间件、加代理，cookie，header，加入selenium
# 1 selenium -登录cnblogs，拿到cookie，再打开cnblogs，写入cookie，它就是登录状态 -半自动点赞 》selenium生成的cookie，给requests用 -selenium操作浏览器，速度慢 -requests速度快 -动作链 -自动登录12306 # 2 ......