链路 分布式 工具jaeger

.NET使用分布式网络爬虫框架DotnetSpider快速开发爬虫功能

前言 前段时间有同学在微信群里提问,要使用.NET开发一个简单的爬虫功能但是没有做过无从下手。今天给大家推荐一个轻量、灵活、高性能、跨平台的分布式网络爬虫框架(可以帮助 .NET 工程师快速的完成爬虫的开发):DotnetSpider。 注意:为了自身安全请在国家法律允许范围内开发网络爬虫功能。 框 ......
爬虫 分布式 DotnetSpider 框架 功能

分布式系统-异步

异步,是分布式系统重要的设计原则之一。 为什么异步很重要呢? 试想一个场景,在电商业务中,用户下单并支付成功后,需要给店家推送一个消息,告诉店家来订单了,抓紧发货。 这个推送功能,如果和支付回调接口做成同步,会有什么问题呢? 要知道,系统总是不可能绝对稳定的。如果推送接口异常或者超时了,主流程就会受 ......
分布式 系统

分布式系统-负载均衡

分布式系统中,业务系统都是集群部署,而且一般会做微服务化。那么,从一个系统rpc请求到另一个系统,应该路由到哪一台节点呢?这,就涉及到负载均衡。 负载均衡的核心,便是负载均衡算法,算法有很多,主要介绍其中六种,并说一说各自算法的优缺点。 1. 加权随机 加权随机,顾名思义,就是路由到哪一台节点,是通 ......
分布式 系统

从0到1,手把手带你开发截图工具ScreenCap------001实现基本的截图功能

从0到1,手把手带你开发一款截屏工具ScreenCap,001版本,实现基本的截图功能,实现全屏截图,实现局部截图,实现保存截图,实现截图另存为 ......
截图 ScreenCap 功能 工具 001

分布式资源调度框架YARN

1、YARN=Yet Another Resource Negotiator 2、主从架构,一主多从3、主=ResourceManager,从=NodeManager4、ResourceManager由ApplicationManager和ResourceScheduler组成5、NodeManag ......
分布式 框架 资源 YARN

redis分布式锁实现原理

在.net core 中,可以使用StackExchange.Redis实现redis分布式锁, /// <summary>/// 分布式锁/// </summary>/// <param name="Redis">RedisDB</param>/// <param name="Key">锁标识</ ......
分布式 原理 redis

【pysmb】smb远程共享下载文件的工具类

from smb.SMBConnection import * class SMBClient: """ SMBClient类,用于连接smb服务器,获取文件 :ip, :port(445 or 139), :username: 用户名. :password: """ def __init__(se ......
文件 工具 pysmb smb

[效率大杀器] go工具篇:dlv + goland 实现远程调试

dlv + Goland 远程调试 远程调试就是使用使用本地 IDE 来调试远程服务器上的服务。本地打断点,调用远程服务的接口。本地就会停在断点。 相当于 debug 远程服务。优点是可以保持环境的一致性。 dlv 的安装 git 仓库:https://github.com/derekparker/ ......
效率 工具 goland dlv

探索正则可视化工具:让编程更直观、高效

导语:在当今的编程世界中,正则表达式已成为不可或缺的技能。然而,理解和编写正则表达式往往是一项具有挑战性的任务。为了降低门槛,提高编程效率,正则可视化工具应运而生。 一、正则表达式的简介与历史 正则表达式(Regular Expression,简称:Regex)是一种强大的文本处理工具,其最早的雏形 ......
正则 工具

分布式系统的困难点

分布式系统在技术上需要注意的问题 问题1:异构系统的不标准问题 问题2:系统架构中的服务依赖性问题 问题3:故障发生的概率更大 问题4:多层架构的运维复杂度更大 ......
分布式 难点 系统

codegeex 程序员代码工具

一、codegeex 简介 CodeGeeX是清华和智谱AI联合打造的多语言代码生成模型。 官网地址:https://codegeex.cn/ 二、安装方法 1、支持IDE如下:vscode、GoLand、IntelliJ IDEA等 2、支持语言如下:python、C++、Go、Java等 3、以 ......
程序员 codegeex 代码 工具 程序

pure::variants—产品平台化及变体管理工具

pure::variants是德国pure-systems公司的产品,其目的是帮助企业实现对产品线的变体管理,提高企业项目资产的复用效率。pure::variants的核心理念是运用产品线管理方法对项目资产(项目计划、需求、模型、功能模块、代码、测试用例)进行系统的复用管理,将管理的关注点从单个产品... ......
变体 管理工具 variants 工具 产品

分布式事务-Seata解决方案

一、定义 Seata解决方案是分布式事务解决方案之一。常用的分布式事务解决方案有:2PC,3PC,TCC,SAGA(seata)、本地消息表、MQ消息事务、最大努力通知。 Seata是一款分布式解决方案,致力于提供高性能和简单易用的分布式事务服务。提供事务模式有:AT,TCC,SAGA,XA。其中A ......
分布式 解决方案 事务 方案 Seata

XAML格式化工具:XAML Styler [转载]

XAML格式化工具:XAML Styler XAML格式化的意义 在开发WPF应用过程中,编写XAML时需要手动去缩进或者换行,随着时间的推移或者参与开发的人增多,XAML文件内容的格式会越来越乱。要么属性全都写在一行,内容太宽一屏无法完整展现;要么属性单独占一行,难以直观的看清结构;另外xaml元 ......
XAML 格式 工具 Styler

word-开发者工具的使用

一、制作一个文档,如下所示,空白的区域没有内容时,提示用户 步骤: 1、开发者工具 选择文字区域 设计模式 根据输入相对应提示文字, 2、电话一栏:选中后,ctrl+鼠标可以复制一份,选择设计模式修改提示文字即可 3、性别;选框号带√按钮,选择属性 选择选中标记和未选中标记的状态即可 4、日期:开发 ......
开发者 工具 word

Javake可视化故障处理工具-VisualVM

VisualVM( All-in-One Java Troubleshooting Tool)是功能最强大的运行监视和故障处理程序之一,曾经在很长一段时间内是Oracle官方主力发展的虚拟机故障处理工具。 Oracle曾在VisualVM的软件说明中写上了“All-in-One”的字样,预示着它除了 ......
VisualVM 故障 工具 Javake

分布式主键

核心概念 :: ShardingSphere https://shardingsphere.apache.org/document/current/cn/features/sharding/concept/ 分布式主键 传统数据库软件开发中,主键自动生成技术是基本需求。而各个数据库对于该需求也提供了 ......
分布式

[JDK/APM] 应用诊断工具之jcmd

0 序言 工欲善其事,必先利其器。最近遇到一个生产环境的极难排查的问题,已经消耗了近一段时间的较多心力了,故今日稳固和新学习一下JVM相关的诊断工具,以便于磨刀霍霍向"BUG" 1 jcmd 概述 1.1 jcmd 简述 jcmd 是在 JDK1.7 以后,新增了一个命令行工具。 即 支持的最低版本 ......
工具 jcmd JDK APM

JAVA操作Redis工具类

import lombok.extern.slf4j.Slf4j; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.data.redis.core.RedisTempl ......
工具 Redis JAVA

使用百度完成gui的图像处理(需要下载百度的javasdk文档,主要工具带代码在sdk之中,以下代码为如何利用代码实现图像增强和特效处理)

package Gui; import com.baidu.aip.imageprocess.AipImageProcess; import org.json.JSONObject; import javax.imageio.ImageIO; import javax.swing.*; import ......
代码 图像 图像处理 特效 之中

基于Browscap对浏览器工具类优化

项目背景 原有的启动平台公共组件库comm-util的浏览器工具类BrowserUtils是基于UserAgentUtils的,但是该项目最后一个版本发布于 2018/01/24,之至今日23年底,已有5年没有维护更新,会造成最新版本的部分浏览器不能正确获取到浏览器信息。(至于为什么停更了获取不到最 ......
Browscap 浏览器 工具

[JDK/APM] 应用诊断工具之VisualVM

1 概述 1.1 简介 VisualVM is a visual tool integrating commandline JDK tools and lightweight profiling capabilities. See https://visualvm.github.io for det ......
VisualVM 工具 JDK APM

多开工具对手机应用网络连接的优化与改进

多开工具对手机应用网络连接的优化与改进 摘要: 随着智能手机应用的日益普及,用户对于多个账号同时登录一个应用程序的需求也在增加。为了满足这一需求,多开工具应运而生。本文将探讨多开工具在优化和改进手机应用网络连接方面的作用。 引言: 在日常生活中,我们经常需要同时登录不同的账号使用同一个应用程序,比如 ......
工具 手机 网络

Zookeeper——分布式一致性协议及Leader选举原理

一、引言 随着业务的增长,单体架构发展为分布式架构,大大提升了业务的处理能力,但同时也带来了很多单体架构不存在的问题,如: 各节点之间网络通信的异常以及因其引起的脑裂问题(网络分区)。 引出“三态”。在单体架构中只会存在“成功”或“失败”两种结果,但是在分布式架构中由于网络异常将会出现“未知”的结果 ......
一致性 分布式 Zookeeper 原理 Leader

Amazon Code Whisperer 的正式使用,全新 AI 代码工具等你发现!(内附详细安装步骤图解)

Code Whisperer,亚马逊推出的实时 AI 编程助手,是一项基于机器学习的服务,它可以分析开发者在集成开发环境(IDE)中的注释和代码,并根据其内容生成多种代码建议。 ......
Whisperer 步骤 全新 代码 工具

多开工具的安全性分析与防范策略

随着计算机技术的不断发展,多开工具成为了一种常见的软件工具。这种工具可以让用户在同一时间打开多个相同的应用程序,从而方便用户同时处理多个任务,提高工作效率。然而,多开工具也存在着一定的安全风险,因此,我们需要对其进行安全性分析,并提出相应的防范策略。 首先,多开工具可能会被黑客利用,从而进行恶意攻击 ......
安全性 策略 工具

数据链路层-MAC多点访问控制协议

解决的问题 对于一个共享性介质(总线型局域网的总线),各个节点如何协调对它的访问和使用?通过各种途径来控制对共享介质访问的方式,在数据链路层称为多点访问控制协议。 多点访问控制协议按照访问方式分为三种类型:信道划分方式、随机方式、轮流方式。 信道划分方式 频分复用: FDM(Frequency Di ......
链路 数据 MAC

分区管理工具 fdisk parted

目录一、fdisk工具创建一个磁盘分区1、虚拟机添加测试硬盘2、创建磁盘分区3、文件系统管理磁盘分区4、挂载二、parted命令使用场景操作命令'help'查看命令列表查看分区情况划分出主分区"parted1"删除分区格式化操作设置开机自动挂载方法一:编辑/etc/fstab文件方法二:编辑/etc ......
管理工具 工具 parted fdisk

使用分布式事务 Seata 的 TCC 模式

Seata 的 TCC 模式需要通过人工编码来实现数据的回滚恢复,有点麻烦,但是性能最高。TCC 是 3 个方法的首字母缩写,即 Try 方法、Confirm 方法、Cancel 方法。Try 方法进行资源的检查和冻结,Confirm 方法是当所有事务都成功后调用的方法,Cancel 方法是当整体事 ......
分布式 事务 模式 Seata TCC

Seata 分布式事务

Seata 分布式事务 ​#Seata中间件#​ Seata是 2019 年 1 月份蚂蚁金服和阿里巴巴共同开源的分布式事务解决方案。致力于提供高性能和简单易用的分布式事务服务,为用户打造一站式的分布式解决方案。 官网地址:http://seata.io/ CAP定理和Base理论 这两个在前面弄N ......
分布式 事务 Seata