爬虫 分布式scrapy-redis组件
云原生 | 从零开始，Minio 高性能分布式对象存储快速入手指南
对象存储（Object Storage）是一种存储数据的计算机体系结构，它以对象的形式存储和管理数据。与传统的文件系统和块存储不同，对象存储将数据作为对象存储在分布式的存储集群中，每个对象都有一个唯一的标识符（通常是一个URL），并且可以通过这个标识符来访问和检索数据。 ......
爬虫实践06 | 爬取某网站的参展客户和展位信息
网址：https://www.cantonfair.org.cn/zh-CN/detailed?category=461147105440849920&scategory=461148159452647424&type=1&keyword=&page=1&size=40&tab=exhibitor& ......
分布式设计模式和方法论
一、设计模式 1. 可用性 可用性是系统运行和工作的时间比例，通常以正常运行时间的百分比来衡量，它可能受系统错误，基础架构问题，恶意攻击和系统负载的影响。 健康检查：系统实现全链路功能检查，外部工具定期通过公开端点访问系统 负载均衡：使用队列起到削峰作用，作为请求和服务之间的缓冲区，以平滑间歇性的重 ......
react中关于父子组件传值已经方法调用总结
问题： 1、封装自定义组件后，父子组件的传值与方法调用则是必须进行的操作，但是在网上看到多种的方法后， 有的方法一个组件下好使，但是换一个组件后就不好用了 有的方法根本就不好使，不知道是什么原因 2、父子组件之间的传值都是用props这个毫无疑问，也没有什么问题 3、父子组件方法调用则是上面提到的问 ......
Hadoop2伪分布式安装
最近有观看我主讲的《Hadoop基础与演练》课程的同学问到Hadoop环境到底应该怎么安装。Hadoop的安装其实非常的简单，网上有很多教程，官网也有示例。但是可能部分同学对于linux不太熟悉，导致安装的时候会遇到各种问题，打击学习激情。本文就来详细的讲解一下如何配置Hadoop2的伪分布式环境， ......
「UI开发」DevExpress WPF Pivot Grid组件可轻松实现多维数据分析！（一）
DevExpress WPF Pivot Grid组件是一个类似excel的数据透视表，用于多维数据分析和跨选项卡报表生成。众多的布局自定义选项让您完全控制其UI，以用户为中心的功能使其更易于部署。 P.S：DevExpress WPF拥有120+个控件和库，将帮助您交付满足甚至超出企业需求的高性能 ......
分布式场景
一、分布式文件系统 常用的分布式文件系统：HDFS（Hadoop Distributed File System） HDFS是Apache Hadoop生态系统中的分布式文件系统，用于存储和管理大规模数据集。它是为了支持大数据处理和分析而设计的，具有高容错性、高可靠性和高可扩展性的特点。它采用了主从 ......
Redis学习之Redisson实现分布式锁
Redisson实现分布式锁 Redisson 是 Java 的 Redis 高级客户端，提供了各种现成的分布式工具类便于我们使用 Redis。 官网：https://github.com/redisson/redisson 中文文档：https://github.com/redisson/redi ......
Spring Cloud 中的分布式组件五花八门，我到底该怎么学？
分布式架构的演进 在软件行业，一个应用服务随着功能越来越复杂，用户量越来越大，尤其是互联网行业流量爆发式的增长，导致我们需要不断的重构应用的结构来支撑庞大的用户量，最终从一个简单的系统主键演变成了一个非常复杂的可以支撑高并发的高可用的分布式架构，但是一个系统再复杂也是不断演变来的，所以从另一方面来说 ......
【HarmonyOS】低代码平台组件拖拽使用技巧之堆叠容器
【关键字】 HarmonyOS、低代码平台、组件拖拽、堆叠组件 1、写在前面 从本篇开始，我们一起来学习一下低代码平台中组件的托拉拽，虽然组件拖拽十分简单，但实际上还是有一定的技巧，新手上路难免会遇到一定的问题，如果能熟练掌握拖拽的技巧，能够有效地提升咱们的开发效率哦，今天我们先来学习堆叠组件。 ......
【HarmonyOS】低代码平台组件拖拽使用技巧之滚动容器
【关键字】 HarmonyOS、低代码平台、组件拖拽、滚动容器 1、写在前面 上一篇中我们介绍了低代码平台组件库中的堆叠容器的一些拖拽技巧，本篇我们继续，今天带大家一些来看一个新的组件——滚动容器。关于滚动容器的直接使用其实很简单，所以这个不是今天的重点，今天的重点是如何在原有布局的基础上在外层套 ......
vue动态引入组件
vue动态引入组件，正常情况是页面渲染时动态加载该页面组件，还能进行细化动态加载情况，比如弹窗组件 动态导入：除了路由懒加载，你还可以在其他地方使用动态导入来按需加载组件。例如，在某个按钮的点击事件中异步加载一个组件： import('./components/MyComponent.vue').t ......
主从、集群、分布式的区别
主从、集群和分布式是计算机系统中常见的架构模式，它们有不同的特点和用途： 主从（Master-Slave）： 主从架构是一种单点控制的架构，其中有一个主节点和一个或多个从节点。 主节点通常负责处理所有的请求和决策，而从节点用于执行主节点分派的任务或保存数据的备份副本。 主从架构通常用于提高系统的可用 ......
Vue学习笔记（九）：组件化编程
1 什么是组件¶ 当页面功能十分复杂时，将页面各功能化整为零，拆分成多个不同的小部分，这样便于分析，也有利于代码的复用，在vue中，我们将划分后的每个小部分称为组件。组件化是vue里面最强的功能，可以扩展html，封装重用的代码。在使用vue时，我们可以将一个完整的页面拆分为多个组件，每个组件都用于 ......
AI 帮写爬虫，真的吗？ CodeWhisperer：当然！
2023 年技术圈什么最火？答案毫无疑问是 AIGC，伴随该项技术的发展，新的编程方式也出现了，那就是用 AI 辅助编程，有了 AI 的加持，开发人员的效率和生产力可以得到大幅度的提升。今天我们就介绍一款非常棒的人工智能编程工具 Amazon CodeWhisperer ， 相信我，用上他之后，你的 ......
分布式缓存
分布式缓存可以使用Redis或者Redisson实现，具体选择哪个取决于你的具体需求和场景。 如果你的场景比较简单，只需要一个高效的缓存系统，那么使用Redis就足够了。Redis是一个非常流行的内存数据库，具有高性能、高可用性、丰富的数据结构和灵活的配置等优点。在分布式缓存方面，Redis通过集群 ......
基于Effect的组件设计
Effect的概念起源 从输入输出的角度理解Effect https://link.excalidraw.com/p/readonly/KXAy7d2DlnkM8X1yps6L 编程中的Effect起源于函数式编程中纯函数的概念 纯函数是指在相同的输入下，总是产生相同的输出，并且没有任何副作用(si ......
.NET5_Log4Net组件使用
一、NUGet引入程序集：log4Net + Microsoft.Extensions.Logging.Log4Net.AspNetCore 二、准备配置文件 三、配置使用Log4Net记录日志 ......
生成有相关性的满足标准正态分布的2组随机数
##from scipy.stats import normimport matplotlib.pyplot as pltimport pandas as pdimport numpy as npp=0.7e1=np.random.normal(loc=0,scale=1,size=100)e2=n ......
爬虫案例
import requests from bs4 import BeautifulSoup from pygtrans import Translate def multi_requests(url, headers=None, verify=False, proxies=None, timeout ......
Python3爬虫通过m3u8文件下载ts视频 Python爬虫
什么是m3u8文件? M3U8文件是指UTF-8编码格式的M3U文件。 M3U文件是记录了一个索引纯文本文件，打开它时播放软件并不是播放它，而是根据它的索引找到对应的音视频文件的网络地址进行在线播放。 原视频数据分割为很多个TS流，每个TS流的地址记录在m3u8文件列表中 比如我这里有一个m3u8文 ......
vue $refs.aaa aaa模板引用子组件 是个空数组 原因
我的代码结构大致这样 <el-tabs v-model="activeTab"> <el-tab-pane v-for="(tab, index) in 一个数组bbb" :key="index" :label="tab.label" :name="tab.name" > <子组件 ref="aaa ......
Spring Cloud相关组件说明
1、Spring Cloud版本 现有Spring Cloud有两代实现，分为Spring Cloud Netflix和Spring Cloud Alibaba，由于SpringCloud Netflix版一些重要组件如注册中心Euraka、Ribbon已经不再迭代更新了，Spring Cloud ......
React跨路由组件动画
我们是袋鼠云数栈 UED 团队，致力于打造优秀的一站式数据中台产品。我们始终保持工匠精神，探索前端道路，为社区积累并传播经验价值。 本文作者：佳岚 回顾传统React动画 对于普通的 React 动画，我们大多使用官方推荐的 react-transition-group，其提供了四个基本组件 Tra ......
Python：基础&爬虫
Python：基础&爬虫 Python爬虫学习（网络爬虫（又称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。） 一、基础知识准备 Python在各个编程语言中 ......
Vue-父组件监听子组件的生命周期
egg:父组件监听子组件挂载并做对应的逻辑处理 1.在子组件中通过this.$emit触发父组件的事件 // Parent.vue <Child @mounted="doSomething"/> doSomething() { console.log('doSomething'); } // Chi ......
界面组件DevExpress WPF v23.1 - 进一步升级数据处理能力
DevExpress WPF拥有120+个控件和库，将帮助您交付满足甚至超出企业需求的高性能业务应用程序。通过DevExpress WPF能创建有着强大互动功能的XAML基础应用程序，这些应用程序专注于当代客户的需求和构建未来新一代支持触摸的解决方案。 无论是Office办公软件的衍伸产品，还是以数 ......
.NET微服务系列之Saga分布式事务案例实践
自从Wing正式发布以后，很多童鞋反馈对Saga分布式事务比较感兴趣，今天就跟大家分享一下“跨行转账”的分布式事务实践案例，入门使用教程请自行前往Wing官方文档。 假设自己名下有“中国农业银行（ABC）”和“中国工商银行（ICBC）”的账户余额各1万元，现在从“ABC”跨行转账1000元到“ICB ......