生态环境javascript框架 生态
基于Docker容器搭建hadoop完全分布式集群环境
简介 物理机：windows10 宿主机：Centos7虚拟机，需要安装Docker服务 hadoop集群节点：3个centos7的容器，hadoop1、hadoop2、hadoop3 组件： 容器镜像：Centos7 Docker CE 24.0.7 JDK1.8.0_181 Hadoop3.1. ......
【前端框架Vue】Vue是什么？怎么用？
Vue是JS的一种框架，用于构建用户界面的JS框架。可以理解为，Vue通过指令和模板语法，将数据和HTML模板关联起来，实现一种响应式的数据驱动视图的方式 Vue是什么？ Vue是JS的一种框架，用于构建用户界面的JS框架。可以理解为，Vue通过指令和模板语法，将数据和HTML模板关联起来，实现一种 ......
JavaScript 学习
变量声明和数据类型 var name = 'John';let age = 25;const PI = 3.14; // 数据类型：字符串、数字、布尔值// var声明（ES5），let和const声明（ES6） var、let 和 const 是 JavaScript 中声明变量的关键字。var ......
【蟹山村抽化粪池服务】，专业清理，环保卫生，为您的生活环境保驾护航！
蟹山村抽化粪池服务，致力于为您提供专业的清理服务，以保障您的生活环境的清洁与卫生。我们的团队拥有丰富的经验和专业的技术，能够高效地清理和处理各类化粪池，确保您的生活环境清新无臭，让您远离污水污染的困扰。 初审朱小姐 ：l882OOO2548,专家团队在线解答,一分钟内回复率高达90%！ 我们注重环保 ......
C++学习笔记一：windows系统配置C++开发环境（VS code+g++/clang++)
1.下载vscode 官网下载地址： https://code.visualstudio.com/ 安装时选择把软件加入到环境变量中这个选项 2.打开vscode，安装c/c++扩展插件 3.下载gcc和clang编译器 下载地址： https://winlibs.com/ 下载后解压，把bin文件 ......
Anaconda/conda环境配置的问题
0 前言 安装Anaconda的时候，由于某种原因（我不清楚），官方推荐是手动添加环境变量的。 不管怎么样，反正我安装完成之后，使用conda --version的时候报错了，报错如下: # >>>>>>>>>>>>>>>>>>>>>> ERROR REPORT <<<<<<<<<<<<<<<<<< ......
VMware vCenter Server 7.0 Update 3p 下载 - 集中管理 vSphere 环境
VMware vCenter Server 7.0 Update 3p 下载 - 集中管理 vSphere 环境 请访问原文链接：https://sysin.org/blog/vmware-vcenter-7-u3/，查看最新版。原创作品，转载请保留出处。 作者主页：sysin.org VMware ......
CentOS 7.6 安装 Go 1.20.12 环境教程+更换国内源
安装 因为需要安装httpx，官方github要求使用1.20版本的Go环境，就没有安装最新的1.21。 先去官网查看：https://go.dev/dl/ 如上图，我们选择Linux amd64的（使用命令下就行，如若不能正常下载，就直接下完传上服务器也一样） wget https://go.de ......
前端框架中 MVC 和 MVVM 两种设计方式的区别
MVC 和 MVVM 是两种常见的软件架构模式。它们都致力于提供清晰的组织结构和代码分离，让开发者能够更有效率地开发和维护复杂的应用程序。然而，它们在组织代码和处理用户交互上有一些重要的区别。 首先，让我们了解一下 MVC（Model-View-Controller）模式。MVC 是一种设计模式，被 ......
Windows 11环境变量添加
前言全局说明 Windows 11环境变量添加 一、设置环境变量 二、设置--系统--系统信息--高级系统设置 三、环境变量 四、编辑 五、新建--粘贴路径 这里以 OpenSSL 为例，路径根据你的需要改。 六、注意 要新开终端窗口上面路径才会生效，添加之前的命令行窗口没有加载，所以不生效。 免责 ......
pytest + yaml 框架 -59.用例失败重跑机制pytest-rerunfailures
前言 有些接口可能不太稳定，第一次跑的时候由于网络原因或者其它原因失败，但是重新跑2次又成功了。 对于这种需要重新跑几次的场景，可以使用用例失败重跑机制，需安装pytest-rerunfailures 插件。 场景示例 失败重跑需要依赖 pytest-rerunfailures 插件，使用 pip ......
javaScript/js 【call，apply，bind】
在JavaScript中，call、apply和bind都是用于改变函数执行上下文（this的值）的方法。它们在不同的情境下有不同的用途。 call方法： call方法允许你调用一个函数，并指定该函数内部的this值，以及将参数以单独的参数传递给函数。 function greet(name) { ......
JavaScript笔记
JavaScript的组成: 1.数据类型：JavaScript有8种基本数据类型，包括Undefined、Null、Boolean、Number、String、BigInt、Symbol和Object。 变量：在JavaScript中，可以使用var、let或const关键字声明变量。 函数：Ja ......
Java-Spring框架中用到的设计模式
Java-Spring框架中用到的设计模式 单例模式（Singleton） Spring 中的 Bean 默认是单例的，容器中只存在一个实例。这有助于节省资源，提高性能。 工厂模式（Factory） Spring 使用工厂模式来创建和管理 Bean。通过配置文件或注解，Spring 容器可以根据需要 ......
Windows系统批处理脚本，bat文件，命令打开指定应用（一键开启工作环境）
示例代码 ::设置UTF-8编码 chcp 65001 ::打开应用 start "" "应用exe文件完整路径" ::打开文件 start "" "文件所在完整路径" ::执行其它脚本 start other.bat ::打开浏览器指定网页 start "" "网址" ......
windows环境下使用xming+cmd+ssh显示linux图形化界面
有的电脑安装xming或vcxsrv后通过cmd命令窗口连接linux服务器，不能弹出linux图形化界面，此时需要对xming进行配置。 本机安装安装xming或者vcxsrv。 进入xming或者vcxsrv安装目录修改X0.hosts，在新行添加需要远程连接的服务器名称或IP。 设置linux ......
scrapy框架之自定义简易scrapy框架
自定义low版Scrapy框架： 1 from twisted.internet import reactor #事件循环(终止条件，所有的socket都已经移除) 2 from twisted.web.client import getPage #socket对象（如果下载完成..自动从事件循环中 ......
scrapy框架之Twisted
① getPage 1 1 # socket对象（如果下载完成..自动从事件循环中移除） 2 2 from twisted.web.client import getPage 详解： 1 def getPage(url, contextFactory=None, *args, **kwargs): ......
scrapy框架之中间件
一.下载中间件（DownMiddleware） 三种方法： 1 process_request(self, request, spider) 2 3 process_response(self, request, response, spider) 4 5 process_exception(sel ......
scrapy框架之自定制命令
自定制命令 1. 在spiders同级创建任意目录，如：commands 2. 在其中创建 crawlall.py 文件 （此处文件名就是自定义的命令） #crawlall.py文件 1 from scrapy.commands import ScrapyCommand 2 from scrapy. ......
scrapy框架之基本使用
Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 其可以应用在数据挖掘，信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的， 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) ......
scrapy框架之选择器
1 from scrapy.selector import Selector, HtmlXPathSelector 2 from scrapy.http import HtmlResponse 3 html = """<!DOCTYPE html> 4 <html> 5 <head lang="en ......
tornado框架之模型绑定
模型绑定有两个主要功能： 自动生成html表单 用户输入验证 在之前学习的Django中为程序员提供了非常便捷的模型绑定功能，但是在Tornado中，一切需要自己动手！！！ 1 <!DOCTYPE html> 2 <html lang="en"> 3 <head> 4 <meta charset=" ......
scrapy框架之配置文件1
部分配置文件详解： 1 # -*- coding: utf-8 -*- 2 3 # Scrapy settings for test001 project 4 # 5 # For simplicity, this file contains only settings considered impo ......
scrapy框架之配置文件2
① 自动限速算法 1 """ 2 17. 自动限速算法 3 from scrapy.contrib.throttle import AutoThrottle 4 自动限速设置 5 1. 获取最小延迟 DOWNLOAD_DELAY 6 2. 获取最大延迟 AUTOTHROTTLE_MAX_DELAY ......
scrapy框架之自定义扩展
自定义扩展时，利用信号在指定位置注册制定操作 源码剖析： 1 from scrapy.extensions.telnet import TelnetConsole #查看TelnetConsole源码 2 3 # Enable or disable extensions 4 # See https: ......
自定义异步非阻塞web框架
Python的Web框架中Tornado以异步非阻塞而闻名，本文基于非阻塞的Socket以及IO多路复用从而实现异步非阻塞的Web框架，其中便是众多异步非阻塞Web框架内部原理。 图示： 上面的是异步IO模块：作为客户端发送请求给服务端，实现同时发多个请求的的功能，select监听socket是否有 ......
scrapy框架之自定义URL去重
scrapy默认使用 scrapy.dupefilter.RFPDupeFilter 进行去重，相关配有： 1 DUPEFILTER_CLASS = 'scrapy.dupefilter.RFPDupeFilter' #一般更改此参数 2 DUPEFILTER_DEBUG = False 3 JOB ......
tornado框架之cookie&session
一、cookie Tornado中可以对cookie进行操作，并且还可以对cookie进行签名以防止伪造 a、基本操作 1 class MainHandler(tornado.web.RequestHandler): 2 def get(self): 3 if not self.get_cookie ......
scrapy框架之格式化&持久化
格式化处理 在parse方法中直接处理是简单的处理方式，不太建议，如果对于想要获取更多的数据处理，则可以利用Scrapy的items将数据格式化，然后统一交由pipelines来处理 以爬取校花网校花图片相关信息为例： 1 import scrapy 2 from scrapy.selector i ......