框架 文件scrapy
markdown 笔记转 html 单文件
# markdown 笔记转 html 单文件 ## 图片转base64 ``` ![image][image id] [image id]:your image's base64 ``` ## markdown 转 html 工具 i5ting_toc **安装** 安装 nodejs 环境 ： ......
Scrapy 中 CrawlSpider 使用(二)
LinkExtractor提取链接 创建爬虫 scrapy genspider 爬虫名 域名 -t crawl spider from scrapy.linkextractors import LinkExtractor from scrapy.spiders import CrawlSpider, ......
有关于将txt文件数据输出的问题
# 1、有一个比较重要的问题，在读取和写入文件时 我们在读取和写入文件时，一定要注意到的是，字符编码的问题，若是字符编码不一致的话，就会出现乱码问题，一定要注意！（来自吃过亏的我） # 2、需要利用到其进行数据的分割 我们需要获取到它进行数据通过一个固定的字符串进行分割，并将其存储到某个数组里，供给 ......
python入门（八）：文件操作
# Python文件操作指南 - [原文](https://www.fivcan.com/) | [大纲](https://www.fivcan.com/index.php/2023/06/20/python入门（一）：python入门大纲/) | [首页](./index.php) ![image ......
Scrapy 中 CrawlSpider 使用(一)
创建CrawlSpider scrapy genspider -t crawl 爬虫名 (allowed_url) Rule对象 Rule类与CrawlSpider类都位于scrapy.contrib.spiders模块中 class scrapy.contrib.spiders.Rule( lin ......
Scrapy 保存数据案例-小说保存
spider import scrapy class XiaoshuoSpider(scrapy.Spider): name = "爬虫名" allowed_domains = ["域名"] start_urls = ["第一章url地址"] def parse(self, response): # ......
Scrapy_ImagePipeline保存图片
创建一个项目 scrapy startproject myfrist(project_name) 创建一个爬虫 scrapy genspider 爬虫名 爬虫地址 需要安装pillow pip install pillow 报错：twisted.python.failure.Failure Open ......
python实现文件批量压缩
## python实现文件夹下文件的批量压缩 ### 初级版本 压缩之前 ![image-20230624173118646](https://img2023.cnblogs.com/blog/2637088/202306/2637088-20230624175641855-81910240.png ......
开源的文件同步软件推荐，可本地使用，无需自建服务器
开源的文件同步软件推荐，可本地使用，无需自己搭建服务器： 1. Syncthing：开源的文件同步工具，支持多个操作系统，使用点对点的方式进行同步，无需中央服务器。 2. FreeFileSync：开源的文件同步和备份工具，支持Windows、macOS和Linux操作系统。 3. Resilio ......
【python基础】文件-初识文件
文本文件可存储的数据量是非常多的。每当需要分析或修改存储在文件中的信息时，首先就是读取文件到内存中，为此可以一次性读取文件的全部内容，也可以以每次一行的方式逐步读取。 # 1.读取文件 ## 1.1读取整个文件 要读取文件，需要一个包含几行文本的文件。下面首先来创建一个poems文本文件，，里面存储 ......
【VBA】如何在WORD文件的每个自动序号后修改字符
要想将文章中所有的： 1）实例文字 替换为 1）#示例文字 可以使用VBA来进行操作。 保存一份源文档的副本。VBA的修改是难以撤销的。也可以先复制一部分出来到新文档进行试验。 打开 Word 文档。 按下 "Alt" + "F11" 打开 Visual Basic for Applications ......
Scrapy框架爬取豆瓣图书实例
### douban.py ``` import scrapy import time from bs4 import BeautifulSoup from scrapy import Request from Scripts.ScrapyProject.items import bookItem ......
nginx 多个配置文件
### 1、 ### 2、nginx.conf ``` worker_processes 1; events { worker_connections 1024; } http { include mime.types; default_type application/octet-stream; ......
jupyter中把ipynb文件导出为pdf
1、安装Python包，其中6.4.4是根据提示确认的必须要大于等于6.4.4 pip3 install nbconvert==6.4.4 2、安装Inkscape，官网地址：https://inkscape.org/zh-hans/?switchlang=zh-hans 3、安装pandoc，官网 ......
Windows电脑为例，设置minio文件服务分布式部署
**下面以Windows电脑为例，设置minio文件服务分布式部署。** # 1.安装[Minio](https://so.csdn.net/so/search?q=Minio&spm=1001.2101.3001.7020) 比较简单，自行百度查询。 # 2.运行分布式Minio 启动分布式Min ......
springboot 学习框架
### 李兴华，springboot开发书籍配套视频 * https://www.bilibili.com/video/BV1wL411H7W8?p=172&vd_source=debae4e77e1cafd283cb9668d2acb3a7 ......
spring 学习框架知识结构
### b站上，spring开发实战，书籍配套视频 * https://www.bilibili.com/video/BV1144y1g7Q2/?spm_id_from=333.999.0.0&vd_source=debae4e77e1cafd283cb9668d2acb3a7 ......
spring框架的BeanFactory
spring框架的BeanFactory Spring框架中的BeanFactory是一个核心接口，用于管理应用程序中的对象（即"Bean"）。它是Spring IoC（控制反转）容器的基础，并提供了创建、获取和管理Bean的功能。 BeanFactory的主要职责包括： 实例化Bean：BeanF ......
"快速访问"（Quick Access）是 Windows 操作系统中一个常用的功能，它允许用户快速访问最近使用的文件和常用的文件夹。它在资源管理器中的左侧导航窗格中显示，并提供了便捷的方式来查找和打开文件。
"快速访问"（Quick Access）是 Windows 操作系统中一个常用的功能，它允许用户快速访问最近使用的文件和常用的文件夹。它在资源管理器中的左侧导航窗格中显示，并提供了便捷的方式来查找和打开文件。 在 Windows 10 中，"快速访问"默认显示用户最近访问的文件和常用的文件夹。它会根 ......
SpringBoot中的yml文件中读取自定义配置信息
# SpringBoot中的yml文件中读取自定义配置信息 开发中遇到的问题，百度的答案我都没有找到，去找大佬获取到的经验总结，这只是其中的一种方法，如果其他大佬有新的方法，可以分享分享。 ## 一、非静态属性 1.1 yml文件 自定义配置信息，通过我们编写的代码读取。 ```yml image: ......
浅析LRC歌词文件
浅析LRC歌词文件 [时间：2018-12] [状态：Open][关键词：字幕，LRC，歌词，lyric，文件格式] 0 引言 几年前（2010年左右），网络音乐流行与免费的时代，网上有大量的mp3，使用比较常见的播放器，比如酷狗、酷我、千千静听等，下载mp3时总会附带下载一个同名但以lrc为后缀的 ......
[C/C++] Visual Stdio Code中多线程多源码文件编译、运行和调试
搞了很久，记录一下： 一. 环境 OS：Ubuntu 20.04 VS Code：1.77.0 g++：g++ (Ubuntu 9.4.0-1ubuntu1~20.04.1) 9.4.0 二. 配置文件 下面两个文件先不要手动创建，下面第三章会讲到： task.json：编译程序的配置文件； lau ......
Selenium4自动化框架
Selenium Selenium是一个用于Web应用的自动化测试工具，利用它可以驱动浏览器执行特定的工作，其直接运行在浏览器中，就像真正的用户在操作一样。其主要功能有：测试应用程序与浏览器的兼容性，测试应用程序功能。 安装Selenium 安装Selenium只需要执行如下代码即可： pip in ......
spring框架里的spring context模块介绍，它和spring core有什么关联？
spring context模块介绍 Spring框架是一个开源的Java开发框架，它提供了一系列的功能和工具，用于简化Java应用程序的开发。Spring Context模块是Spring框架的核心部分之一，它主要负责管理和协调应用程序中的对象。 Spring Context模块的主要功能包括： ......
spring web框架介绍
spring web框架 Spring Web框架是一个开源的Java框架，它被广泛用于构建Web应用程序和RESTful服务。它基于经典的Spring框架，提供了一组功能强大且灵活的工具和类，用于简化Web应用程序的开发。 以下是Spring Web框架的主要特点和组件： MVC模式：Spring ......
【分享】如何才能简洁高效不失优雅的爆破ZIP文件？
# 0x01 前言 在CTF比赛中，压缩包密码的爆破一直是一个热门话题。在这个过程中，简洁高效的方法是至关重要的。本文将介绍一些实用的技巧和工具，帮助您高效地爆破ZIP文件密码，而不失优雅。我们将探讨一些关键要素，如线程数量、密码字典数量、可自定义程度和速度等，并提供一些实用的工具供大家尝试。通过本 ......
二、QT文件介绍
1.（.pro文件）项目管理文件 以不加UI库的项目为例 1 QT += core gui 2 3 greaterThan(QT_MAJOR_VERSION, 4): QT += widgets 4 5 CONFIG += c++11 6 7 DEFINES += QT_DEPRECATED_WAR ......
文件操作函数
1. truncate(const char* pathname, off_t lenth) 修改文件大小 ( #include<unistd.h> #include<sys/types.h> ) 第一个参数：文件路径名称，第二个参数：指定大小，比原来小就是删除，大了就是扩充； 2.chmod 修改 ......
java编程开发之若依vue框架 --- 后台开发
分页实现 前端基于element封装的分页组件 pagination(opens new window) 后端基于mybatis的轻量级分页插件pageHelper(opens new window) #前端调用实现 1、前端定义分页流程 #后台逻辑实现 @PostMapping("/list") ......