笔记python

多线程爬虫的流程可以大致分为： （1）获取种子URL：从初始URL中抓取起始页面，解析其中的URL，并将这些URL添加到未访问的URL队列中； （2）解析下载的网页：从URL队列中取出一个URL，下载其内容，解析其中的链接，并把新的链接放入未访问的URL队列中； （3）存储爬取的数据：从URL队列中 ......

一、协程的创建 Go 语言支持并发，只需要通过 go 关键字来开启 goroutine(协程) 即可。 goroutine(协程) 是轻量级线程，goroutine(协程) 的调度是由 Golang 运行时进行管理的。 goroutine 语法格式(创建协程)： go 函数名( 参数列表 ) 示例代 ......

导读 asyncore库是python的一个标准库，提供了以异步的方式写入套接字服务的客户端和服务器的基础结构，这篇文章主要介绍了Python asyncore socket客户端开发基本使用,需要的朋友可以参考下 介绍 asyncore库是python的一个标准库，提供了以异步的方式写入套接字服务 ......

1、通道 通道channel是Go提供的一种用于各个协程(goroutine)之间的数据共享，保证数据同步交换的机制。协程是轻量级线程，类似于Java中的线程。 2、通道的类型 2.1、无缓冲通道 用于同步通信，可保证在发送和接收数据时完成两个goroutine(协程)的数据交换。 2.2、缓冲通道 ......

Python爬虫高级开发/大数据抓取/从入门到精通/商业项目实战（1） 开始时间2023-05-05 22:02:26 结束时间2023-05-06 01:09:52 一、DNS DNS 域名系统（英文：Domain Name System，缩写：DNS）是互联网的一项服务。它作为将域名和IP地址相 ......

"""字典dict定义：元素是键值对，key不能重复，不能使用下标索引，key是除字典外其他类型，value为任意类型， 可嵌套， 可修改， 支持for循环，不支持while循环# 字面量{ key: value，key: value， key: value }# 定义变量变量名称 = { key: ......

"""文件操作open()打开open(name, mode, encoding)name：文件名，文件所在的路径mode：文件访问模式，只读 r，写入w（文件存在，从开头开始编辑，原有内容会删除，不存在，创建），追加a（文件存在，从已有内容之后进行编辑，不存在，创建）读写encoding：编码格式 ......

# *_* coding:utf8 *_*# 简单计算器import tkinterfrom functools import partial# 按钮输入调用def get_input(entry1, argu): # 从entry窗口展示中获取输入的内容 input_data = entry1.g ......

"""异常：捕获异常：基本语法：try: 可能发生错误的代码except: 出现异常执行代码else: 没异常，执行finally: 无论有无异常，都执行异常具有传递性"""# 捕获指定异常try: print(name)except NameError as e: print("出现未定义异常") ......

"""容器的通用功能：len(容器) 统计容器元素个数max(容器) 统计最大元素min(容器) 统计最小元素类型转换list(容器) 给定容器转换为liststr(容器) 给定容器转换为strtuple(容器) 给定容器转换为tupleset(容器) 给定容器转换set通用排序：sorted(容器 ......

最近打算学计数DP，然而我数学基础太弱，故记此文。（问了一下，这东西只不过是小学奥数而已，我好蒻） 公式 加法原理：$ S= \sum_{i=1}^n a[i] $ 乘法原理：$ S= \prod_{i=1}^n a[i] $ 二项式定理：$(a+b)^n = \sum_{i=0}^n a^{n-i ......

岸上的船儿，如同海上的灯塔，无法移动。 首先应用这句话是因为我觉得这句话写的特别美，特别形象。 史前史中，没有别的场景比巨兽在焦油坑中垂死挣扎的场面更令人震撼。上帝见证着恐龙、猛犸象、剑齿虎在焦油中挣扎。它们挣扎得越是猛烈，焦油纠缠得越紧，没有任何猛兽足够强壮或具有足够的技巧，能够挣脱束缚，它们最后 ......

安装 我们可以使用 python-gitlab 库来操作 gitlab pip install python-gitlab gitlab issue 查询的 api：https://docs.gitlab.com/ee/api/issues.html#list-issues gitlab issue ......

包管理工具，用来管理模块中包的依赖关系。下面来看看go mod的使用方法。 1.1、初始化模块 go mod init 项目模块名 1.2、依赖关系处理，根据go.mod文件 go mod tidy 1.3、将依赖复制到项目下的vendor目录 go mod vendor 如果包被屏蔽(墙)，随后使 ......

1、接口的声明 Go语言中的接口是一种新的类型定义，拥有将具有共性的方法定义在一起的特性。任何其他类型只要实现了这些方法就是实现了这个接口。 语法详情如下： /* 定义接口 */ type interface_name interface { method_name1 [return_type] m ......

地址：https://www.cnblogs.com/FReQuenter5156/p/shuxingyilaidp.html/ 简介 这类背包本质上是分组背包问题。 将一个节点的每一棵子树看作一组，进行分组背包。所谓分组背包，即在选择物品的时候，一开始将物品分为好几组，在选择时，可以从每一组中至多 ......

Go语言没有Java语言面向对象的特性，也无类对象的概念。但可以使用结构体实现这些特性。 1、方法的声明 Go中的方法是一种特殊的函数，与struct相关联，被称为struct的接收者。可以理解为方法就是有接收者的函数。语法格式如下： type mystruct struct{} func (rec ......

一个SM(Streaming Multiprocessor)中的所有SP(Streaming Processor)是分成Warp的，共享同一个Memory和Instruction Unit（指令单元）。 从硬件角度讲，一个GPU由多个SM组成（当然还有其他部分），一个SM包含有多个SP（以及还有寄存 ......

1、什么是抽象类？ 如果说，类是对一堆对象共同内容的抽取，那么抽象类就是对一堆类共同内容的抽取，包括：属性和方法。 2、抽象类的特点 （1）抽象类必须包含一个或多个抽象方法，也可以包含普通方法。（2）抽象类的抽象方法，在抽象类中并不作实现。（3）抽象类不能被实例 （4）抽象类的子类要想进行实例化，必 ......

记录我避过坑之后，自认为好用的一些方法 一、元素定位 不再赘述有多少种类了 虽然很多，但是我尝试使用用的最多最稳定的还是： .xpath 这是我认为也是我用着最靠谱的一种方法 二、点击 我最开始看文档，用的是element.click()方法，但是发现，有些“变动”的元素或者一些其它可点击的标签不管 ......

什么是缓存行 Cache是由很多个cache line组成的。每个cache line通常是64字节，并且它有效地引用主内存中的一块儿地址。一个Java的long类型变量是8字节，因此在一个缓存行中可以存8个long类型的变量。 CPU每次从主存中拉取数据时，会把相邻的数据也存入同一个cache l ......

异步爬虫 基础知识 阻塞 ​ 阻塞状态指程序未得到所需计算资源时被挂起的状态。程序在等待某个操作完成期间，自身无法继续干别的事情，则该程序在操作上是阻塞的。 ​ 常见的阻塞形式有：网络I/O阻塞、磁盘I/O阻塞、用户输入阻塞等。阻塞是无处不在的，包括在CPU切换上下文时，所有进程都无法真正干事情，它 ......

「学习笔记」AC 自动机 点击查看目录 前置：「学习笔记」字符串基础：Hash，KMP与Trie。 好像对例题的讲解越来越抽象了？ 算法 问题 求 $n$ 个单词在一个长度为 $m$ 的文章里出现过多少个。 思路 很多文章都说这玩意是 Trie 树 + KMP，我觉得确实可以这样理解但是不完全一样。 ......

使用SpringMVC技术开发web程序流程 创建web工程（Maven结构） 设置tomcat服务器，加载web工程（tomcat插件） 导入坐标（SpringMVC+Servlet） 定义处理请求的功能类（ItemController） 设置请求映射（配置映射关系） 将SpringMVC设定加载 ......

# coding: utf-8 # last modified:20220824 import time import serial import re utctime = '' lat = '' ulat = '' lon = '' ulon = '' numSv = '' msl = '' co ......

代码说明： 1、在脚本中定义了要部署的 Django 应用程序名称、Docker 镜像名称和标签。2、使用字符串模板定义了 Kubernetes Deployment 和 Service 的 YAML 文件。在字符串模板中使用了变量，用于替换实际的值。3、将 Deployment 和 Service ......

# 我们输出的要求是对齐,但是名字的长度不一样 def deal_data(var): for i in range(12-len(var)): # 为什么是12呢?必须保证里面单个长度不能大于12,具体多少可以看自己的每个单元格的数据, 不超过就可以 var += " " return var l ......

一:Python flask框架 前言 1.Python 面向对象的高级编程语言，以其语法简单、免费开源、免编译扩展性高，同时也可以嵌入到C/C++程序和丰富的第三方库，Python运用到大数据分析、人工智能、web后端等应用场景上。 2.Python 目前主要流行的web框架：flask、Djan ......

Python简易学生管理系统 Project main.py manager.py student.py students_info.json 1、 学生文件 student.py # 学生类 class Student(object): # 存放学生信息 student_info = {} # 学 ......

requirments.txt et-xmlfile==1.1.0 numpy==1.24.3 openpyxl==3.1.2 pandas==2.0.1 python-dateutil==2.8.2 pytz==2023.3 six==1.16.0 tzdata==2023.3 main.py i ......