爬虫 代码python
01-认识爬虫
requests模块快速使用 #介绍：使用requests可以模拟浏览器的请求，比起之前用到的urllib(内置模块)，requests模块的api更加便捷（本质就是封装了urllib3） # 注意：requests库发送请求将网页内容下载下来以后，并不会执行js代码，这需要我们自己分析目标站点然后 ......
02-爬虫的高阶使用
代理池的搭建 # 搭建步骤 -1、git clone git@github.com:jhao104/proxy_pool.git -2、在pycharm中打开项目 -3、创建虚拟环境，并且安装依赖 pip install -r requirements.txt -4、修改配置文件：DB_CONN = ......
使用python 将json转csv格式
首先需要安装几个库，待会需要用到 # pandas库，用来json和excel格式转换 pip install pandas # 以下两个库是用来解决，pandas写入xlsx后缀文件，报错"""no engine for filetyppe xlsx""" 的问题 pip install open ......
加速Python循环的12种方法,最高可以提速900倍
在本文中，我将介绍一些简单的方法，可以将Python for循环的速度提高1.3到900倍。 Python内建的一个常用功能是timeit模块。下面几节中我们将使用它来度量循环的当前性能和改进后的性能。 对于每种方法，我们通过运行测试来建立基线，该测试包括在10次测试运行中运行被测函数100K次(循 ......
Python 实现 PDF 到 Word 文档的高效转换（DOC、DOCX）
PDF（Portable Document Format）已成为一种广泛使用的电子文档格式。PDF的主要优势是跨平台，可以在不同设备上呈现一致的外观。然而，当我们需要对文件内容进行编辑或修改，直接编辑PDF文件会非常困难，而且效果也不理想。将PDF文件转换为Word文档（doc、docx）再进行编辑 ......
vscode 代码片段 php.json
{ // Place your snippets for php here. Each snippet is defined under a snippet name and has a prefix, body and // description. The prefix is what is u ......
Python学习第1章- Python编程语言及环境安装
此部分内容过于简单，此处省略详细步骤，仅对关键点进行说明。 1.安装最新稳定版的Python编译器（获取途径：官网https://www.python.org） 2.使用Pycharm Community Edition，此版本为免费版，可供初学者使用。Professional版本为付费版。官方提供 ......
Python之DataFrame的使用
以下是Python之DataFrame的使用： 1.定义DataFrame的方式（不带参、使用list、使用列标签） import pandas as pd df = pd.DataFrame print(df) arr = [1,2,3,4,5] df = pd.DataFrame(arr) pr ......
python -m http.server在本地启动简单HTTP服务器的命令
1.python -m http.server 命令 python -m http.server 是一个用于在本地启动简单 HTTP 服务器的命令。这个命令会在当前工作目录启动一个基本的 HTTP 服务器，可以让你通过浏览器访问本地文件。 具体解释如下： python：启动 Python 解释器。- ......
Python模块之序列化模块
序列化模块：json模块 / pickle模块 【一】概要 json 模块和 pickle 模块都是 Python 中用于序列化和反序列化数据的工具，但它们有一些重要的区别： 可读性和可编辑性： json 生成的数据是以文本形式表示的，具有良好的可读性，并且可以手动编辑。 pickle 生成的数据是 ......
Python Numpy 数组修改赋值的方法及示例
NumPy是Python中用于处理数组和数值计算的强大库。它提供了多维数组对象（称为numpy.ndarray或简称为数组），Numpy数组的赋值是比较方便的，本文主要介绍Python numpy 数组修改赋值的方法，以及相关示例代码。 1、一般使用索引赋值 赋值方式和C#和Java待语言类似， ......
Python Pandas 安装和设置
1、安装 Pandas 1）确保已安装Python Pandas 需要 Python 环境。可以通过在终端或命令提示符中运行 python --version 来检查是否已安装 Python。 2）安装 Pandas 使用 Python 的包管理器 pip 进行安装： pip install p ......
Python 猫的 2023 年终回顾
2023 年是 Python猫 创办的第 5 年，2024 年已经到来了，我们照例做一个简短的年终回顾吧。 1、30000 订阅与 200 原创。 2020 的年终总结时，公众号订阅数刚破 20000，3 年后，我们终于也达成了 30K 成就。另外原创文章数也突破了 200 篇。如果你已经关注了，记 ......
Python模块之time模块和datetme模块
time模块和datetime模块 【一】概要 time 模块和 datetime 模块是 Python 中用于处理时间的两个重要模块。 【二】常见用法 time 模块： time 模块提供了与时间相关的函数，主要用于获取和处理当前时间、时间戳等。 一些常见的功能包括： time.time(): 返 ......
python中repr()和str()函数的区别
repr()函数 当调用repr(object)时，实际调用的是的object.__repr__(self)函数，两者的官方定义如下。 一句话概括就是：repr函数会返回一个字符串，如果有可能的话这个字符串应该是有效的python代码，并且能创建一个这样的对象，如果做不到这一点，也应该返回一个用<> ......
python爬虫环境配置
环境配置 python3/请求库/解析库/数据库/存储库/web库/app爬取库/爬虫框架库 python3 win11下可以直接商店下载了（ Linux下apt-get install python3 请求库 requests pip3 install requests selenium pip ......
day06 代码随想录算法训练营 242. 有效的字母异位词
题目：242. 有效的字母异位词 我的感悟： 卡尔的思路，挺好。简单易懂。 理解难点： 没有难点 总结概况： 建立数组存 遍历一遍 ++ 遍历一遍 -- 再遍历一遍 判断0 代码示例： class Solution: def isAnagram(self, s: str, t: str) -> bo ......
python基础知识
python基础知识 1.标识符 标识符：是python中对变量名、函数名、类名的取名规则。 规则：强制规则，必须遵守 1.只能使用英文字母、数字、中文和‘_’进行取名 2.数字不能是开头 3.字母大小写敏感 4.不能使用关键字 非强制规则: 非强制执行的规则，主要是程序员自定义的一 ......
day04 代码随想录算法训练营 24. 两两交换链表中的节点
题目：24. 两两交换链表中的节点 我的感悟： 我感觉，python中对链表的概念，很弱。 链表在现在语言中，用的不多。 先搁置。 理解难点： 可以看懂代码。 总结概括： 代码示例： # Definition for singly-linked list. # class ListNode: # d ......
python3发送Gratuitous ARP更新vip绑定关系
操作系统 ：CentOS 7.6_x64 Python版本：3.9.12 FreeSWITCH版本 ：1.10.9 高可用场景下，vip切换完成后需要发送arp广播更新ip和mac地址的绑定关系，如果不及时发广播，会导致tcp重连等问题。 今天记录下python3如何使用arp广播更新ip和mac地 ......
代码随想录算法训练营第二十天|654.最大二叉树，617.合并二叉树，700.二叉搜索树中的搜索，98.验证二叉搜索树
一、654.最大二叉树 题目链接： LeetCode 654.最大二叉树 学习： 思路： 前序遍历 方法参数：(int[] nums, int start, int end) 返回类型：TreeNode 终止条件： if(end-start==0) return null; if(end-start ......
记录：使用 Python 操作 Cloudflare R2 对象存储
创建存储桶：仪表盘 -- R2 -- 创建存储桶 R2 界面右上角 -- 管理 R2 API 令牌 -- 创建 API 令牌 cloudflare/python-cloudflare: Python wrapper for the Cloudflare Client API v4 python AP ......
低代码如何实现插件化架构？
大家好，本文介绍了实现插件化的低代码架构的思路，以及在Meta3D（开源Web3D低代码平台）中具体实现的方案 需求 有同学想做个编辑器，希望可以随意替换引擎、编辑器UI，能以插件的形式进行扩展，问该如何实现？ 下面，我们首先给出抽象的解决方案： 抽象的解决方案 如上图所示，编辑器由多个积木组成，其 ......
python df.assign()临时列应用
指定列df.assign() df.assign(k=v)为指定一个新列的操作，k为新列的列名，v为此列的值，v必须是一个与原数据同索引的Series。今后我们会频繁用到它，它在链式编程技术中相当重要，因此这里专门介绍一下。我们平时在做数据探索分析时会增加一些临时列，如果新列全部使用赋值的方式生成， ......
pandas删除 python
删除 删除有两种方法，一种是使用pop()函数。使用pop()，Series会删除指定索引的数据同时返回这个被删除的值，DataFrame会删除指定列并返回这个被删除的列。以上操作都是实时生效的。 # 删除索引为3的数据 s.pop(3) # 93 s ''' 0 89 1 36 2 57 4 65 ......
day03 代码随想录算法训练营 206. 反转链表
题目：206. 反转链表 我的感悟： 理解cur是什么? 相信自己！！ 代码难点： cur = head 可以省略不 每一个步骤里的cur是什么 代码示例： # Definition for singly-linked list. # class ListNode: # def __init__(s ......
python3报错 'function' object has no attribute 'func_name'解决
python3与python2命名规则不同 参加python3官方文档： The function attributes named func_X have been renamed to use the __X__ form, freeing up these names in the funct ......
Python环境安装与配置
0安装Python 0.0 下载安装Python 要用Python，那肯定得先装个Python呐！ 先把Python官网扒出来。访问速度一般不咋滴，请耐心等待~ 如果正常，应该能出来个这个： TMD我等了半天出来个我不认识的全英版本？ 是的，就是这样的。 没事，我帮你翻译。选Downloads，鼠标 ......
代码随想录 day06 有效的字母异位词 返回数组的交集 找快乐数 两数之和
有效的字母异位词： 思路比较简单 由于范围比较小 只有小写字母为范围 利用26大小的数组 遍历字符串 第一个串在对应下标++ 第二个++ 然后数据存在不为零就是不一样的 不存在则时字母异位词 返回数组的交集 由于要返回的是交集 就是查找两个集合出现的元素 想到要使用hash map 具体的数据结构而 ......
uni app 上拉加载下拉刷新代码
uni app 上拉加载下拉刷新代码 先记下来，以后备用 <template> <view class="app"> <u-row> <u-col span="4"> <!-- <mix-list-cell :title="category.caname" @onClick="show=true"> ......