脚本 环境python django

02 python爬虫-bs4

[TOC] ## 步骤 1. 爬取主页面中的文章详情的url和图片地址 2. 下载图片 并请求加文章详情中的页面内容 3. 爬取文章详情中的标题、作者、发布时间 ## 代码 ```python import requests import csv from bs4 import BeautifulS ......
爬虫 python bs4 02 bs

IPTABLES脚本命令

iptables命令 原创 Cloud研习社 Cloud研习社 2023-05-30 08:33 发表于山东 收录于合集 #linux248个 #计算机219个 #云计算235个 #防火墙6个 #iptables4个 教程每周二、四、六更新 iptables命令 查看帮助文档: [root@m01 ......
脚本 IPTABLES 命令

yum本地仓库脚本编写

Linux内网Yum仓库自动化部署脚本 原创 李逸皓 运维book思议 2023-05-29 18:57 发表于河北 收录于合集 #Linux26个 #脚本71个 #运维38个 #服务器30个 #shell54个 先放个链接,万一有人关注呢 运维book思议 李小白,一个北漂的运维。希望能够通过本公 ......
脚本 仓库 yum

bat脚本在C:\Program Files (x86)使用普通权限运行与使用管理员权限运行获取当前路径的差异

bat脚本在C:\Program Files (x86)使用管理员权限运行获取当前路径不对。 bat脚本如下: @echo off set "current_dir=%cd%" echo Current directory: %current_dir% set "filepath=%current_ ......
权限 脚本 路径 差异 管理员

VS2022跨项目文件输出到指定文件夹脚本

脚本 : copy $(TargetPath) $(SolutionDir)”路径地址“$(TargetFileName) /y 举个栗子: ”路径地址“ = TestClient\bin\Debug\net5.0-windows\Modules\ => copy $(TargetPath) $(S ......
文件 脚本 文件夹 项目 2022

爬虫-Python爬虫常用库

一、常用库 1、requests 做请求的时候用到。 requests.get("url") 2、selenium 自动化会用到。 3、lxml 4、beautifulsoup 5、pyquery 网页解析库 说是比beautiful 好用,语法和jquery非常像。 6、pymysql 存储库。操 ......
爬虫 常用 Python

linux C中调用shell命令和运行shell脚本

1、system(执行shell 命令) 相关函数 fork,execve,waitpid,popen表头文件 #include<stdlib.h>定义函数 int system(const char * string);函数说明 system()会调用fork()产生子进程,由子进程来调用/bin ......
shell 脚本 命令 linux

【一生一芯】PA0:LINUX环境搭建

最近申请参与“一生一芯”项目,想要了解一块CPU是怎么设计出来的。花了半天时间跟着PA0一起完成了LINUX环境的配置,特此记录配置的过程。 一、制作Windows & Linux 双系统 由于我使用的是Windows系统的电脑所以要制作一个双系统出来(不推荐使用虚拟机,以前用过驱动之类的东西很麻烦 ......
一生 环境 LINUX PA0 PA

Python并发编程系列之多进程(multiprocessing) (转)

阅读目录 1 引言 2 创建进程 2.1 通过定义函数的方式创建进程 3 Process的常用属性和方法 3.1 守护进程:daemon 3.2 进程终结于存活检查:terminate()与is_alive() 3.3 join()方法 4 进程间的同步控制 4.1 进程锁:Lock 4.2 信号量 ......
multiprocessing 进程 Python

Python 发送微信消息

# Python 发送微信消息 安装 ```shell pip install itchat ``` ## 1、基本使用 ```python # 使用微信接口给微信好友发送消息, import itchat nickname = "迪丽热巴" send_message = "测试消息" try: # ......
消息 Python

Python 发送邮件

# Python 发送邮件 ## 1、案例一 (发送普通邮件) ```python import smtplib from email.mime.text import MIMEText # 发送普通邮件 # POP3 服务器地址:pop.qq.com # SMTP 服务器地址:smtp.qq.co ......
邮件 Python

《最新出炉》系列初窥篇-Python+Playwright自动化测试-2-playwright的API及其他知识

1.简介 上一篇宏哥已经将Python+Playwright的环境搭建好了,而且也简单的演示了一下三款浏览器的启动和关闭,是不是很简单啊。今天主要是把一篇的中的代码进行一次详细的注释,然后说一下playwright的API和其他相关知识点。那么首先将上一篇中的代码进行一下详细的解释。 2.代码解释 ......

Python 函数

函数返回多个返回值 ```python def multiple_return_value(): import datetime d = datetime.date.today() val_1 = '年份为:{}'.format(d.year) val_2 = '月份为:{}'.format(d.m ......
函数 Python

python 中 re.match和re.search()函数

两者都返回首次匹配字符串的索引,re.match函数只从头开始匹配, re.search函数不限制只从头开始匹配。 001、re.match函数 [root@PC1 test2]# python3 Python 3.10.9 (main, Mar 1 2023, 18:23:06) [GCC 11. ......
函数 python search match re

python 视频拆分成帧,帧合成视频

参考python将视频切分成帧&&帧合成视频,下面的代码来自这篇博客。 # 视频拆分成帧 import cv2 def video2frame(videos_path,frames_save_path,time_interval): ''' :param videos_path: 视频的存放路径 : ......
视频 python

支持在 Windows 环境下安装和使用。以下是在 Windows 环境下安装 CloneDeploy 的步骤 CloneDeploy 的使用操作步骤

CloneDeploy 是一款基于 Linux 的开源系统部署解决方案,但也支持在 Windows 环境下安装和使用。以下是在 Windows 环境下安装 CloneDeploy 的步骤: 准备环境:在安装 CloneDeploy 前,需要先在 Windows 操作系统中安装好 Apache、PHP ......
CloneDeploy 步骤 Windows 环境 是在

< Python全景系列-9 > Python 装饰器:优雅地增强你的函数和类

装饰器在 Python 中扮演了重要的角色,这是一种精巧的语言特性,让我们能够修改或增强函数和类的行为,无需修改它们的源代码。这篇文章将深入探讨装饰器的所有相关主题,包括装饰器的基础知识、实现与使用、工作原理,以及通过实际例子学习装饰器的独特用法。 ......
Python 函数 lt gt

【Python-Scripts】自动删除Jenkins任务构建历史记录

任务背景: Jenkins构建历史记录很多,占用服务器磁盘空间较大,根据开发需求定期删除历史记录。 1 #!/usr/bin/env python 2 # -*- coding:utf-8 -*- 3 4 5 import datetime 6 import jenkins 7 import tim ......
Python-Scripts 任务 Jenkins Scripts Python

python计算IRR公式

1. Python计算IRR公式 ```python from scipy import optimize # 计算现值 def xnpv(rate, cashflows): return sum([cf / (1 + rate) ** ((t-cashflows[0][0]).days/365.0 ......
公式 python IRR

Python的分布式网络爬虫

分布式爬虫其实就是指利用多台计算机分布式地从互联网上采集数据的一种爬虫。它可以把大规模的任务分解成若干小规模的,由多台计算机并行进行处理,大大提高了效率和速度。 分布式爬虫有很多优势:解决单机爬虫效率低的问题,分布式爬虫可以将任务分配给多个节点并行处理,大大提高了效率和速度。可以节省带宽和内存资源, ......
爬虫 分布式 Python 网络

python的peft包导入PeftModel时报importerror-cannot-import-name-unknown-location

一般出现这种问题的原因是该版本的peft包中没有PeftModel,这种情况都需要降级。 我验证了以下,我实在alpaca-lora项目中使用peft,alpaca-lora的项目大概在2个月以前更新,而peft包实在最近更新的4.0版本,而2个月以前peft还是2.0版本,所以我果断把peft降到 ......

Python抽象类

# Python抽象类 python没有接口类型,因为python是动态类型的语言,像接口这种轻耦合的东西在python中随处都是,例如内置的魔法方法等,甚至可以说在python这种天马行空的语言中接口显的反而有点清秀。 不过Python还是提供了像java中那样的抽象类定义方法,某些时候还是有用的 ......
Python

RL 基础 | 如何注册自定义 gym 环境

*如何搭建自定义 gym 环境*:https://www.cnblogs.com/moonout/p/17174833.html 如何注册自定义 gym 环境: - 博客:https://zhuanlan.zhihu.com/p/102920005?utm_id=0 - OpenAI Gym 给出的 ......
环境 基础 gym RL

python~发布自己的py组件

你使用python写的东西,想让其它人直接使用,可以像java,.net一样,发到包管理平台即可,在python中,你可以使用twine这个工具来实现发布,就像.net里的nuget,java里的mvn deploy一样。 # 本地自己用 * 添加一个hello.py的文件,里面有个say方法 ,打 ......
组件 python

centos7 安装python3.8.16

## 升级openssl ### 下载 openssl openssl 官方下载地址:https://www.openssl.org/source/ ``` wget https://github.com/openssl/openssl/archive/OpenSSL_1_1_1d.tar.gz ` ......
centos7 python3 centos python 8.16

python 切片

Python列表切片Python中符合序列的有序序列都支持切片(slice),例如列表,字符串,元组。切片操作基本表达式:object[start_index : end_index : step] 切片表达式包含两个":" ,用于分隔三个参数(start_index、end_index、step) ......
python

python 校验 ipv4 ipv6 格式是否正确,是否属于某网段

### 使用 python 自带的 ipaddress 模块 #### 一、ipv4 ``` import ipaddress # 判断 ipv4 地址格式是否正确 如:ip = "192.168.1.101" ip = ipaddress.IPv4Address(ipv4) # 判断 subnet ......
网段 ipv 格式 python ipv4

bashrc添加环境变量当用户登录时生效,等号两边不要有空格

bashrc是Linux系统中的一种shell脚本,当用户登录时,bashrc文件会被自动执行。它是一个用于加载环境变量和自定义脚本的地方,可以用来定制您的系统环境。在本文中,我们将详细介绍如何在bashrc文件中添加环境变量。 一、基础知识 在开始添加环境变量之前,您需要了解bashrc文件及其作 ......
等号 变量 环境 用户 bashrc

Python 二维码生成

# Python 二维码生成 ## 1、案例一 安装 ```shell pip install qrcode -i https://pypi.douban.com/simple ``` 代码 ```python # 导入模块 import qrcode # 传入将要生成二维码的URL img = q ......
Python

Python 实现进度条

# Python 实现进度条 ## 1、案例一 代码 ```python import sys import time def progress_bar(): for i in range(1, 101): print("\r", end="") print("Download progress: ......
进度 Python