语句contextlib笔记python

记一次python写爬虫爬取学校官网的文章

有一位老师想要把官网上有关数字化的文章全部下载下来,于是找到我,使用python来达到目的 首先先查看了文章的网址 获取了网页的源代码发现一个问题,源代码里面没有url,这里的话就需要用到抓包了,因为很明显这里显示的内容是进行了一个请求,所以只能通过抓包先拿到请求的url从而获得每一篇文章对应的ur ......
校官 爬虫 python 文章

梦断代码读书笔记03

很高兴终于看完了梦断代码这本书,不得不感慨这本书的独到魅力所在,它所囊括的内容对我们的软件开发真的有很大帮助。chandler团队继续向前探索,遇到了难题在团队坚持不懈执着下依然一一解决,他们在软件开发过程中遇到的问题可能就是我们以后要遇到的问题。作者通过对chandler团队的探索告诉我们软件开发 ......
代码 笔记

查看python脚本所依赖三方包及其版本

1.使用pip命令安装,利用豆瓣镜像,命令如下: pip install pipreqs -i http://pypi.douban.com/simple --trusted-host pypi.douban.com 2.在终端导入程序 export PATH=$PATH:~/.local/bin ......
三方 脚本 版本 python

python csv.reader 读取文件或list

读取文件 with open(file_path, encoding='UTF-8') as file: lines = csv.reader(file, delimiter="#", quotechar='"') for row in lines: print(row) 读取list 注意:如果是 ......
文件 python reader list csv

软构学习笔记-工厂模式

三个工厂模式方法 Introduction 工厂模式属于设计模式中创造型模式的一种。 它提供了一种创建对象的方式,将创建对象的过程作了优秀的封装。 使得创建对象的创建逻辑不会暴露给客户端,而是通过接口来进行对象的创建。 简单工厂模式 定义: 定义一个工厂类,根据传入的参数不同返回不同类型的实例,被创 ......
工厂 模式 笔记

ubutn在线服务器python Package安装到离线服务器

1、在线服务器导出requirement.txt pip freeze > requirement.txt 该文件生成完毕后,需要做些修改,去掉不需要的库,否则下载的时候会出错。 2、下载whl文件 -> packages pip download -r requirement.txt -d pac ......
服务器 Package python ubutn

人月神话阅读笔记1

第一章:需求的难题 本章主要讲述了软件开发中需求的难题,探讨了需求不明确、需求变更等问题对项目开发带来的影响和挑战。弗雷德里克·布鲁克斯指出,需求是软件工程中一个不可避免的难题,但其重要性却常常被忽略。 在项目开发前必须要明确所有关键的需求,并且发现需求变化的风险。如果没有做到这些,开发过程中就会出 ......
神话 笔记

多项式学习笔记

符号与约定 若无特殊说明,多项式的大小均默认为 $n=2^k$。 我们定义 $[x^i]F(x)$ 表示 $F(x)$ 的第 $i$ 项系数,其中 $F(x)$ 为多项式。那么有 $F(x)=\displaystyle\sum_{i=0}^{n-1}[x^i]F(x)\cdot x^i$。 我们使用 ......
多项式 笔记

Python小练习:解决strftime()中国时区乱码问题

Python小练习:解决strftime()中国时区乱码问题 作者:凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 1. mytest.py 1 # -*- coding: utf-8 -*- 2 # Author:凯鲁嘎吉 Coral Gajic 3 # ......
乱码 时区 strftime Python 问题

Python ArcPy批量计算多时相遥感影像的各项元平均值

本文介绍基于Python中ArcPy模块,对大量长时间序列栅格遥感影像文件的每一个像元进行多时序平均值的求取。 在遥感应用中,我们经常需要对某一景遥感影像中的全部像元的像素值进行平均值求取——这一操作很好实现,基于ArcMap软件或者简单的Python代码就可以实现;但有时候,我们会需要结合同一地区 ......
均值 遥感 影像 Python ArcPy

0001笔记【并行计算】CUDA在现代C++中如何运用?看这一个就够了

SM(流多处理器)和板块(block) 一个板块会被调度到一个SM上,直到执行结束 一个block一旦被调度到某个SM上,就会一直执行,直到执行结束(gpu不存在时间片轮转),好处是不需要像cpu一样切换上下文,就也不需要保存寄存器和共享内存的开销 一个block里的一个线程,则是被调度到一个SP上 ......
笔记 0001 CUDA

python如何对.csv文件里面的信息进行数据可视化

相关步骤 1、首先打开.csv文件 2、然后获取任意指定列的所有数据 3、绘制出折线图 4、然后由于国家数量过多,就成了这副样子 但是数据是没有错误的 尝试更改后,其实也是没有啥效果; 然后就把他放在世界地图了: ......
文件 数据 python 信息 csv

NDVI计算 ,c#和python代码实现

以下代码为gpt自动生成 计算NDVI(归一化植被指数)需要计算红外波段和可见光波段的反射率,所以需要使用遥感图像处理软件或库来读取和处理遥感图像数据。以下是一个简单的C#代码示例,用于计算NDVI: using System; using System.Drawing; using Accord. ......
代码 python NDVI

读书笔记

1、可靠的开发软件,并让我们的开发更易于理解和维护的唯一途径,是遵循我们称之为 DRY 的原则:系统中的每一项都必须具有单一、无歧义、权威的表示。 DRY 是 Dont’t Repeat Yourself 的缩写。 2、重复的产生通常有以下种类: 强加的重复。开发者觉得他们无可选择,其实是有一些方法 ......
笔记

typescript装饰器(decorator)笔记

介绍: 随着TypeScript和ES6里引入了类,在一些场景下我们需要额外的特性来支持标注或修改类及其成员。 装饰器(Decorators)为我们在类的声明及成员上通过元编程语法添加标注提供了一种方式。 Javascript里的装饰器目前处在建议征集的第三阶段,但在TypeScript里已做为一项 ......
typescript decorator 笔记

Python精品书籍

目录 Python精品书籍 * 参考资料 基础 Python编程:从入门到实践(第2版) 笨办法学_Python Coding for Kids: Python: Learn to Code with 50 Awesome Games and Activities Python Tricks A B ......
书籍 精品 Python

python 爬取豆瓣top250电影图片

import urllib.request import requests from lxml import html headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:73.0) Gecko/201001 ......
电影图片 豆瓣 python 电影 图片

高等数学笔记一

数学基础知识 数据科学需要一定的数学基础,但仅仅做应用的话,如果时间不多,不用学太深,了解基本公式即可,遇到问题再查吧。 以下是以前考研考博时候的数学笔记,难度应该在本科3年级左右。 高等数学 1.导数定义: 导数和微分的概念 $f'({{x}{0}})=\underset{\Delta x\to ......
数学 笔记

Python爬取大数据实现疫情数据可视化

实现啦! 数据爬取 对于Python爬取数据这一内容,直接使用短短的几行代码就能够实现: 然后根据数据的具体情况,将相关数据存储到后缀名为**.csv**的文件中: 数据可视化 将存储到**.csv**文件的数据读取出来,然后将他与Python的数据可视化联系起来,这样就很轻松地实现数据可视化啦! ......
据实 大数 疫情 数据 Python

【python基础】定时任务框架APScheduler

1. 基础概念 APScheduler是python中较为简洁直观的定时任务框架,提供了基于固定日期、时间间隔、crontab表达式三种任务类型,并且可以持久化任务(如:将定时任务保存到mysql中),方便我们去实现一个python定时任务系统。 APScheduler由四个部件组成: trigge ......
APScheduler 框架 任务 基础 python

Python实现搭建-简单服务器教程

Python动态服务器网页(需要使用WSGI接口),基本实现步骤如下: 1.等待客户端的链接,服务器会收到一个http协议的请求数据报 2.利用正则表达式对这个请求数据报进行解析(请求方式、提取出文件的环境) 3.提取出文件的环境之后,利用截断取片的方法将文件名转化为模块名称 4.使用m = __i ......
服务器 教程 Python

mysql 查询语句定义变量及报错等解决

MySQL存储过程中,定义变量有两种方式:1.使用set或select直接赋值,变量名以 @ 开头.例如:set @var=1;可以在一个会话的任何地方声明,作用域是整个会话,称为用户变量。 2.以 DECLARE 关键字声明的变量,只能在存储过程中使用,称为存储过程变量,例如:DECLARE va ......
变量 语句 mysql

Java开发笔记15(树的列表查询)

1. Controller: /** * 通过id查询树列表 * @param id */@GetMapping("/listById")private Result listByParentId(String id) { String stationTelecode = getStation(ge ......
笔记 Java

查看 WINDOWS 11 笔记本电池容量方法

大多人都有笔记本续航焦虑,随着笔记本的使用时间,电池容量也会有损耗。如果你想知道笔记本电池还剩余多少容量,可以通过用管理员身份运行终端,然后输入下面的命令: powercfg /batteryreport /output "C:\battery.html" 回车命令后,就会在 C 盘根目录生成 ba ......
容量 电池 WINDOWS 笔记本 笔记

Python格式化字符格式化

Python格式化字符 %s %d %f 格式 描述 %% 百分号标记 #就是输出一个% %c 字符及其ASCII码 %s 字符串 %d 有符号整数(十进制) %u 无符号整数(十进制) %o 无符号整数(八进制) %x 无符号整数(十六进制) %X 无符号整数(十六进制大写字符) %e 浮点数字( ......
格式 字符 Python

python注意

变量 不用声明类型 函数:用def定义 Flask 新建 安装flask 新建创建一个python文件 ..在页面输出一个hellowork 赋值一个变量,实例化 导入Flask 定义路由,然后返回 默认匹配到/ 调试模式 修改代码没有剩下,修改代码后需要 重新运行 每次启动,关闭 很麻烦 有调试模 ......
python

python pip 设置成清华源或阿里源

#设置为清华源 pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple # 设置成阿里云源 pip config set global.index-url https://mirrors.aliyun.com/ ......
python pip

python3路径

(1)在windows中,有效路径为: c: d:/ e:\ e:\git e:/git 转为e:\git 不能双写\\或者// (2)python中 os.listdir(pa) 如果是直接调用,参数pa=”i:”,获取的就是i:下的子文件或子目录 而通过pyqt调用,参数pa=”i:”,居然获取 ......
路径 python3 python

linux安装两个python版本

1.下载python3安装包 wget https://www.python.org/ftp/python/3.7.2/Python-3.7.2.tgz 2.解压python的tgz压缩包文件 tar -xzvf Python-3.7.2.tgz 3.进入解压的文件 cd Python-3.7.2 ......
两个 版本 python linux

python 读写西门子PLC

本文将使用一个gitHub开源的组件技术来读写西门子plc数据,使用的是基于以太网的TCP/IP实现,不需要额外的组件,读取操作只要放到后台线程就不会卡死线程,本组件支持超级方便的高性能读写操作 nuget地址:https://www.nuget.org/packages/HslCommunicat ......
python PLC