matplotlib报告python pandas
python flashtext字符串快速替换，自然语言处理加速
在自然语言处理当中，经常对数据集进行一些数据字符的替换，表情的替换，以便在tokenizer的时候不被识别成[unk],造成信息的缺失 常规方法使用python自带的replace方法实现，但数据量很大时，效率显得低了 比如下面的代码，处理60000条数据需要3+小时 from tqdm.noteb ......
Python常见面试题017: Python中是否可以获取类的所有实例
017. Python中是否可以获取类的所有实例 转载请注明出处，https://www.cnblogs.com/wuxianfeng023 出处 https://docs.python.org/zh-cn/3.9/faq/programming.html#faq-multidimensional- ......
python 1970年以前 字符串转换时间戳
代码1 from datetime import datetime result = '1970-01-01 07:00:00' time_1 = '1966-07-17 06:03:00' if time_1 > result: array = time.strptime(time_1, "%Y- ......
python关于*args所能接收的参数、关于**kwargs所接收的参数详解
1 #!/usr/bin/env python 2 # -*- coding:utf8 -*- 3 # python-day32-20170110: 4 5 6 # 关于*args所能接收的参数 7 8 # 这种接收的是位置参数，可变长 9 def func1(*args): 10 print(ar ......
Pandas实现Hive中的窗口函数
1、Hive窗口函数 我们先来介绍一下Hive中几个常见的窗口函数，row_number(),lag()和lead()。 1.1 row_number() 该函数的格式如下： row_Number() OVER (partition by 分组字段 ORDER BY 排序字段 排序方式asc/des ......
kali linux 下安装vim插件完成python代码tab补全和代码高亮
使用git命令下载代码高亮插件 git clone https://github.com/vim-python/python-syntax.git -c http.proxy=http://127.0.0.1:7890注：http.proxy=http://127.0.0.1:port 为终端代理 ......
python get请求抓取网页
import requests url = 'https://www.douban.com/search?' # req = requests.get(url) headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) ......
「解题报告」UOJ605 [UER #9] 知识网络
好像并不是很难的题？~~虽然从上午想到现在才开始写，还因为不知道 __builtin_popcount(x) 传入的是 int 调了一个多小时~~ 题目就是要求一个全源最短路。直接求显然不太现实，考虑分析标签的性质。发现，同一标签内的所有点到某个点 $u$ 的最短路的差值一定不超过 $1$，因为同一 ......
Python 环境迁移
平时用python环境会装一堆依赖，也包括自己的模块，要迁移到陌生环境，得好好处理才行。 下面介绍个方法，实践过还可以： 总结下步骤： miniconda或conda安装一个python环境，python版本最好和后面新环境一样。 conda create -n sz python=3.6.8 在该 ......
python+运维+gpt
python+运维+gpt python的基础语言系统偏简单 较为复杂的代码大多来自第三方库impot的使用，短期内是可以熟悉并可以编写一些较为简单的基础性短篇代码、脚本：excel表格，日志收集脚本，定时任务启动的脚本等等 加上pycharm，vscode等的代码编写器的调试运行，可以通过借鉴等等 ......
python yeah 邮箱发邮件
设置 先理一下常见的电子邮件协议： SMTP、POP、IMAP 都遵循TCP/IP协议规范。至于Exchange是邮件服务器，不是收邮件和发邮件的协议，不要混淆概念，一般情况下不用，因为它是微软的产品。 SMTP：即简单邮件传输协议,它是一组用于由源地址到目的地址传送邮件的规则，由它来控制信件的中转 ......
python3 **解包
>>> d1 = {'name': 'apple'} >>> d2 = {'price': 10} # d1、d2 原始值不会受影响 >>> {**d1, **d2} {'name': 'apple', 'price': 10} >>> [1, 2, *range（3）] [1, 2, 0, 1, ......
linux下使用pyinstaller打包python脚本
最近给运维写一个系统维护的python脚本，但是被告知生产环境有很多服务器没有安装python解释器，于是在网上搜索多pyinstaller解决方案，本文简单记录之。 下载pyinstaller。 最新的pyinstaller版本为2.0版本，官方网站http://www.pyinstaller.o ......
linux安装两个python版本
1.下载python3安装包 wget https://www.python.org/ftp/python/3.7.2/Python-3.7.2.tgz 2.解压python的tgz压缩包文件 tar -xzvf Python-3.7.2.tgz 3.进入解压的文件 cd Python-3.7.2 ......
在docker安装Python环境提供给其他docker使用
1. 在宿主机新建一个目录 2. 在app目录下新建一个Dockerfile文件 本文永久更新地址: 1. 在宿主机新建一个目录 在宿主机上新建一个目录如app/，在app目录里面导入项目需要依赖的包 在项目根目录下输入命令，导出python项目所有的依赖包 pip freeze > require ......
python爬取股票数据
import json import os import requests import time def save_data(data, date): if not os.path.exists(r'stock_data_%s.csv' % date): with open("stock_data ......
设置jupyter notebook的python environment
(base)$ conda install nb_conda_kernels (base)$ conda create --name new-env (base)$ conda activate new-env (new-env)$ conda install ipykernel (base)$ c ......
Pandas50个高级操作， 转载
转自：机器学习杂货店 在数据分析和数据建模的过程中需要对数据进行清洗和整理等工作，有时需要对数据增删字段。下面为大家介绍Pandas对数据的复杂查询、数据类型转换、数据排序、数据的修改、数据迭代以及函数的使用。 01、复杂查询 实际业务需求往往需要按照一定的条件甚至复杂的组合条件来查询数据,接下来为 ......
Python json基本使用json.dumps() 和json.loads()
Python中 json的基本使用 json.dumps() 和json.loads() JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式，它是JavaScript的子集，易于人阅读和编写。 Json最广泛的应用是作为AJAX中web服务器和客户端的通讯的 ......
python - html转pdf
1. 安装pdfkit pip3 install pdfkit 2. 安装wkhtmltopdf 下载wkhtmltopdf安装包 https://wkhtmltopdf.org/downloads.html 安装后在系统Path添加wkhtmltopdf的bin路径 3. 简单使用 将本地html ......
Python script get date and time All In One
Python script get date and time All In One
Python shell script print current datetime to log file
......
windows环境下python3安装Crypto
pycrypto、pycrytodome和crypto是一个东西，crypto在python上面的名字是pycrypto，它是一个第三方库，但是已经停止更新三年了，所以不建议安装这个库；这个时候pycryptodome就来了，它是pycrypto的延伸版本，用法和pycrypto是一模一样的；所以， ......
linux安装两个python版本
1.下载python3安装包 wget https://www.python.org/ftp/python/3.7.2/Python-3.7.2.tgz 2.解压python的tgz压缩包文件 tar -xzvf Python-3.7.2.tgz 3.进入解压的文件 cd Python-3.7.2 ......
python 迭代器，生成器和装饰器
1）可迭代对象包含迭代器 2）如果一个对象拥有__iter_方法，其是可迭代对象；如果一个对象拥有__next__方法，其就是迭代器 3）定义可迭代对象，必须实现__iter__方法；定义迭代器，必须实现__iter__方法和__next__方法 Python函数的定义体中有yield关键字，该函数 ......
力扣1113(MySQL)-报告的记录（简单）
题目： 动作表：Actions 此表没有主键，所以可能会有重复的行。 action 字段是 ENUM 类型的，包含:('view', 'like', 'reaction', 'comment', 'report', 'share')extra 字段是可选的信息（可能为 null），其中的信息例如有： ......
Python中tqdm模块进度条
tqdm模块简单介绍 tqdm是一个可以显示Python进度条的模块，可通过pip在终端安装 pip install tqdm tqdm.tqdm from tqdm import tqdm for i in tqdm(range(1, 5)): print(i) 或传入字符串list: from ......
初识 Python 网络请求库 urllib
urllib 是 Python 自带的网络请求标准库，包含了多个处理 URL 功能的模块。 urllib.request 用于请求和读取 URL『包含网页认证、重定向、cookies 等等』，可以方便的获取 URL 内容。 urllib.error 用于 urlib.request 的异常处理。 u ......
python dict, list 转字符串
在Python中，可以直接使用 内置函数 str()，将字典/列表 转换为 json 字符串 dicta = {"name":"henry","age":32} lista = ["aa","bb","cc","dd"] listb = [1,2,3,4,5,6,7,100,200,30,40] a ......
Pandas 2.0 vs Polars:速度的全面对比
前几天的文章，我们已经简单的介绍过Pandas 和Polars的速度对比。刚刚发布的Pandas 2.0速度得到了显著的提升。但是本次测试发现NumPy数组上的一些基本操作仍然更快。并且Polars 0.17.0，也在上周发布，并且也提到了性能的改善，所以我们这里做一个更详细的关于速度方面的评测。 ......
Python爬虫之循环爬取多个网页
之前的文中介绍了如何获取给定网址的网页信息，并解析其中的内容。本篇将更进一步，根据给定网址获取并解析给定网址及其相关联网址中的内容。要实现这些功能，我们需要解决以下问题： 1、如何持续不断的获取 url，并读取相关内容。 2、如何判断网址是否已经读取过。 文中用到的代码均已上传到 github，在这 ......