logging python日志

【爬虫+数据清洗+可视化】用Python分析“淄博烧烤“的评论数据

[toc] # 一、背景介绍 您好,我是[@马哥python说](https://mp.weixin.qq.com/s/EuOKLq6ZSgQGnijreylSiA) ,一枚10年程序猿。 自从2023.3月以来,"淄博烧烤"现象持续占领热搜流量,体现了后疫情时代众多网友对人间烟火气的美好向往,本现 ......
数据 爬虫 Python

Python 读取图片 转 base64 并生成 JSON

Python 读取图片 转 base64 并生成 JSON ```python import json import base64 img_path = r'D:\OpenSource\PaddlePaddle\PaddleOCR\images\005.jpeg'; with open(img_pa ......
Python 图片 JSON base 64

【Python】将中文字符写入json文件

#### ensure_ascii ```python import json dict1 = {'name': '时间', 'data': ['2023-04-13 05:00']}, {'name': '雨量mm/h', 'data': ['0.0000']}, {'name': '温度℃', ......
字符 文件 Python json

python爬虫 requests访问http网站之443报错(ssl验证)

报错信息: ``` urllib3.exceptions.MaxRetryError: HTTPSConnectionPool(host='ssr4.scrape.center', port=443): Max retries exceeded with url: /page/1 (Caused b ......
爬虫 requests python 网站 http

【python】字符串

字符串 startwith startswith() 方法用于检查字符串是否是以指定子字符串开头,如果是则返回 True,否则返回 False。如果参数 beg 和 end 指定值,则在指定范围内检查。 语法: str.startswith(substr, beg=0,end=len(string) ......
字符串 字符 python

python QQ群数据获取

> code 来自于一个神奇的小伙伴:https://www.cnblogs.com/code3 ``` python import contextlib import time import requests import datetime import pandas as pd import p ......
数据 python

【python】os.path模块

os.path模块 os.path 模块主要用于获取文件的属性。以下是 os.path 模块的几种常用方法: 方法 说明 os.path.abspath(path) 返回绝对路径 os.path.basename(path) 返回文件名 os.path.commonprefix(list) 返回li ......
模块 python path os

【python】函数返回值,返回多个值(返回元组)

函数返回值,返回多个值(返回元组) 实例1: # 定义函数,有多个返回值(返回元组) def measure(): """测量温度和湿度""" print("测量开始...") temp = 39 wetness = 50 print("测量结束...") # 元组-可以包含多个数据,因此可以使用元 ......
函数 多个 python

【python】内置函数enumerate

内置函数enumerate enumerate() 函数用于将一个可遍历的数据对象(如列表、元组或字符串)组合为一个索引序列,同时列出数据和数据下标,一般用在 for 循环当中。 语法: enumerate(sequence, [start=0]) 参数 sequence :一个序列、迭代器或其他支 ......
函数 enumerate python

【python】切片

简单切片指的是这样的切片形式:a[start:stop],其行为是得到下标在这样一个前闭后开区间范围内的元素,其中start和stop为负数时,简单看作是负数下标对应的位置即可: >>> a [0, 1, 2, 3, 4, 5, 6, 7, 8, 9] >>> a[2:3] [2] >>> a[5: ......
python

Python网页爬虫代码

网页爬虫是一种自动化程序,可以自动地访问网页并提取其中的信息。它可以用于各种目的,例如搜索引擎的索引、数据挖掘、价格比较、舆情监测等。网页爬虫通常使用编程语言编写,例如Python、Java等。 以下是一个简单的示例,使用 Python 和 requests 库进行网页爬取: import requ ......
爬虫 代码 网页 Python

【python】内置函数list

list() 方法用于将元组转换为列表。 注:元组与列表是非常类似的,区别在于元组的元素值不能修改,元组是放在括号中,列表是放于方括号中。 #!/usr/bin/python # -*- coding: UTF-8 -*- aTuple = (123, 'runoob', 'google', 'ab ......
函数 python list

python实现密码与时间戳的加密

# 1. 概述: 由于工作需要,要对用户的密码进行加密,由于仅是用一种加密方式(例如md5)比较容易被破解,故,我们进行了二次加密,代码如下 # 2.代码实现 ``` import datetime import hashlib # 待加密信息 #加密方法 def encryption(pwd): ......
密码 时间 python

Python 中 sys.argv 可以看成一个列表

总结:sys.argv[] 是一个列表 sys.argv[0]是被调用的脚本文件名或全路径 sys.argv[1:]之后的元素就是我们从程序外部输入的,而非代码本身的,想要看到它的效果,就要将程序保存,从外部运行程序并给参数,这也是我们在cmd里面运行的原因。 ......
Python argv sys

Python异步编程之web框架 异步vs同步 文件IO任务压测对比

![image](https://img2023.cnblogs.com/blog/1060878/202305/1060878-20230529205308567-655163.jpg) # 测试基本信息 **主题:**比较异步框架和同步框架在文件IO操作的性能差异 **python版本**:py ......
框架 任务 文件 Python web

一文看懂Python collections模块的高效数据类型

# 一文看懂Python collections模块的高效数据类型 Counter Counter()是字典对象的子类。Counter()可接收一个可迭代遍历的对象(例如字符串、列表或元组)作为参数,并返回计数器字典。字典的键将是可遍历对象中的唯一元素,每个键的值将是可迭代对象中的每个唯一元素对应的 ......
collections 模块 类型 数据 Python

Python过滤信息,如省位中包含广东、安徽、浙江这3个省份的话,就pass,怎么破?

大家好,我是皮皮。 ### 一、前言 前几天遇到了一个小问题,在做资料的时候,遇到了几个特殊省位,需要挨个的去做资料,单独写了对应的代码。但是对于其他通用省位来说,整体的数据还是不变的,那么就需要对原始数据进行过滤。 其实你使用excel筛选功能也可以得到数据,过滤掉不需要的特殊省位即可,但是每次的 ......
省份 Python 信息 pass

python内置库--argparse

# 1 关于argparse 从命令行工具运行python时,argparse 可以解析命令行工具输入的各种数据,通过argparse提供的函数或者属性,我们可以获得它解析到的数据 通过argparse,我们也可以自定义命令行选项,比如pytest -s -v ,-s -v就是pytest定义的命令 ......
argparse python

使用PyInstaller工具将Python程序打包成Mac可执行文件步骤

大家好,我是皮皮。 ### 一、前言 前几天在Python钻石群【Jethro Shen】问了一个`Python`打包的问题,这里拿出来给大家分享下。 ![image.png](https://upload-images.jianshu.io/upload_images/26239789-64496 ......
PyInstaller 步骤 文件 工具 程序

python推荐系统实现(矩阵分解来协同过滤)|附代码数据

原文链接:http://tecdat.cn/?p=10911 最近我们被客户要求撰写关于推荐系统的研究报告,包括一些图形和统计输出。 用户和产品的潜在特征编写推荐系统矩阵分解工作原理使用潜在表征来找到类似的产品 1. 用户和产品的潜在特征 我们可以通过为每个用户和每部电影分配属性,然后将它们相乘并合 ......
矩阵 代码 数据 python 系统

facebook console.log bug All In One

facebook console.log bug All In One ......
facebook console bug All One

python大作业电影演员数据分析

#1项目目的与意义 ##1.1项目背景说明 在当今影视行业中,电影和演员信息是非常重要的资源,根据这些信息可以分析电影票房、电影市场趋势和演员影响力等相关信息。为了更好地利用这些信息,于是我开发一个电影和演员数据分析系统,以便能够检索并收集网络上的电影和演员数据。 本系统的主要受众为研究人员、学生、 ......
数据分析 演员 数据 python 电影

Python连接es笔记二之查询方式汇总

> 本文首发于公众号:Hunter后端 > 原文链接:[Python连接es笔记二之查询方式汇总](https://mp.weixin.qq.com/s/0Yn5c-U9pBWrSC5HrCgWog) 上一节除了介绍使用 Python 连接 es,还有最简单的 query() 方法,这一节介绍一下几 ......
方式 笔记 Python

Linux操作系统日志审计-关于secure和messages两个重要的日志的logrotate配置

关于Linux操作系统中有两个日志非常的重要的,常常用来对操作系统的活动进行审计,两个日志文件分别是: /var/log/secure /var/log/messages 其中 /var/log/secure 是 security and authentication-related message ......
日志 logrotate messages 两个 secure

python爬虫入门

使用sublime text3 可以先保存文件,保存文件时,名字后缀需要添加.py 否则无法识别为Python文件 为方便命令行调用,文件名不用空格 可直接在文件夹内输入cmd快捷进入,shift+右键也可以 Tab补齐内容,↑历史记录 前端入门 html <>开始</>结束 head内一般是导入的 ......
爬虫 python

【python基础】基本数据类型-数字类型

Python3 支持int(整型数据)、float(浮点型数据)、bool(布尔类型) # 1.int(整型数据) 在Python 3里,**只有一种整数类型 int,表示为长整型**。像大多数语言一样,数值类型的赋值和计算都是很直观的。 ## 1.1数值运算 编写程序如下所示 ![image](h ......
类型 数字 基础 数据 python

pycharm的python快捷键

1. 快捷键 ctrl+shift+F10 运行程序alt+1 打开或关闭左侧项目栏ctrl+d 复制行shift+delete 删除行,光标停在该行ctlr+y 删除行,光标跟着移动shifl+鼠标左键 多选行alt+鼠标左键 每行多个光标alt+shift+鼠标左键 竖着选取代码ctlt+shi ......
快捷键 pycharm python

codon-基于LLVM的python编译器

# 安装 目前只linux和mac系统。从下载最新版进行安装。然后设置环境变量: ```bash export PATH=~/.codon/bin:$PATH export CODON_PYTHON=/usr/lib/libpython3.10.so ``` 上述路径换成自己的系统路径。下面的示例代 ......
编译器 python codon LLVM

< Python全景系列-8 > Python超薄感知,超强保护:异常处理的绝佳实践

欢迎来到系列第八篇,异常处理的深入探讨。本文将分五部分展开。首先,我们将学习Python异常处理的基础知识,理解`try/except`语句的用法。然后,我们将了解Python的常见异常类型并通过实例理解它们的作用。第三部分,我们将更深入地解析`try-except`块,理解其工作原理及更加复杂的用... ......
Python 超薄 lt gt

Python进阶一

使用MarkDown学习Python。(前面基础的都在XMind) # 进制转换 1. 转成十进制(一般是二进制,八进制,十六进制): 所有转成十进制的,都只需要int(原数字的字符串格式,进制数) > a = "1001" s = int(a,2)这个就是把二进制的数字a转成十进制 print(s ......
Python