数据 爬虫 二手房python
python进阶之多态与鸭子类型
多态与多态性 什么是多态 多态指的是一类事物有多种形态，比如动物有多种形态：猫、狗、猪、牛、羊等 class Animal: #同一类事物:动物 def talk(self): pass class Tiger(Animal): #动物的形态之一:老虎 def talk(self): print(' ......
python进阶之抽象类
一、 什么是python的抽象类 Python中的抽象类是具有以下特征的class: 它不是用来初始化/实例化的。 相反，它是用于充当其它类的父类。 它必须继承基抽象类 abc.ABC。 它必须包含至少一个抽象方法。 Python中的抽象类，类似于C++中的纯虚类。或者Java中的interface ......
python进阶之多态与鸭子类型
多态与多态性 什么是多态 多态指的是一类事物有多种形态，比如动物有多种形态：猫、狗、猪、牛、羊等 class Animal: #同一类事物:动物 def talk(self): pass class Cat(Animal): #动物的形态之一:猫 def talk(self): print('喵喵喵 ......
python实现监控站点目录，记录每天更新内容，并写入操作日志，以便查找病毒恶意修改
问题描述：站点需要追溯代码的修改时间，以便尽早发现病毒恶意修改迹象，及时处理 运行环境：linux服务器，宝塔面板 示例代码：一、读取txt的文件路径，依次遍历所有目录下面的文件，并记录文件信息 paths.txt路径示例 # encoding: utf-8import osimport timei ......
xlrd读取excel数据：
import xlrd##打开excela = xlrd.open_workbook('C:/Users/admin/Desktop/zhiye.xlsx')###选择工作表#print(a)####查看工作表有多少个print(a.nsheets)print(f'Excel里面有{a.nsheet ......
Python 中的==操作符 和 is关键字
Python是一种功能强大的通用编程语言，提供了各种比较值和对象的方法。其中包括==操作符和is关键字，它们的用途不同，但由于它们有时可以达到相同的目的，所以经常会被混淆。在本文中，我们将深入研究==和is之间的区别，探索它们如何工作以及何时适当地使用它们。 https://avoid.overfi ......
Python手相识别教程1什么是手相术？
1 什么是手相术？ 在所有占卜方法中，手相可能是最有趣、最简单、最令人兴奋的一种。你可以在相对较短的时间内学会简单但准确的基本手相术，只需掌握最少的规则，其中大部分都是常识，因此在本书中，我将重点放在基本要素上，即准确解读所必需的东西，同时又不破坏其自发性。将手相术视为一门通灵艺术，你可以通过手掌了 ......
数据库连接设置
出现异常”The last packet sent successfully to the server was 0 milliseconds ago.“的大部分原因是由于数据库回收了连接，而系统的缓冲池不知道，继续使用被回收的连接所致的。 作者：小牛长成记 链接：https://www.jians ......
SQLServer BCP批量导入导出数据
SQLServer BCP批量导入导出数据 语法 bcp [database_name.] schema.{table_name | view_name | "query"} {in data_file | out data_file | queryout data_file | format nu ......
读算法霸权笔记12_数据科学
1. 公平与公正 1.1. 公平大多数时候只是副产品 1.2. 由贪婪或偏见导致的不公正一直发生在我们身边 1.2.1. 如果承认法律面前人人平等，或者作为选民的大众应该被平等对待，我们就不能允许模型把我们分为不同的群体进行区别对待 1.3. 对于数学模型来说，公平和公共利益也是如此，其价值难以用数 ......
[转帖]mysql8 ALGORITHM=INSTANT 亿级数据秒速增加字段
一、概述登录后复制 在线DDL之快速增加列（秒级别的），并不会造成业务抖动。该功能自 MySQL 8.0.12 版本引入，是由腾讯游戏DBA团队贡献，此功能只适用于 InnoDB 表。实际上MySQL 5.7就已支持 Online DDL，虽说大部分 DDL 不影响对表DML操作，但是依然会消耗非常 ......
python-下载小说的正确姿势
一、目标 1、能够用bs4来抓取网络的文字、图片、音频、视频；音频和视频还没有爬取过，哈哈哈！ 2、爬取顶点小说中的一部非常好看的修仙类小说《凡人修仙传》链接：https://www.ddyueshu.com/1_1562/ 3、以前已经爬过一次了，再爬一次,记录一下过程 二、思路 1、直入正题，利 ......
数据库有故障怎么了？
数据库故障是不可避免的，任何软件，无论是开源类还是商业类，只要是人创造的，就一定会存在产品缺陷（bug），软件越复杂，承载任务越繁多，触发bug的概率就越大，这是IT人的基本常识。 快速定位能力的关键性 真正重要的是，在出现故障时，如何迅速而有效地应对故障，定位故障根因并给出有效的解决方案，这才是确 ......
hudi数据湖
字节跳动基于 Hudi 的实时数据湖平台 https://developer.volcengine.com/articles/7220345269954003004 数仓实时化改造：Hudi on Flink 在顺丰的实践应用 https://www.logclub.com/articleInfo/ ......
python-数据解析-bs4介绍
一、数据解析方式-bs4 1、 爬虫数据的解析常用方式有三种： 1、正则表达式 2、bs4 3、xpath解析 2、本次主要学习bs4，首先要先准备好环境，即要安装使用beautiful Soup，这里已经安装好了bs4模块，如下： pip install bs4 和 pip install lxm ......
Python笔记三之闭包与装饰器
本文首发于公众号：Hunter后端 原文链接：Python笔记三之闭包与装饰器 这一篇笔记介绍 Python 里面的装饰器。 在介绍装饰器前，首先提出这样一个需求，我想统计某个函数的执行时间，假设这个函数如下： import time def add(x, y): time.sleep(1) ret ......
Python 通过 akshare 绘制中国平安均线并显示买卖点
继续上篇，通过 akshare 绘制中国平台的均线，并在 5日线上穿 10日线的时候，显示买入信号，在5日线下穿 10日均线的时候，显示卖出信号 环境： python3.9(miniconda3)、Pycharm、Win10 需要用的模块或者工具库： akshare(1.11.91)、pandas( ......
python进阶之继承与派生
继承 一 、继承介绍 1.1 什么是继承和多继承 继承是一种创建新类的方式，在Python中，新建的类可以继承一个或多个父类，新建的类可称为子类或派生类，父类又可称为基类或超类 class ParentClass1: #定义父类 pass class ParentClass2: #定义父类 pass ......
数据仓库、数据湖、湖仓一体的区别？
https://www.cnblogs.com/miketwais/articles/data_lakehouse.html 数仓：存储结构化数据，基于指标需求，面向主题组织数据，协助经营者进行决策； 数据湖：存储结构化，半结构化，非结构化，二进制数据，强调的是对于原始数据的存储，保留数据的完整性。 ......
在MFC中使用CArchive进行串行化数据
使用CArchive进行数据串行化非常的方便。 CArchive持有一个CFile对象，通过此对象进行读写，那么所有基于CFile的子类，都可以使用CArchive来进行串行化。 示例： CFile file(_T("1.txt"), CFile::modeReadWrite); CArchive ......
python人脸识别
应用范围广泛 安全与监控：人脸识别在安防领域中具有显著的应用，可用于识别入侵者或追踪犯罪嫌疑人。 社交媒体和相册组织：社交媒体平台和相册应用可以利用人脸识别来自动标记照片中的人物，方便用户组织和查找照片。 医疗保健：人脸识别技术在医疗保健中用于患者身份验证和监测，例如识别患者病情变化。 市场营销：广 ......
使用 Python 进行简单的人脸识别
介绍 人脸识别技术已经成为当今世界许多领域的重要应用，从安全领域到社交媒体，无处不在。Python 提供了许多强大的库和工具，使得实现人脸识别变得更加容易。本文将介绍如何使用 Python 中的一些流行库来进行简单的人脸识别。 准备工作 在开始之前，确保你已经安装了以下库： OpenCV: 用于图像 ......
Python Pandas 数据清洗
1、处理缺失数据 处理缺失数据是数据清洗过程的一个重要部分。缺失数据可以以多种方式出现，最常见的是作为 NaN（Not a Number）。处理缺失数据涉及使用 isna() 或 isnull() 检测缺失值，fillna() 填充缺失值，dropna() 删除包含缺失值的行或列，以及 inte ......
mysql数据库（2）
一、B树、B+树 官方文档里说到，B树根节点指向叶子节点，但是人们忘了叶子节点可以互相指向，于是B+。 create table t1( a int primary key, b int, c int, d int, e varchar(20) )engine=InnoDB; 操作系统页单位4KB， ......
09_数据-拓展知识
数据拓展知识 整数拓展 进制 / 二进制：0b/ 十进制 / 八进制：0 / 十六进制：0x 浮点数拓展 银行业务用 BigDecimal（数学工具类）表示 最好完全避免使用浮点数进行比较！！！（重要） 用 == 输出两个是否相等 字符拓展 所有字符本质还是数字 （int）字符：强制转换为编码 编码 ......
python-bs4获取图片
一、用一个实例来了解一下 1、既然要用BeautifulSoup来解析，首先要把需要的模块导入； import os import requests from bs4 import BeautifulSoup 2、创建一个文件夹来存放要下载的数据：文件的名可以用户自定义 file_name = "i ......
【Python入门教程】读取图片信息最全教程（经纬度、偏转角、无人机影像、大疆）
通常读取图片的属性信息（如经纬度、拍摄时间、IMU数据等）都是通过exifread库进行读取，但是有些图片用这个库读取的效果不好。所以今天我就和大家分享一下如何使用Python读取图片属性信息的三种方法。 ......
【Python&RS】栅格数据/图片位深度（bit）转换
关于栅格数据/图片的位深度（eg.8bit、16bit、32bit）转换之前我就发过一篇文章，【Python&RS】基于GDAL栅格数据/图片位深度（bit）转换。但是最近在使用的时候发现好像效果不行，有时候转换不成功，所以自己又研究了一下原理重新写了一份代码。今天就和大家分享一下如何使用Pyth... ......
30道python自动化测试面试题与答案汇总
对于机器学习算法工程师而言,Python是不可或缺的语言,它的优美与简洁令人无法自拔,下面这篇文章主要给大家介绍了关于30道python自动化测试面试题与答案汇总的相关资料,需要的朋友可以参考下 1、什么项目适合做自动化测试？ 关键字：不变的、重复的、规范的 1）任务测试明确，需求不会频繁变动 2） ......
使用Python+selenium实现第一个自动化测试脚本
这篇文章主要介绍了使用Python+selenium实现第一个自动化测试脚本，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧 最近在学web自动化，记录一下学习过程。 此处我选用python3.6+selenium3.0，均用最新 ......