数据 爬虫 二手房python
python 中英文对齐
python 中英文对齐 代码 def get_len(string: str): length = 0 for ch in string: if '\u4e00' <= ch <= '\u9fa5': # 是中文字符 length += 2 else: length += 1 return len ......
关于前端基础数据结构的问题
常用的数据集采用数组的好处，当然对于前端新人来很容易混淆，如下的数据是数组（js的数组本就是特殊的对象，因此又叫数组对象）由于这缘故很多网上的叫法五花八门 所以下面的数据结构很容易混淆，以为这是数组对象（其实这样叫没错，只是理解成是真对象（js的数组也是对象的一种，先区别一下免得混淆））其实是数组（ ......
如何将后台数据显示在html页面里面
问题描述 因为我当时入门用的是jsp嘛，然后就对jsp的相关操作比较熟悉，现在换成html，它和jsp有一些不同的语法，jsp有的语法在html并不被认可，然后就遇到了这个问题 问题解决 我一开始直接使用之前惯用的${text}来获取，笑死，根本没用！ 然后就开始尝试其他的解决办法了， 利用scri ......
Spider爬虫
爬虫Spider 该爬虫分为两部分，分别为Spider.py和model.py Spider.py 该文件主要业务逻辑是调用Selenium来通过自动化测试的方法实现模拟人的行为来对网页进行请求，并将请求到的HTML提取为文本，为后续的数据抽取做铺地。需要的第三方工具包Selenium，scrapy ......
java常见数据结构及其方法
java栈的使用: import java.util.Stack; //引用栈 //初始化 Stack<Integer> stack = new Stack<Integer>(); //进栈 stack.push(Element); //出栈 stack.pop(); //取栈顶值（不出栈） sta ......
有关拦截器拦截指定的url并作出处理返回数据
这里会介绍一下用的比较多的前置拦截。 拦截器和过滤器都是对一写相应的请求处理进行一系列操作，但是会有一些先后顺序区别。 我画了一张图： 执行的先后顺序就不做赘述了。 这次我主要正对拦截器作出一些操作。 有关我的前置拦截器的使用场景如下 第一步是构建自己的 Interceptor ，只需要构建一个类实 ......
python项目生成exe
前言 做了个python的小项目，需要打包为桌面端的exe使用，结果一打包，体积直接上百兆了，研究了下，使用虚拟环境打出的包会更干净小巧。 安装anaconda(用作python的虚拟环境管理工具) 安装：https://repo.anaconda.com/archive/Anaconda3-202 ......
消息队列和数据库区别
虽然在理论上，使用数据库来实现消息队列是可行的，但是这种实现方式存在一些潜在的问题和限制，相较于专业的消息队列服务，使用数据库作为消息队列的实现方式有以下几个问题： 性能问题：数据库是为了存储大量数据而设计的，而消息队列则是为了高效地处理大量的消息而设计的。在高并发的场景下，数据库可能会成为瓶颈，影 ......
基于pip的python包管理工具
以下是软件下载链接：https://mysecreat.lanzoub.com/i5yvf0swgtne 软件功能：可以对python包进行安装、卸载、升级、换源等操作，不用输入复杂命令 源码： import osdef menu(): while(True): choice=input("1.安装 ......
基于pyinstaller的python打包工具
以下是软件链接：https://mysecreat.lanzoub.com/iZPGf0swgtbc 软件功能：可以对py文件进行打包，功能基于pyinstaller模块，因此需要安装python环境，其它不用管，软件会自动检测模块安装情况 分割线 分割线 以下是源码： import os, shu ......
Python程序笔记20230306
判断闰年 初始版本 year = input('请输入一个年份：') while not year.isdigit(): year = input("抱歉，您的输入有误，请输入一个整数：") year = int(year) if year % 400 == 0: print(year, "是闰年！ ......
python面试题-2023(面试)
1.python中有哪些可变类型与不可变类型? 可变：list、dict、set 不可变：tuple、str、整型(int、float、complex) 注意：可变对象可以在原来地址上修改元素，不可变则不行(即不能在自己身上增删改)，若要修改可以使用对象拼接赋值给新的对象，总之不能修改自身 参考链接 ......
mysql创建百万条虚假数据进行学习
1.创建基础表 CREATE TABLE `app_user` ( `id` bigint(20) unsigned NOT NULL AUTO_INCREMENT, `name` varchar(50) DEFAULT '' COMMENT '用户昵称', `email` varchar(50) ......
mysql,dorics数据库查询不同类型数据前10条信息
select t1.id,t1.name from ( select t.id ,t.name ,row_number()over(partition by t.id order by t.date) rn from A t ) t1 where t1.rn<=10; 结果如下： ......
Apipost数据模型上线，解决相似数据结构复用问题
在API设计和开发过程中，存在许多瓶颈，其中一个主要问题是在遇到相似数据结构的API时会产生重复性较多的工作：在每个API中都编写相同的数据，这不仅浪费时间和精力，还容易出错并降低API的可维护性。 为了解决这个问题，Apipost推出了数据模型板块。用户可以预先创建多个数据模型，并在API设计过程 ......
每天进步一点点-Python中4大文件处理库（os、shutil、glob、pathlib）
四大库各自好用的地方 这里采用文字叙述为大家讲解这四大模块各自的用法，具体内容会在后面详细介绍。 1. os库 对于os模块来说，这是大家最熟悉的一个库，功能相对很齐全，主要像以下这些功能： os.getcwd()：获取当前的工作路径； os.chdir() ：改变当前工作目录到指定的路径； os. ......
水流数据分析
import pandas as pd import matplotlib.pyplot as plt inputfile="D:\数据分析\original_data.xls" data=pd.read_excel(inputfile) lv_non=pd.value_counts(data['有 ......
python常识系列08-->logging模块基础入门
前言努力从今天开始，成功从“零”开始。一、logging模块是什么？是Python内置的标准模块，主要用于输出运行日志 二、日志是什么？日志是代码的必要组成部分记录日志能显示程序当前运行状态出问题后定位当时问题对日志记录的数据挖掘进行统计和分析（比如 **地区登录APP人数较多等）三、python日 ......
数据类型校验——schema
背景 一般情况下，我们都是按照既定的数据结构和输入参数进行在程序开发。但是往往在调试过程中，我们会发现大部分情况下，都是传入的参数不符合预期。那么针对该问题，我们就需要引入数据类型校验工具。 如果参数数量较少，限制比较简单，我们可以使用以下三种方式进行解决： 第一种：通过try...except（或 ......
python compile函数用法
将文本代码编译成Python可执行代码，这个代码对象可以通过eval()或exec()函数执行。 compile()函数的语法如下： compile(source, filename, mode, flags=0, dont_inherit=False, optimize=-1) 参数说明： sou ......
scikit-learn 中 Boston Housing 数据集问题解决方案
scikit-learn 中 Boston Housing 数据集问题解决方案 在部分旧教程或教材中是 sklearn，现在【2023】已经变更为 scikit-learn 作用：开源机器学习库，支持有监督和无监督学习。它还提供了用于模型拟合、数据预处理、模型选择、模型评估和许多其他实用程序的各种工 ......
【0基础学爬虫】爬虫基础之数据存储
大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为数据存储。 概述 上期我们介绍到了文件存储，讲到了如何将数据存 ......
python虚拟环境
Python虚拟环境是一种为Python项目创建隔离的开发环境的方式，能够在单个安装的Python实例中创建多个独立的开发环境。Python虚拟环境将安装到特定目录中，并能够在该目录下管理Python包和依赖项，不会与其他Python项目的开发环境冲突。 虚拟环境可以使用 `venv` 模块来创建。 ......
在LINQPad中使用FreeSql查询数据库
如何在LINQPad中使用FreeSql LINQPad是一款强大的C#交互式编程环境，它可以让你轻松地编写和测试C#代码片段。除了作为一个交互式编程环境，LINQPad还可以用来连接各种数据源，包括SQL数据库、NoSQL数据库、Web服务等等。此外，LINQPad还支持使用NuGet包管理器来安 ......
Graphs with Python: Overview and Best Libraries
Graphs with Python: Overview and Best Libraries Graph analysis, interactive visualizations, and graph machine learning A graph is a relatively old mat ......
在LINQPad中使用FreeSql查询数据库
如何在LINQPad中使用FreeSql LINQPad是一款强大的C#交互式编程环境，它可以让你轻松地编写和测试C#代码片段。除了作为一个交互式编程环境，LINQPad还可以用来连接各种数据源，包括SQL数据库、NoSQL数据库、Web服务等等。此外，LINQPad还支持使用NuGet包管理器来安 ......
python实验室1-列表套列表-子列表反转
python实验室1-列表套列表-子列表反转 实现列表套列表，其中的各个子列表实现反转 现象：使用map，在cmd 和 pycharm环境 实现不一样 现象1：cmd >>> a = [[1,2,3], [2,5,7]] >>> a [[1, 2, 3], [2, 5, 7]] >>> b = ma ......
django admin 自定义添加单独行 增加数据统计功能
需求： 需要在某个页面单独增加一行，以便统计这一行的金额进行汇总显示，具体操作如下 不建议直接修改change_list.html，所以扩展 template admin.py中对应的admin.ModelAdmin中添加： # 1.如果你改了 template 的名称，这里可以对应修改，否则默认即 ......
kafka查看数据_Kafka 数据积压情况查看
导述由于消息消费速度处理慢或是消费端故障会导致数据产生积压。 那怎么查看数据积压量呢？ Consumer-Groups管理在Kafka 的bin目录下提供了 kafka-consumer-groups.sh 脚本。此脚本用于管理消费情况。 查询消费者组 $KAFKA_DIR/bin/kafka-co ......