数据 爬虫 二手房python
CentOS系统使用docker-compose安装Doris数据库
doris当前最新版本为1.2.3 1、docker与docker-compose安装 docker安装：CentOS安装Docker docker-compose安装：docker-compose安装与使用 2、doris相关下载 1）doris-be、doris-fe 2） 3、修改 vi /e ......
python习题-筛法求素数
【题目描述】 用户输入整数n和m（1<n<m<1000），应用筛法求[n,m]范围内的所有素数。 【基本思想】 用筛法求素数的基本思想是：把从2到N的一组正整数从小到大按顺序排列。从中依次删除2的倍数、3的倍数、5的倍数，直到根号N的倍数为止，剩余的即为2~N之间的所有素数。 【源代码程序】 def ......
python（十一）：小型数据库：shelve
Python中shelve模块是对象持久化保存方法，将对象保存到文件里面，缺省（即默认）的数据存储文件是二进制的，可以作为一个简单的数据存储方案。使用时，只需要使用open函数获取一个shelf对象，然后对数据进行增删改查操作，在完成工作、并且将内存存储到磁盘中，最后调用close函数变回将数据写入 ......
python习题-验证6174猜想
【题目描述】 1955年，卡普耶卡(D.R.Kaprekar)对4位数字进行了研究，发现一个规律：对任意各位数字不相同的4位数，使用各位数字能组成的最大数减去能组成的最小数，对得到的差重复这个操作，最终会得到6174这个数字，并且这个操作最多不会超过7次。请编写程序验证这个猜想。 【源代码程序】 d ......
python习题-杨辉三角
【题目描述】 输出n（0<n）行杨辉三角形，n由用户输入。 【源代码程序】 n = int(input("请输入要打印的杨辉三角的行数: ")) # 初始化杨辉三角的第一行 triangle = [[1]] # 循环生成杨辉三角 for i in range(1, n): # 初始化当前行的第一个元 ......
【python爬虫】爬取美女图片
一，导入包文件 os：用于文件操作。这里是为了创建保存图片的目录 re：正则表达式模块。代码中包含了数据处理，因此需要导入该模块 request：请求模块。通过该模块向对方服务器发送请求获取数据包 lxml：通过etree模块中的xpath方法来获取html标签中的属性值或者文本内容 headers ......
20230412-Python-pycharm使用技巧
1.新建文件，自动生成代码 2.自动补齐自定义段落 3.修改注释颜色 ......
Python的函数的缺省值参数（空列表）之坑
From https://www.jianshu.com/p/9f899d829562 def add(x,lst = []): if not(x in lst): lst.append(x) return lst list1 = add(1) print(list1) list2 = add(2) ......
js的基本数据类型的检测
检测变量类型： 1. typeof 运算符用来判断未知数据的数据类型，返回值是一个用来描述类型的字符串，有6种结果 (string,number, boolean,object, function, undefined)需要注态的是，数组，null在使用typeof判断的时候都会返回object。 ......
模型+数据=新模型
链家BELLE https://mp.weixin.qq.com/s/73EI7cY10ERQ075v2Uvyqg， 中文对话大模型BELLE全面开源！ https://github.com/LianjiaTech/BELLE 该项目目前已经开源了如下内容，并且在持续更新中： 150万中文指令微调数 ......
Python程序笔记20230304
抛硬币实验 random 模块 import random random.randint(a, b) 返回一个随机整数 N，范围是：a <= N <= b random.choice("ilovefishc") 从 "ilovefishc" 这个字符串中随机选出一个字符。 编写一个双色球的开奖模拟程 ......
第三章数据链路层
3.数据链路层 3.1 数据链路层概述 3.1.1 数据链路层的地位 我们在学习数据链路层时，可以将其传输单独看作一条传输线路来进行学习 3.1.2 链路、数据链路、帧 链路：是指一个节点到另一个节点之间直接相互连接(有线或者无线)，例如主机H1 和 路由器R1之间相互连接就是一条链路 若中间有多个 ......
echat 折线图，展示全部数据
父： import lineChart from './components/accountlintChart.vue' components: { lineChart }, 要设置 hazardBox 的宽高 <div class="hazardBox"> <lineChart :chartDat ......
如何利用CommMonitor抓取串口Modbus协议数据包
如何利用CommMonitor抓取串口Modbus协议数据包 原文链接：https://baijiahao.baidu.com/s?id=1728421275380437231&wfr=spider&for=pc 今天来分享一下，如何抓取串口设备的Modbus RTU数据包。先到CEIWEI软件官网 ......
Hive构造数据踩坑
运维哥哥为了获取每个表的访问时间，开启了Hive钩子，在集群参数里面配置了hive.exec.pre.hooks= org.apache.hadoop.hive.ql.hooks.UpdateInputAccessTimeHook$PreExec，结果导致在使用图1的sql时报找不到虚拟表的错误(如 ......
数据管道
[Eats data platform: Empowering businesses with data](https://medium.com/coupang-engineering/eats-data-platform-empowering-businesses-with-data-3cc00f ......
Python+selenium点击网页上指定坐标
from selenium import webdriver from selenium.webdriver.common.action_chains import ActionChains def click_locxy(dr, x, y, left_click=True): ''' dr:浏览器 ......
（三）python多进程multiprocessing模块的变量传递问题：父进程中的numpy.array对象隐式序列化到子进程后的inplace操作的问题
参考： https://docs.python.org/zh-cn/3/library/multiprocessing.html cloudpickle —— Python分布式序列化的专用模块 python多进程multiprocessing模块的变量传递问题：父进程中的numpy.array对象 ......
最全的python正则使用
正则表达式 一、概述 1. 概念 正则表达式是对字符串操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，这个“规则字符串”用来表达对字符串的一种过滤逻辑。 2. 目的 给定一个正则表达式和另一个字符串，我们可以达到如下的目的： a. 给定的字符串是否符 ......
十二、删除数据
12.1删除表中特定行>>> delete from customers where cust_id='10010'; # 删除指定的列；12.2删除表中所有行当delete语句没有where子句时，删除的是表所有行，但是delete只是删除了内容，但是原先数据占用的空间还在，要清空表并释放表空间T ......
十一、更新数据
11.1更新表中特定行>>> UPDATE costomers SET cust_email='elmer@sina.com' WHERE cust_id='10005'; #更新指定行的特定列>>> update costomers set cust_email='elmer@sina.com', ......
PetaPoco支持达梦数据库
本文用于记录PetaPoco支持达梦数据库所做的修改，本想把做的修改作为RP提交到PetaPoco库的，考虑到国产数据库只有我国推行的比较多，对老外来说可能会有片面性，因此放弃了，本文记录下修改的过程，以便需要的童鞋可以参考。 操作步骤 如下图所示， 添加 DmDatabaseProvider.cs ......
十、插入数据
10.1插入完整行>>> insert into customers values(NULL,'Pep E. LaPew','100 Main Street','Los Angels','CA','90046') ; #给表中的每一列都赋值,该语句当表结构发生变化时会出错>>> insert int ......
【解释器设计模式详解】C/Java/Go/JS/TS/Python不同语言实现
简介 解释器模式（Interpreter Pattern）是一种行为型设计模式。这种模式实现了一个表达式接口，该接口解释一个特定的上下文。这种模式常被用在 SQL 解析、符号处理引擎等。 解释器模式常用于对简单语言的编译或分析实例中，为了掌握好它的结构与实现，必须先了解编译原理中的“文法、句子、语法 ......
Python 自动登录
社交媒体登录自动化 from selenium import webdriver driver = webdriver.Firefox() driver.get(“https://www.facebook.com/") # Find the email or phone field and ente ......
二、排序数据
2.1 按单个列排序>>> select * from trade order by trade_time;2.2 按多个列排序>>> select * from trade order by trade_time,book_name;返回结果先按trade_time排序，再对trade_time相 ......
三、过滤数据
数据表中的数据一般都是非常大，我们一般只需要查询特定的数据3.1 where单一子句>>> select * from trade WHERE trade_date='20230313'; #匹配查询>>> select user_id,product_id,order_id form trade ......
六、分组数据
6.1 创建分组 group bygroup by规定：1).group by 可以包含任意数目的列，所以可以对分组进行嵌套；2).若group by 中嵌套了分组，数据将在最后规定的分组上进行汇总；3).group by 子句中列出的每个列都必须是检索列或有效表达式（不能是聚集函数）；4).如果分 ......
更新 Python 的 setuptools 包
[🔒CLASSIC] 在命令行中更新 Python 的 setuptools 包，您需要运行以下命令： cssCopy code pip install --upgrade setuptools 这将会安装或升级 setuptools 包到最新版本。确保您已经安装了 pip 并且使用的是正确的 P ......
python之封装mysql
数据查询类封装 1. 功能分析 可以连接不同sql数据库 查一条数据，多条数据 可以获取不同格式的数据 2. 封装成数据库查询类 封装思路: 数据库查询模块有多个功能，且需要复用，所以封装成类 在构造方法中创建连接 创建对象方法实现各种查询 # -*- coding: utf-8 -*- # @Ti ......