数据 爬虫 二手房python
MySQL创建数据库（CREATE DATABASE语句）
在 MySQL 中，可以使用 CREATE DATABASE 语句创建数据库，语法格式如下： CREATE DATABASE [IF NOT EXISTS] <数据库名> [[DEFAULT] CHARACTER SET <字符集名>] [[DEFAULT] COLLATE <校对规则名>]; [ ......
【0基础学爬虫】爬虫基础之网络请求库的使用
大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为网络请求库的使用。 网络请求库概述 作为一名爬虫初学者，熟练使 ......
Window 10 系统 在命令行中输入python会跳转到商店问题解决
在Windows 10 中配置了python的环境变量，但是在命令行中输入python会跳转到商店 这是由于在环境变量中path配置了 %USERPROFILE%\AppData\Local\Microsoft\WindowsApps 导致，只需要将该环境变量的配置去除即可解决 我的是在用户变量的P ......
数据库事务总结
1、事务 事务指的是满足 ACID 特性的一组操作，可以通过 Commit 提交一个事务，也可以使用 Rollback 进行回滚。 ACID 原子性（Atomicity） 事务被视为不可分割的最小单元，事务的所有操作要么全部提交成功，要么全部失败回滚。 回滚可以用回滚日志（Undo Log）来实现， ......
python打包自己的包为.whl或者.tar.gz，（仅给自己发的人使用，其他人无法从官网下载）
此片文章,相当于发布自己的 Python 代码给别人 “pip install”文章的补充。发布自己的 Python 代码给别人 “pip install”(linux和windows都有)。（window版）发布自己的 Python 代码给别人 “pip install”(linux和window ......
响应字符数据
响应字符数据： @WebServlet("/servletDemo3") public class HttpServletDemo3 extends HttpServlet { @Override protected void doGet(HttpServletRequest req, HttpSe ......
Android 使用ListView只显示一条数据
情况一：ListView外嵌套了ScrollView导致 情况二：没有使用ScrollView 解决：动态获取ListView的高度，并用代码设置。在adapter中setAdapter之后调用以下方法即可。 setListViewHeightBasedOnChildren()方法如下： publi ......
远程连接数据库时候报Mysql has gone away的错误
连接远程服务器的MySQL的时候报了The server has gone away的错误，网上找了很多方法都没发现问题 最后使用 sudo netstat -an | grep 3306 发现3306端口只运行在ipv6上，这下找到原因了， 一开始在设置对外开发远程登录的时候修改了/etc/mys ......
linux安装两个python版本
1.下载python3安装包 wget https://www.python.org/ftp/python/3.7.2/Python-3.7.2.tgz 2.解压python的tgz压缩包文件 tar -xzvf Python-3.7.2.tgz 3.进入解压的文件 cd Python-3.7.2 ......
[转]excel把合并单元格中的数据分拆到每一行
原文地址:https://cloud.tencent.com/developer/article/1444393 我们经常看到如下图所示的Excel表格： 这种表格，每一列的包含关系，人眼看起来一目了然。但是A列B列这种由多个单元格合并起来的单元格，在使用程序进行处理的时候却非常不方便。 如果要使用 ......
Python 更好的文件路径处理模块 pathlib
pathlib 创建的Path对象,可以非常方便地操作目录及文件 import pathlib path = pathlib.Path.cwd() print("当前路径：",path) for item in path.iterdir(): if item.is_file(): print("fi ......
python 接口加密
# -*- coding: utf-8 -*- """ @author: Mr_zhang @software: PyCharm @file: encryption.py @time: 2023/3/23 10:00 """ import json import time import base64 ......
python排序自定义版本号
1.LooseVersion版本排序 格式 # 合法格式 re.compile(r'(\d+ | [a-z]+ | \.)', re.VERBOSE) 成功 from distutils.version import LooseVersion version_list = ['1.1.2', '1. ......
图数据库在中国移动金融风控的落地应用
本文整理自中国移动算法工程师——汪海涛在 NebulaGraph 2022 年度用户大会上的分享，现场视频见 B 站：https://www.bilibili.com/video/BV1Ae4y127a8/ 各位朋友上午好，我是来自中国移动的算法工程师汪海涛。接下来我主要聊一聊图数据库在中国移动，特 ......
20 个非常有用的 Python 单行代码！
1 一行 For 循环 for 循环是一个多行语句，但是在 Python 中，我们可以使用列表推导式方法在一行中编写 for 循环。以过滤小于250的值为例，查看下面的代码示例。 #For循环在一行 mylist = [200, 300, 400, 500] #正常方式 result = [] fo ......
[Python Pip] requirements.txt 使用方法
1. 安装对应的库 pip install pipreqs 2. 下载包，配置自己的环境 eg. pip install django 3. 打开命令窗口，进入requirements.txt所在的目录，执行如下命令导出库信息到requirements.txt pip freeze > requir ......
python 协程
1.协程定义 不开辟新的线程的基础上，实现多个任务，是个特殊的生成器。一秒钟能切换上百次。 2.原始版协程 import time #1.work1 生成器 def work1(): while True: print("executing work1......") yield time.slee ......
10 种聚类算法的完整 Python 操作示例
一.聚类 聚类分析，即聚类，是一项无监督的机器学习任务。它包括自动发现数据中的自然分组。与监督学习（类似预测建模）不同，聚类算法只解释输入数据，并在特征空间中找到自然组或群集。 群集通常是特征空间中的密度区域，其中来自域的示例（观测或数据行）比其他群集更接近群集。群集可以具有作为样本或点特征空间的中 ......
【经验】python运行报错ModuleNotFoundError: No module named XXX
应用场景本来是在pycharm里运行Python file，一切都很正常，然后为了让脚本自己乖乖地在服务器上跑，不占用IDE调试其他代码，所以决定用命令行直接在服务器上运行，结果报了如下错误： ModuleNotFoundError: No module named xxx其中 xxx 是项目中的子 ......
python apscheduler 定时任务的基本使用-2-date触发器的使用
python apscheduler 定时任务的基本使用-2-date触发器的使用 1、前言 date触发器是添加定时任务的最简单方法。date触发器只会运行一次任务，等同于UNIX的“at”命令。 2、参数说明 参数如下，除了add_job的通用参数外，只需要两个参数 run_date 表示运行的 ......
Python multiprocessing 多进程
进程：process 线程：thread Python多进程和多线程哪个快由于GIL的存在，很多人认为Python多进程编程更快，针对多核CPU，理论上来说也是采用多进程更能有效利用资源。但这不是说明多线程就没意义了，还是得根据实际场景来看。 对CPU密集型代码（比如循环计算），多进程效率更高。对I ......
python apscheduler 定时任务的基本使用-1-概念及组件构成
python apscheduler 定时任务的基本使用-1-概念及组件构成 1、前言 我们需要执行定时任务，可以使用apscheduler这个框架，选择它的原因，是网上都说常用的就是这个。随大流嘛！官方文档 2、下载 python -m pip install -i https://pypi.tu ......
对话抖音电商：量级庞大、参差不齐，“数据质量治理”有妙招！
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 经过近年发展，抖音电商的体量和规模已经相当可观。 基于数据驱动思路，在数仓建设、数据管理等层面的工作，推动抖音电商能准确分析和测量数据，做出以数据为依据的决策，从而推动业务快速发展。 其中，数据有效性、及时性、准确 ......
ArcGIS Pro处理发布并在前端调用bim数据全过程-rvt转slpk
记录ArcGIS处理三维bim模型全纪录，从原始的rvt格式开始，到最后web前端js api调用的整个过程，并记录部分中间操作过程中出现的问题和解决办法。 ......
stata:手工输入数据并保存为dta文件，长宽数据切换，形成面板数据
//手工输入数据保存为mb1.dta input id ks2020 ks2021 ks2022 ks2023 1 1 2 3 4 2 4 1 3 2 3 7 0 3 0 4 10 -1 3 -2 5 13 -2 3 -4 6 16 -3 3 -6 7 19 -4 3 -8 8 22 -5 3 -1 ......
oracle删除超过N天数据后释放表空间脚本
数据要求的是实时性，很久之前的数据可以自行删除处理，我们数据库用的oracle，所以就想着写一个脚本来删除，这样的话，脚本不管放在那里使用都可以达到效果 由于服务器是windows，参照Oracle Shell Scripting中，我们写一下windows下的脚本 首先删除数据的sql语句写一下 ......
SICP：求值和环境模型（Python实现）
一个环境就是帧（frame） 的一个序列，每个帧是包含着一些绑定（bindings） 的表格。这些约束将一些变量名字关联于对应的值（在一个帧内，任何变量至多只有一个绑定）。每个帧还包含一个指针，指向这个帧的外围环境（enclosing environment）。如果由于当前讨论的目的，将相应的帧看做... ......
LevelDb-基本数据结构
Slice 实现在slice.cc class LEVELDB_EXPORT Slice { ... void clear() { data_ = ""; size_ = 0; } void remove_prefix(size_t n) { assert(n <= size()); data_ + ......