数据 爬虫 二手房python
如何深度学习Python？
安装必要软件：首先需要安装Anaconda或Miniconda等科研计算环境，并创建虚拟环境以便管理不同项目所需库和版本。可以按照如下步骤进行操作： 下载并安装 Anaconda 或 Miniconda。 打开命令行工具（Windows 系统中为 cmd），输入 conda create --nam ......
python连接redis集群写入数据
环境; Python:3.6.5 需要安装redis-py-cluster模块 #!/usr/bin/env python #coding=utf-8 from rediscluster import RedisCluster startup_nodes = [ {"host": "192.168. ......
爬虫四
selenium等待元素加载 代码操作非常快，有的还没加载，找不到就会报错 设置等待：显示等待，隐式等待 bro.implicitly_wait(10) 找某个标签，如果找不到，最多等待10s selenium元素操作 点击操作 click（） 写文字 send_keys（‘内容’） 清空文字 cl ......
最近用python解决了一个批量修改文件名的问题，大大地节省了很多人力成本。
最近用python解决了一个批量修改文件名的问题，大大地节省了很多人力成本。 重命名前： 重命名后： 以下是实现代码过程： import osdef func1(path1): i = 1 suffix = '.txt' # 设置后缀，筛选特定文件以更改名称 for file in os.listd ......
盘点一个Excel表格数据筛选的问题（上篇）
大家好，我是皮皮。 一、前言 前几天有粉丝问我Excel数据筛选的问题，原始数据如下图所示，其实一开始的总学时是字符串格式，我直接在wps里边进行了批量转换为数据操作，下面一起来看看需求吧。 粉丝的需求是根据原始表格，然后填充下表： 二、实现过程 这里其实使用Excel就可以实现，这里介绍两个方法， ......
20231107学习总结-大型数据库-实验1.熟悉常用的Linux操作和Hadoop操作
实验1 熟悉常用的Linux操作和Hadoop操作 1.实验目的 Hadoop运行在Linux系统上，因此，需要学习实践一些常用的Linux命令。本实验旨在熟悉常用的Linux操作和Hadoop操作，为顺利开展后续其他实验奠定基础。 2.实验平台 （1）操作系统：Linux（建议Ubuntu16.0 ......
StarRocks 新一代极速全场景MPP数据库
StarRocks 介绍 1.StarRocks介绍 StarRocks是新一代极速全场景MPP数据库。 StarRocks充分吸收关系型OLAP数据库和分布式存储系统在大数据时代的优秀研究成果，在业界实践的基础上，进一步改进优化、升级架构，并增添了众多全新功能，形成了全新的企业级产品。 StarR ......
大型数据库实验一
Linux操作和Hadoop操作实验报告 一、熟悉的Linux操作 1、切换到目录“/usr/local” 2、切换到当前目录的上一级目录 3、切换到当前登录系统的Linux系统的用户的自己的主文件夹 4、查看/usr目录下的所有文件和目录 5、在/tmp目录下，新建一个名为a的目录，并查看/tmp ......
Python学习1
PyCharm快捷键： ctrl+ alt + s:打开软件设置 ctrl+d∶复制当前行代码 shift + alt + 上/下:将当前行代码上调或者下调 crtl + shift + f10∶运行当前代码文 shift +f6 :重命名文件 ctrl+ f:搜索 数据类型： 注释分类： 注释是代 ......
C# 更新集合中某一个信息也是集合的数据
比如一个集合中，还有一个多选项，此多选项是作为一个集合，传输在总的集合上，更新这个多选项集合的代码 1.先更新总集合的基本数据 2.针对这个多选项集合的值，更新多选项 1 //从DB删除已经删除的问题 2 if (exam.ID > 0) 3 { 4 var sql = string.Empty; ......
Python语言的特点
Python语言的设计非常优雅，明确，简单。 语法简洁：实现相同语言的代码行数，是其他语言的1/5或者1/10，编写起来更加简单 与平台无关：Python程序可以在如何安装了Python解释器的计算机的环境上运行 粘性拓展：能够整合各种代码，被称为胶水语言 开源理念：为语言发展奠定了坚实的群众基础 ......
Python的应用领域
web开发 Python在web开发上有很多框架Django、Flask、Tornado等众多框架 在我国豆瓣、美团、知乎都使用Python做基础的设施建设 数据分析和科学计算： Python有着众多的第三方库的支持 方便帮助数据分析人员去完成数据分析和可视化的操作 人工智能和机器学习 可使用第三方 ......
PostGIS创建Gis空间数据库，shp数据入库
转自：https://blog.csdn.net/An1090239782/article/details/123509645 postgresql 创建gis空间数据库，shp数据入库https://blog.csdn.net/gis_zzu/article/details/91045052htt ......
通过存储过程，查询数据，结果转换为集合 传给前段
存储过程的优点是：可以传参，执行效率高，当遇到条件比较多，加载速度比较慢的功能，可以采用，使用存储过程查询数据，再将查询结果转换为集合，进行接口传值 1 [HttpPost] 2 public ActionResult List(View_Hos_UserPostSearch search) 3 { ......
云存储/视频监控管理平台EasyCVR，使用sqlite数据库出现卡顿该如何优化？
视频集中存储/云存储/视频监控管理平台EasyCVR能在复杂的网络环境中，将分散的各类视频资源进行统一汇聚、整合、集中管理，实现视频资源的鉴权管理、按需调阅、全网分发、智能分析等。AI智能大数据视频分析EasyCVR平台已经广泛应用在工地、工厂、园区、楼宇、校园、仓储等场景中。 有用户在现场部署Ea ......
数据结构与算法-递归
什么是递归 递归是一种非常高效、简洁的编码技巧。只要是满足“三个条件”的问题就可以通过递归代码来解决。 递归需要满足条件 1.找到递推公式 2.找到终止条件 比如查询某个节点以及所有子节点中.包含名字叫xx的。 1.递推公式 根据parentId查找子节点 2.找到children is null的 ......
python 播放语音使用 playsound -注意事项
https://github.com/TaylorSMarks/playsound pip install playsound >>> from playsound import playsound >>> playsound('/path/to/a/sound/file/you/want/to/p ......
postgis导入shp数据指空间坐标系的方法
转自：https://www.jianshu.com/p/2e3f31b9b903 1、通过postgis导入界面进行设置 2、通过sql语句进行设置 SELECT UpdateGeometrySRID('表名','geom',4326); 执行成功后可在geometrycolomns里这个表的sr ......
软件开发项目文档系列之八数据库设计说明书
数据库设计说明书是一个关键文档，它提供了有关数据库的详细信息，包括设计、结构、运行环境、数据安全、管理和维护等方面的内容 ......
mysql 表级锁之一元数据锁（meta data lock，MDL)
什么是元数据锁（meta data lock，MDL) 在MySQL5.5.3之前，有一个著名的bug#989(bug链接: MySQL Bugs: #989: If DROP TABLE while there’s an active transaction, wrong binlog order ......
MES数据追溯常遇问题及解决方法
MES数据追溯常遇问题及解决方法： 在实际数字化工厂MES应用过程，由于设计或使用不当，数据追溯过程中也可能会存在诸多问题，常遇问题包括：1. 数据质量问题 可能存在数据录入错误、数据缺失或不完整等情况，导致追溯结果的准确性受到影响。解决这个问题的关键是加强数据采集和录入的质量管理，例如通过自动化数 ......
ES写入数据报错403
1、现象描述 业务计算数据写入Elasticsearch的时候，无法入库，报错403，查看日志具体报错信息如下： {"index":{"_index":"202309010008","_type":"bonus","_id":"6Jq9p4sBwIccXLgNOqs_","status":403," ......
Python作业七
判断题1-1模块化设计程序时，尽可能使功能块内部耦合紧密，功能块之间耦合度低。（T) 1-2函数定义时，可以有多条return语句，但每调用一次该函数只会执行其中一条return。(T) 1-3Python 函数名与变量命名规则一样。(T) 1-4可以从程序中的任何位置访问局部变量。(F) 1-5P ......
python虚拟环境的使用笔记
方法一：在后台手动安装 1、输入命令：pip3 install virtualenv 2、指定目录：cd....; 然后输入：virtualenv env_django（创建虚拟环境） 3、激活该虚拟环境： windows进到目录里，的Script文件夹输入：activate linux：sorus ......
2023数据采集与融合技术实践作业四
2023数据采集与融合技术实践四 作业1： 要求: 熟练掌握 Selenium 查找 HTML 元素、爬取 Ajax 网页数据、等待 HTML 元素等内容。 使用 Selenium 框架+ MySQL 数据库存储技术路线爬取“沪深 A 股”、“上证 A 股”、“深证 A 股”3 个板块的股票数据信息 ......
python初学者学习笔记-第五章-函数
chapter5/函数 5.1 函数基础 5.1.1 函数形式 函数是可实现一个或多个功能的代码块； 函数的特点：重用性、模块化； Python的内置函数，如print()、len()、min()、max()等； 同时，我们也可以自定义函数； 5.1.2 函数调用 参数是函数重要组成部分，pytho ......
旅游管理与推荐系统Python+Django网页平台+协同过滤推荐算法
一、介绍 旅游管理与推荐系统。本系统使用Python作为主要编程语言，前端采用HTML、CSS、BootStrap等技术实现界面展示平台的开发，后端使用Django框架处理用户响应请求，并使用Ajax等技术实现前后端的数据通信。本系统主要功能有： 系统分为两个角色：用户和管理员 对于用户角色可以进行 ......
python初学者学习笔记-第四章-条件和循环
chapter4/条件和循环 4.1 条件 4.1.1 基本形式 条件语句是通过一条或多条语句的执行结果（True 或者False）来决定执行的子程序； 每个条件后面要使用冒号”:”，表示满足条件后执行子程序。 缩进来划分子程序范围，相同缩进的语句组成一个整体子程序。 如果“condition”为T ......
写一个测试脚本自动写入一个表100万数据
以下是一个简单的测试脚本，可以自动向表中写入100万条数据： -- 创建测试表CREATE TABLE test ( id INT NOT NULL AUTO_INCREMENT, name VARCHAR(50) NOT NULL, age INT NOT NULL, PRIMARY KEY (i ......