数据 爬虫 二手房python
《Python编程快速上手—让繁琐工作自动化》实践项目答案：第六章
实践项目 表格打印 编写一个名为printTabel() 的函数，它接受字符串的列表的列表，将它显示在组织良好的表格中，每列右对齐，假定所有内层列表都包含同样数目的字符串，例如： 你的printTable() 函数将打印出： 点击查看代码 tableData = [['apples','orange ......
蓝图，g对象，数据库链接池
flask蓝图使用 blueprint 翻译后称之为蓝图。 作用是： 用来划分目录 之前写项目的时候全在一个py文件内写flask项目。 需要使用蓝图来划分目录。小型项目与大型目录都可以 蓝图使用 1 导入蓝图类 业务视图里 from flask import Blueprint 2 实例化得到 ......
子组件传递数据给父组件的三种方法
1.props <template> <!-- App.vue --> <div id="app"> <!-- 向子组件中传入函数 --> <Student :receive="receive"></Student> </div> </template> <script> import Studen ......
Python中pip的更新
安装插件时遇见如下错误 解决方法 按照他的提示输入：python -m pip install --upgrade pip 结果还是报错，是因为服务器连接超时 有效解决方法 python -m pip install --upgrade pip -i https://pypi.douban.com/ ......
表格 表格 编辑之间数据联动需要注意的事项
1. let newList = JSON.parse(JSON.stringify(this.questionsList)) 把要赋值的数据转成json字符串，然后再转成json数据赋值2. newList = [...this.questionsList]如果数组的每项不是对象，可以通过结构赋值 ......
电商产品评论数据情感分析
第一部分：数据处理 代码12-1 评论去重的代码 import pandas as pdimport reimport jieba.posseg as psgimport numpy as np # 去重，去除完全重复的数据reviews = pd.read_csv("D:\大三下大数据分析\第七周 ......
蓝图的使用、g对象、数据库连接池
1 蓝图的使用 # blueprint 翻译过来的，称之为蓝图 # 作用是：之前全在一个py中写flask项目，后期肯定要划分目录 # 不用蓝图，划分目录 no_blueprint_flask # 项目名 src #核心源码位置 __init__.py # 包 里面实例化得到了app对象， mode ......
oracle数据库按用户备份恢复,使用 expdp、impdp
1，在数据库本机执行 su - oracle 切换oracle用户 sqlplys / as sysdba 使用超级用户登select * from dba_directories; 查看管理员目录，一般会存在几个。 2，导出命令， expdp user/passwd@orcl schemas=us ......
Python字符串与Unicode
在Python读取文件中，最让人头疼的就是对文本文件的读取，因为对文本文件读取涉及到编码。如果一个采用GBK编码的文件，使用UTF-8进行解码，那么得到的字符就会产生乱码，因此作为程序员，我们在开发中理解正在处理的是那种字符串数据非常重要。 1、Python中的字符串 实际上Python语言中有两种 ......
利用opencv库使用Python将视频逐帧转为图片
做成型的语义分割软件需要，写了一个，在博客记录一下 import cv2 def video2pic(videoFile, outputFile): vc = cv2.VideoCapture(videoFile) c = 1 if vc.isOpened(): rval, frame = vc.r ......
Grafana+Prometheus监控mysql数据库
在做性能测试的时候难免会被定位搞得晕头转向，那么有一套好的监控系统对于测试来说那就是天眼，今天我们就来搭建一套监控mysql数据库的监控系统 Grafana+Prometheus+MySQL+Mysqld_Exporter。 准备工具： MySQL：5.7 InfluxDB：1.7.9 Grafan ......
大数据带来新机遇：如何利用大数据技术优化跨境电商运营？
互联网和电商的不断发展，跨境电商已经成为一种全新的商业模式。然而，跨境电商的运营需要面对很多挑战，如物流、支付、语言文化等。如何利用大数据技术优化跨境电商运营成为一个重要的课题。 一、大数据技术在跨境电商中的应用 数据挖掘 数据挖掘是大数据技术的核心之一，它可以对跨境电商的数据进行深入挖掘，帮助企业 ......
初始数据库
数据库 一、数据库管理软件的由来 基于我们之前所学，数据要想永久保存，都是保存于文件中，毫无疑问，一个文件仅仅只能存在于某一台机器上。 如果我们暂且忽略直接基于文件来存取数据的效率问题，并且假设程序所有的组件都运行在一台机器上，那么用文件存取数据，并没有问题。 很不幸，这些假设都是你自己想象出来的， ......
跨境电商时代的“智慧引擎”：探索大数据如何推动跨境电商发展
如今跨境电商成为了国际贸易领域的一个新热点，而大数据技术的应用，则为跨境电商的发展提供了强大的助力。本文将从大数据的角度探讨如何推动跨境电商的发展，以及大数据技术在跨境电商中的应用。 一、大数据与跨境电商 随着全球化的加速，跨境电商已成为全球贸易的一部分。跨境电商将消费者、企业、政府等各个领域的参与 ......
python基础六（函数基础及参数使用）
一、 函数定义 1、什么是函数 函数就相当于具备某一功能的工具 函数的使用必须遵循一个原则： 先定义 后调用2、为何要用函数 代码冗余，程序的组织结构不清晰，可读性差 可维护性、扩展性差3、如何用函数 # 定义函数# 定义的语法 def 函数名(参数1,参数2,...): """文档描述""" 函数 ......
Windows批处理文件初始化数据库
前提是MySQL服务必须启动，Windows添加了MySQL的环境变量。 批处理文件： @ECHO OFF SET dbhost=127.0.0.1 SET dbuser=root SET dbpasswd=root SET dbName=xc_ntpclientmonitor SET sqlfil ......
面向chatgpt.finetune:将一段话转成finetune用的数据
Crafted by Genie You 根据这段话生成finetune json格式的数据源：学‛的主语解决了，那‚学‛的宾语是什么？也就是说，‚君子‛要学什么才能成就‚圣人‛？千古以来，基本所有的解释都把这‚学‛ 当成各种一般技能、学问的学习了。如果真这样，那不妨把‚房中术‛当成宾语，这话就变成 ......
自学Python爬虫笔记（day1）
环境python3.9版本及以上，开发工具pycharm 君子协议：robots.txt协议 规定了网站中哪些数据可以被爬虫爬取哪些不可以被爬虫爬取 下面是我学习的第一个爬虫的开发： from urllib.request import urlopen url = "http://www.baidu ......
力扣---剑指 Offer 41. 数据流中的中位数
如何得到一个数据流中的中位数？如果从数据流中读出奇数个数值，那么中位数就是所有数值排序之后位于中间的数值。如果从数据流中读出偶数个数值，那么中位数就是所有数值排序之后中间两个数的平均值。 例如， [2,3,4] 的中位数是 3 [2,3] 的中位数是 (2 + 3) / 2 = 2.5 设计一个支持 ......
安装MYSQL_5.0/8.0教程（附数据库和客户端工具下载链接）
1. Mysql5.7下载 网盘下载（推荐）： 链接：https://pan.quark.cn/s/d98d2536f847提取码：kbyN 官网下载： mysql下载地址： https://dev.mysql.com/downloads/windows/installer/8.0.html 跳转到 ......
高效简单的.Net数据库“访问+操作”技术
高效简单的.Net数据库“访问+操作”技术 本文技术源自外企，并已在多个世界500强大型项目开发中运用。 本文适合有初步C#、Linq、Sql知识的同学阅读。 相关技术在IDataAccess接口中提供。 IDataAccess所在的命名空间是：DeveloperSharp.Framework.Qu ......
数据库-向量数据库
###数据 数据科学家、数据工程师、数据分析师和数据产品经理 教育背景和工作经验背景： 业务领域，机器学习 工程能力 沟通能力 Amazon Redshift 是一款高性能、全托管的PB级云数仓 数据工具行业在从旧的软件时代进入新的一个以开源和云为主的时代 意味着围绕解决这些性能问题而构建的BI和E ......
电商产品评论数据情感分析
# -*- coding: utf-8 -*- # 代码12-1 评论去重的代码 import pandas as pdimport reimport jieba.posseg as psgimport numpy as np # 去重，去除完全重复的数据reviews = pd.read_csv( ......
第十二章——电商产品评论数据情感分析
代码1——评论去重 # 代码12-1 评论去重的代码 import pandas as pd import re import jieba.posseg as psg import numpy as np # 去重，去除完全重复的数据 reviews = pd.read_csv("D:/Jupyte ......
反爬虫常见策略总结
有爬虫就有反爬虫，这都是相辅相成的，对于长时期从事在爬虫行业的技术员来说，时刻要了解对应网站的反爬机制，才能稳定获取数据。下面就是我这几年接触过的反爬的一些案例，供大家参考下。 反爬虫 反爬虫，即应对爬虫进行反制的统称，主要区分“正常用户”与“机器人”的一种策略统称。 认识反爬虫 正所谓知其然，知其 ......
如何解决python中UnicodeDecodeError: 'utf-8' codec can't decode byte 0xxx in position xxx: invalid continuation byte问题
出现类似问题，是这个字节超出了utf-8的表示范围，出现了解码错误 解决方案：设置encoding = 'ISO-8859-1' 串口： data_count = data_ser.inWaiting()# print(data_count)if data_count != 0: recv = da ......
python把mp4转mp3
预先下载 Pip install moviepy from moviepy.editor import * def outputmp3(input_path, output_path): listdir = os.listdir(input_path) # 获得路径所有文件名 mp4namelist ......
opencv-python 4.10.4. 反投影直方图
理论 它由Michael J. Swain，Dana H. Ballard在他们的论文“Indexing via color histograms”中提出。 用简单的话来说，它到底是什么?它用于图像分割或查找图像中感兴趣的对象。简单地说，它创建了与输入图像大小相同(但是是单一通道)的图像，其中每个像 ......