数据 爬虫 二手房python
【MySQL】利用函数批量生产数据，用于测试数据量下的性能
CREATE TABLE `user_operation_log` ( `id` int(11) NOT NULL AUTO_INCREMENT, `user_id` varchar(64) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci NULL ......
db2数据库备份脚本(linux)
#!/bin/bash dbprofileDir=/home/db2inst1/sqllib/db2profile backUpRootDir=/home/db2inst1/dbbackup/ dbName=svcdb dbUser=db2inst1 dbPassword=db2inst1 sftp ......
DB2数据库自动恢复脚本(linux)
################################################################################################### ## ## ## author:Gatsby Release Time:2023/3/17 desc ......
写入数据或者通过EXCEl批量导入到数据库时报类型转换异常问题
报错日志如下（此处我用的是达梦，实际MySQL和oracle也会有类似的问题）： Cause: org.apache.ibatis.type.TypeException: Error setting non null for parameter #15 with JdbcType null . Tr ......
Nlog-动态修改DatabaseTarget，对数据库字符串进行加密
private static Logger processLogger; // ① LnProcessDBLog标签 LogManager.GetLogger("LnProcessDBLog");②使用前先保证不为null，否则InitNlog(); // 修改Nlog.config配置的文件 pr ......
Python爬取大数据实现疫情数据可视化
实现啦！ 数据爬取 对于Python爬取数据这一内容，直接使用短短的几行代码就能够实现： 然后根据数据的具体情况，将相关数据存储到后缀名为**.csv**的文件中： 数据可视化 将存储到**.csv**文件的数据读取出来，然后将他与Python的数据可视化联系起来，这样就很轻松地实现数据可视化啦！ ......
【python基础】定时任务框架APScheduler
1. 基础概念 APScheduler是python中较为简洁直观的定时任务框架，提供了基于固定日期、时间间隔、crontab表达式三种任务类型,并且可以持久化任务(如:将定时任务保存到mysql中),方便我们去实现一个python定时任务系统。 APScheduler由四个部件组成： trigge ......
Python实现搭建-简单服务器教程
Python动态服务器网页（需要使用WSGI接口），基本实现步骤如下： 1.等待客户端的链接，服务器会收到一个http协议的请求数据报 2.利用正则表达式对这个请求数据报进行解析（请求方式、提取出文件的环境） 3.提取出文件的环境之后，利用截断取片的方法将文件名转化为模块名称 4.使用m = __i ......
走向更好的指令伴随的汉语语言模型：研究训练数据和评估的影响
Towards Better Instruction Following Language Models for Chinese: Investigating the Impact of Training Data and Evaluation 论文地址：https://arxiv.org/pdf/ ......
redis：redis介绍、redis linux下安装、redis三种启动方式、redis典型场景、redis通用命令、redis数据结构和内部编码、redis字符串类型
一、redis介绍 参考博客：https://www.cnblogs.com/liuqingzheng/articles/17324381.html 1.1 介绍 基于键值对的存储系统：字典形式 多种数据结构：字符串，hash，列表，集合，有序集合 高性能，功能丰富 1.2 Redis特性（8个） ......
Oracle 数据库设置最大进程数参数方法，oracle最大进程数满了处理方法，sysdba管理员登录报“maximum number of processes (150) exceeded“问题解决
oracle 数据库使用 sysdba 管理员登录报：ORA-00020: maximum number of processes (150) exceeded译：超过了最大进程数(150) 方法一：【修改 processes 参数】先通过 sysdba 身份登录。如果由于最大进程数满了登录不了，可 ......
Python格式化字符格式化
Python格式化字符 %s %d %f 格式 描述 %% 百分号标记 #就是输出一个% %c 字符及其ASCII码 %s 字符串 %d 有符号整数(十进制) %u 无符号整数(十进制) %o 无符号整数(八进制) %x 无符号整数(十六进制) %X 无符号整数(十六进制大写字符) %e 浮点数字( ......
python注意
变量 不用声明类型 函数：用def定义 Flask 新建 安装flask 新建创建一个python文件 ..在页面输出一个hellowork 赋值一个变量，实例化 导入Flask 定义路由，然后返回 默认匹配到/ 调试模式 修改代码没有剩下，修改代码后需要 重新运行 每次启动，关闭 很麻烦 有调试模 ......
从国家基因组科学数据中心下载数据
001、官方网站：https://ngdc.cncb.ac.cn/ 002、入口： 003、输入数据编号： 004、 005、 06、 linux下载说明 ......
Zabbix历史数据清理
使用truncate命令直接清空数据库，注意：清理数据属于高危操作，请在测试环境中验证后再执行线上操作！！！ truncate table history; truncate table history_uint; truncate table history_str; truncate table ......
python pip 设置成清华源或阿里源
#设置为清华源 pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple # 设置成阿里云源 pip config set global.index-url https://mirrors.aliyun.com/ ......
基于UDS的DoIp实现（一） -- UDS数据结构
一、单帧（SF） 二、首帧（FF） 三、连续帧（CF） 四、流控帧（FC） 一、单帧（SF） 单帧（SF）是UDS协议中数据传输的一种方式，用于传输长度小于等于7个字节的数据块。下面是单帧的数据结构图： BYTE 1 BYTE 2 BYTE 3 ... BYTE 8 + + + + + + + + ......
全量通过，华为云GaussDB首批完成信通院全密态数据库评测
摘要：100%全量通过！基于全栈创新计算架构的全密态数据库华为云GaussDB，完成了中国信通院组织的首批“全密态数据库”产品能力评测。 本文分享自华为云社区《全量通过！华为云GaussDB首批完成信通院全密态数据库评测》，作者： GaussDB 数据库。 100%全量通过！基于全栈创新计算架构的全 ......
python3路径
（1）在windows中，有效路径为： c: d:/ e:\ e:\git e:/git 转为e:\git 不能双写\\或者// （2）python中 os.listdir(pa) 如果是直接调用，参数pa=”i:”，获取的就是i:下的子文件或子目录 而通过pyqt调用，参数pa=”i:”，居然获取 ......
linux安装两个python版本
1.下载python3安装包 wget https://www.python.org/ftp/python/3.7.2/Python-3.7.2.tgz 2.解压python的tgz压缩包文件 tar -xzvf Python-3.7.2.tgz 3.进入解压的文件 cd Python-3.7.2 ......
jmeter数据库连接6
1，准备资料 1. 一个可用的数据库 2.连接数据库需要的驱动 2,jmeter连接数据库 3，发送插入语句请求 4，发送查询语句请求 5，发送删除语句请求 6,对数据库进行压测 本文永久更新地址: 1，准备资料 1. 一个可用的数据库 搭建一个mysql8.0的数据库环境，并设置数据库可以远程访问 ......
Redis Linux环境 安装，卸载，启动，通用名令，数据结构，字符串类型操作
Redis高级 速度快：10w ops（每秒10w读写），数据存在内存中，c语言实现，单线程模型 持久化方案：rdb和aof 多种数据结构： 5大数据结构 BitMaps位图：布隆过滤器 本质是 字符串 HyperLogLog：超小内存唯一值计数，12kb HyperLogLog 本质是 字符串 G ......
python 读写西门子PLC
本文将使用一个gitHub开源的组件技术来读写西门子plc数据，使用的是基于以太网的TCP/IP实现，不需要额外的组件，读取操作只要放到后台线程就不会卡死线程，本组件支持超级方便的高性能读写操作 nuget地址：https://www.nuget.org/packages/HslCommunicat ......
运行时数据区域
根据《Java虚拟机规范》规定，Java虚拟机所管理的内存包括以下几个运行时数据区域。 Java虚拟机运行时数据区 程序计数器 是一块较小的内存空间，它可以看作是当前线程所执行的字节码的行号指示器。在Java虚拟机的概念模型里，字节码解释器工作时就是通过改变这个计数器的值来选取下一条需要执行的字节码 ......
Linux误删python导致yum不可用，删除重装方法。
Linux 系统为 CentOS Linux release 7.4.1708 手贱、手贱、手贱 删了python 导致yum不可用。百度一大圈，重装yum和python后，老是报各种各样的错。历经磨难，终于自己总结了一套，亲测可用，分享一下。 转自：https://www.cnblogs.com/ ......
数据类型
常量：程序执行过程中，不可以改变的量 数字常量： 所有的数字都称为数字常量 整数常量（整数），实型常量（小数） 字符串常量：由 ''（单引号）、""（双引号） 、``(飘)引起的内容 （英文状态下的） 布尔常量： 真（true）假（false） 变量：表示一些可以变化的数据，在程序的运行中可以再次发 ......
农业大数据|提取遥感影像指定经纬度的WDRVI并与LAI回归分析
实验目的 熟练遥感数据的处理流程；通过探讨地面测量的叶面积指数与遥感观测的植被指数关系，理解地面测量数据与遥感观测数据的联系。 实验内容 预处理遥感数据，得到WDRVI指数影像，并提取地面观测LAI对应时间，卫星观测的试验田所在位置的WDRVI均值。 对比LAI与WDRVI指数，构建模型，绘制相 ......
python kwargs
在 Python 中，有两种方法可以传递参数给函数。第一种方法是使用位置参数，这意味着您必须按照函数定义中参数的顺序来传递参数。第二种方法是使用关键字参数，这意味着您可以按照任何顺序传递参数，只需使用参数名称即可。Python 中的关键字参数是通过一种称为 kwargs 的特殊语法来实现的。 kwa ......
火山引擎云原生数据仓库 ByteHouse 技术白皮书 V1.0 （Ⅲ）
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，《火山引擎云原生数据仓库 ByteHouse 技术白皮书》正式发布。白皮书简述了 ByteHouse 基于 ClickHouse 引擎的发展历程，首次详细展现 ByteHouse 的整体架构设计及自研核心技术 ......