文件 指南 数据python
BigDataAIML-Kaggle-How to Calculate Principal Component Analysis (PCA) from Scratch in Python
How to Calculate Principal Component Analysis (PCA) from Scratch in Python https://www.kaggle.com/code/aurbcd/pca-using-numpy-from-scratch PCA using N ......
Python 实现HTML 转Word
之前文章分享过如何使用Spire.Doc for Python库将Word文档转为HTML格式，反过来，该库也能实现HTML到Word文档的转换。通过代码进行转换，避免了手动复制粘贴费时间，并且可能会出现错误或格式混乱等问题。 Spire.Doc for Python库能转换一个HTML文件为 Wo ......
git删除大文件提交记录
由于git不免费支持大文件的推送，但是很多不知情的情况下，不小心提交了大文件，导致无法push时，总是失败。 为了不影响其它小文件的推送，需要删除大文件的提交记录。 1.根据git客户端推送的报错信息，复制对应的ID值在git bash上执行，命令如下： git rec-list --objects ......
【Python机器学习课程设计】基于卷积神经网络的动物图像分类+数据分析
一、选题背景 在现代社会中，图像分类是计算机视觉领域的一个重要任务。动物图像分类具有广泛的应用，例如生态学研究、动物保护、农业监测等。通过对动物图像进行自动分类，可以帮助人们更好地了解动物种类、数量和分布情况，从而支持相关领域的决策和研究。本研究的目标是使用卷积神经网络（CNN）对动物图像进行分类。 ......
【Python机器学习课程设计】基于卷积神经网络的动物图像分类
恢复内容开始 一、选题背景 在现代社会中，图像分类是计算机视觉领域的一个重要任务。动物图像分类具有广泛的应用，例如生态学研究、动物保护、农业监测等。通过对动物图像进行自动分类，可以帮助人们更好地了解动物种类、数量和分布情况，从而支持相关领域的决策和研究。本研究的目标是使用卷积神经网络（CNN）对动物 ......
从数据中洞察：如何运用公司员工工作状况分析大屏提升管理效果
公司员工工作状况分析大屏作为一种新型的管理工具，正在逐渐改变我们对员工工作的认知和管理方式。通过实时监控、深度分析、预测趋势等功能，它能够帮助管理者全面掌握员工工作动态、提升工作效率、提前应对潜在问题以及促进沟通与协作。同时，它还为绩效评估提供了客观依据，使评估更加公正、透明。在未来，随着技术的不断... ......
数据结构实验代码分享 - 3
哈夫曼编码/ 译码系统（树应用） [问题描述] 任意给定一个仅由 26 个大写英文字母组成的字符序列，根据哈夫曼编码算法，求得每个字符的哈夫曼编码。 要求： 1）输入一个由 26 个英文字母组成的字符串，请给出经过哈夫曼编码后的编码序列及其编码程度。（编码） 2）采用上一问题的哈夫曼编码，给定一串编 ......
SpringBoot+modbus4j实现ModebusTCP通讯读取数据
场景 Windows上ModbusTCP模拟Master与Slave工具的使用： https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/135290463 Modebus TCP Modbus由MODICON公司于1979年开发，是一种工 ......
虚拟环境打包EXE文件
虚拟环境（pipenv）打包EXE 1.安装模块 pip install pipenv 安装模块之后，在本机新建一个文件夹，将需要打包的py文件放置在该新建文件夹下，保证该文件夹下没有其他的文件，在该文件夹下打开命令终端后依次执行以下的命令。 2.打包过程 # 1.创建虚拟环境 pipenv ins ......
小米数据中台建设实践（转）
一、销售数仓介绍首先介绍下小米销售数仓，包括发展历程、销售数仓定义、数据获取使用、销售数仓的内容和规模。在 2019 年前，小米的中国区、国际部等业务数据团队在进行独立的数仓建设，这个时期是烟囱式的开发。随着业务飞速发展，在集团技术委 ABC（AI、Big data、Cloud）策略的指导下，开始建 ......
postgresql数据库的基本使用
登录控制台 root@kali:~# sudo -u postgres psql psql (10.5 (Debian 10.5-1)) Type "help" for help. postgres=# 设置postgres密码 postgres=# \password postgres 创建一个新 ......
python json.dump 将字典写文件json文件后多了一个花括号"}",读取时报错：json.decoder.JSONDecodeError: Extra data: line
我的字典格式： import json d = {'Demo': {'Total_Result': 'Pass', 'info': {'test3': 'Pass'}}, '10.0.0.111': {'Total_Result': 'Pass', 'info': {'test_double_dis ......
三个月我迁移了100PB数据
2023年马上结束，这一年做了不少事情，有一项我可以吹好几年，忍不住和大家分享一下啊。 需求 去年底收到一项需求，要求2个月内从某云存储迁移100PB数据到微软云存储，包含几百亿个文件。当时听到这个数字我都惊呆了，别说100PB，100TB之前我都没迁移过，心里完全没底。但是老板说部门目前没有开发人 ......
第2章 查询数据库
主要内容 对三种主要类型的数据库关系进行建模 通过迁移创建和更改数据库 定义和创建应用程序 DbContext 加载相关数据 将复杂查询拆分为子查询 本章介绍如何使用 EF Core 读取（称为查询）数据库。你将创建一个数据库，其中包含 EF Core 中的三种主要类型的数据库关系。在此过程中，你将 ......
防泄密软件如何确保数据安全？
随着数字化时代的来临，企业面临着越来越复杂的数据安全威胁。选择专业的防泄密软件成为确保企业信息安全的不可或缺的一环。本文将深入探讨防泄密软件如何通过加密技术、访问控制和实时监测等手段，确保企业数据的全面安全。 1. 数据加密：保障信息不被窥探🙈 选择专业的防泄密软件（例如华企盾DSC数据防泄密系统 ......
云上攻防--云服务&&对象存储(域名接管)&&弹性计算(元数据泄露)
云上攻防--云服务&&对象存储(域名接管)&&弹性计算(元数据泄露) 对象存储 各个厂商对于对象存储的叫法不同，但是除了叫法基本没有其他区别。 对象存储各大云名词： 阿里云：OSS 腾讯云：COS 华为云：OBS 谷歌云：GCS 微软云：Blob 亚马逊云：S3 对于对象存储的漏洞或者说错误配置点如 ......
BUG分享|DMA发送数据时，会被莫名打断，或者发送乱码。
引言 在驱动ST7789屏幕时，使用了SPI+DMA进行图像刷新。在执行清屏操作时，使用配置DMA内存到外设，内存地址不变，发送的内存是一个16位的RGB565像素值变量，可以指定清屏填充的颜色。 单片机：STM32F411CEU6 库函数：标准库 现象 清屏代码如下： /* 清屏函数 输入参数填充 ......
商业银行数据模型白皮书（2023）
前沿 数据治理是银行业高质量推进数字化转型的重要基础。 数据模型建设是推动高质量数据治理体系的核心环节。 目 录 CONTENTS 前言 一、商业银行数据模型概述 （一）商业银行业数据模型发展经历四个阶段 （二）数据模型具有四大价值 二、数据模型建设模式 （一）贯彻企业战略—基于企业架构视角建模 （ ......
2025考研指南丨考研复习计划
2020考研指南丨考研复习计划 2020-03-23 2019考研进入复试的尾声阶段，2020的考研学子已经准备好了武器准备战斗，今天安徽文都小编就为2020考研党准备一份考研日历吧。 2019年3月份 确定目标院校和专业 根据自己学习的专业、学习基础、个人兴趣等因素，初步确定考研的目标院校和专业。 ......
postgresql数据库备份脚本
#!/bin/bash # 定义host、账号、密码，需要自定义 pg_host='172.16.4.8' pg_user='postgres' export PGPASSWORD=postgres pg_port='5432' # 定义备份目录、备份库、文件格式，需要自定义 date_day=`d ......
20.自动化关键数据记录
目录 行为日志记录 步骤截图记录 page source记录 什么是关键数据 代码的执行日志 代码执行的截图 page source（页面源代码） 记录关键数据的作用 内容作用 日志 1. 记录代码的执行记录，方便复现场景2. 可以作为bug依据 截图 1. 断言失败或成功截图2.异常截图达到丰富报 ......
python 修改ini文件参数，保留ini文件注释的方法--未测试
使用configparser模块的write()方法在写入INI文件时默认会删除注释。要保留注释，您可以使用自定义的格式化器来处理INI文件的内容，并在写入文件时手动添加注释。 下面是一个示例代码，演示如何自定义一个格式化器，并在写入INI文件时保留注释： python复制代码 import con ......
swift icloud 存储文件
import UIKit ///文件下载 class VehicleDownloadFilemanager: NSObject, UIDocumentPickerDelegate { /// 创建单例对象 static let share = VehicleDownloadFilemanager() ......
前端使用a标签下载非同源文件(备选方案)
原理: 下载文件Blob,再把Blob转为本地链接,以实现跨域变同域,最后使用a标签实现下载； 优缺点： ● 优点：能达到下载跨域文件的目的； ● 缺点：不适用于大文件，大文件体验较差； 示例： 使用fetch把文件下载下来,然后URL.createObjectURL转为本地链接,最后使用a标签下载 ......
SQLserver数据库自动备份怎么做
SQLserver数据库自动备份怎么做？ 既然SQL Server数据库对于企业来说如此重要，我们就需要通过备份的方式来保护它的安全。然而定期手动执行备份任务的话可能又觉得比较麻烦，那么SQLserver数据库自动备份怎么做呢？一般来说，我们可以借助这3个方法来自动执行数据库备份任务，解放双手，无需 ......
[python] 基于Dataset库操作数据库
dataset库是Python中一个用于操作数据库的简单库，它提供了一种简洁的方式与各种关系型数据库进行交互，例如SQLite、MySQL、PostgreSQL 等。你可以使用dataset库来执行查询、插入、更新和删除操作，而无需编写复杂的SQL语句。dataset库适用于小规模的数据存储和查询场 ......
python_使用selenium进行webui测试的浏览器驱动安装步骤
以chrome浏览器为例。（前提是：python和pycharm安装成功，且能正常运行） 1、查看chrome浏览器的版本 方式一： 打开 Chrome 浏览器。 在浏览器右上角，点击三个点的图标。 在弹出的菜单中，选择“设置”。 在设置页面中，滚动到底部，点击“关于 Chrome”。 在关于 Ch ......
Linux系统日志文件介绍
Linux系统文件通常在/var/log中下面,主要有以下日志： /var/log/message 系统启动后的信息和错误日志 /var/log/secure 与安全相关的日志信息 /var/log/maillog 与邮件相关的日志信息 /var/log/cron 与定时任务相关的日志信息 /var ......
Nginx reload重新加载配置文件的异常情况
Nginx reload重新加载配置文件的异常情况 背景 临近年底, 很多业务工作量都上来了. 今天同事告知, nginx的log 里面出现了大量的 too many openfiles 的提示信息. 并且同事明确说明, 已经修改了/etc/secuirty/limits.conf 以及 worke ......