报告 数据表 研究报告 海洋

数据分析第十章实践

import pandas as pd import matplotlib.pyplot as plt inputfile ='C:/Users/Lenore/Desktop/data\original_data.xls' # 输入的数据文件 data = pd.read_excel(inputfi ......
数据分析 数据

c# 连接 sql server 数据库时报错,证书链是由不受信任的颁发机构颁发的。

c# 连接 sql server 数据库时报错:A connection was successfully established with the server, but then an error occurred during the login process. (provider: SSL ......
时报 是由 证书 机构 数据库

第一次结对作业——如何将mysql数据表里的数据导入到安卓SQLite数据库

在进行安卓地铁系统编写的过程中,我产生了一个疑问,怎么才能将mysql数据库里的数据导入到SQLite里面 于是我开始查找资料来解决这个问题,终于能够实现这个导入。 步骤如下: 1.进入idea,找到自己要导出的数据库,将数据库里的文件导出csv文件 2.打开Android Studio的地铁查询系 ......
数据 数据表 第一次 数据库 SQLite

hive和kudu数据之间的互相迁移存在的坑

一、为什么要进行数据迁移 背景:我现在有个需求:需要修改kudu表的主键,主键由1个字段增加为2个字段。因为不能影响下游系统使用kudu表,kudu表表名不能做修改。需要将原kudu表删除后再建新kudu表。 这里存在几个潜在知识点: 1.kudu表修改主键不能使用命令直接修改,必须重新删表然后建表 ......
之间 数据 hive kudu

MySQL数据库三个关键性能指标TPS\QPS\IOPS

今天主要介绍MySQL数据库,或者说所有数据库的三个关键性能指标: qps 每秒处理的查询数 tps 每秒处理的事务数 IOPS 每秒磁盘进行的I/O操作次数 如果IOPS过高,分析原因: 内存不足,查询数据较多(一般为慢查询,但有时候并不是,单纯的查询数据较多),特别关注一下数据量大还需要排序的分 ......
性能 指标 三个 关键 数据库

银河麒麟4.0.2(飞腾平台) 安装MySQL数据库

1. 操作系统信息 root@Kylin:/# cat /etc/.kyinfo [dist] name=Kylin milestone=4.0.2-server-sp2-18071110.Z1 arch=arm64 beta=False time=2018-07-11 10:57:13 dist_ ......
数据库 数据 MySQL 平台

「ACM 算法实践」[解题报告]麦田

分析 首先,前缀和的思路是很显然的。然后我们很容易想到暴力枚举矩形的左上角和右下角,然而 $\mathcal{O}(n^4)$ 的算法过不去,哪怕把最后一维用二分,倒数第二维加一点剪枝也还是会 T 两个点。 这时候应该考虑将多行/列压缩为一行/列,然后再使用双指针枚举列/行。详细来说就是将 $i$ ......
麦田 算法 报告 ACM

「ACM 算法实践」[解题报告]组队

分析 因为时间不多了,我一开始只考虑了 $a_i$ 互不相等的情况,没想到居然拿到了 60 昏( 正确解法是贪心 + 优先队列。~~而不是从「使得人数最少的队伍人数最多」中得到的二分~~ 首先肯定要将 a 数组排序,要使人数最少的队伍人数最多,我们优先将当前的数 $a[i]$ 放到以 $a[i]-1 ......
算法 报告 ACM

「ACM 算法实践」[解题报告]时间管理大师

分析 一开始想着应该要分情况讨论,如果每台电脑的耗电量都小于 $e$ ,那么可以知道小 Q 是可以一直学习下去的,如果存在电脑的耗电量大于等于 $e$ ,贪心的想法是将每台电脑能用的时间从小到大排序,然后丢进优先队列里,再考虑给谁充电,这样一来情况就非常复杂了。 正确的做法是二分答案 $t$ ,计算 ......
时间管理 算法 大师 时间 报告

6-springboot配置多数据源

1.application.properties中配置多数据源 #refund数据源#此种标黄的没办法自己进行解析,代码读取spring.datasource.refunddb.url=jdbc:mysql://refund地址spring.datasource.refunddb.username= ......
数据源 springboot 数据

7-springboot-多数据源事务管理-jta+atomikos的分布式事务

jta+atomikos的分布式事务 <!--jta+atomikos分布式事务--><dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jta-atomikos</arti ......

如何使用C# 对MongoDB数据库操作

一、在nuget 引入MongoDB.Bson,和MongoDB.Driver这个两个类库 二、对MongoDB数据库连接 string con = @"mongodb://127.0.0.1:27017"; var client = new MongoClient(con); //数据库 var ......
MongoDB 数据库 数据

面试题:如何用数据库去实现一个乐观锁/悲观锁?(锁分类,死锁)

本文意在解析锁的概念,不只是解析题目,而是将锁弄清楚,知道大概的实现方案。 数据库锁的分类 数据库锁的分类有很多种。 分类1 从数据库系统角度分为三种:排他锁X、共享锁S、更新锁U。 排他锁(X锁):该锁也称为独占锁,用于数据修改操作,例如 INSERT、UPDATE 或 DELETE。确保不会同时 ......
数据库 数据

备份和迁移数据

迁移方式介绍 容器中的数据,如果没有用挂载目录,删除容器后就会丢失数据。如果你是用bind mount直接把宿主机的目录挂进去容器,那迁移数据很方便,直接复制目录就好了如果你是用volume方式挂载的,由于数据是由容器创建和管理的,需要用特殊的方式把数据弄出来。 备份和导入 Volume 的流程 备 ......
备份 数据

Django创建数据时报错解决

报错内容: { "code": "500", "msg": { "is_delete": [ { "message": "这个字段是必填项。", "code": "required" } ] } } models.py from django.db import models class BaseM ......
时报 数据 Django

爬取的数据,存到mysql中、爬虫和下载中间件、加代理,cookie,header,加入selenium、去重规则源码分析(布隆过滤器)、scrapy-redis实现分布式爬虫

# 1 scrapy架构 -爬虫:写的一个个类 -引擎: -调度器:排队,去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......

Oracle 数据库 官方下载 安装 及配置监听

Oracle 数据库 官方下载 安装 及配置监听 1、Oracle 官方下载 推荐使用官方下载地址:https://edelivery.oracle.com/osdc/faces/SoftwareDelivery ;这是Oracle的一个官方云产品下载地址可以下载 “Oracle JDK”、"Ora ......
数据库 官方 数据 Oracle

「解题报告」ARC127E Priority Queue

很 AtCoder 的一道推性质题。 题目要求最后有多少种不同的情况,而这个东西正着考虑不好考虑,我们尝试以每种最终局面倒过来考虑是否合法。 那么第一个操作就从加任意一个数变成了删任意一个数,第二个操作从删最大值变成了加入一个最大值。这个最大值必须是最终局面中没有的数。 那么我们可以把没有选择的数看 ......
Priority 报告 Queue 127E ARC

Rsync + Lsync 实时同步数据部署

1、环境 服务器名称 IP地址 备注 backup-24-109 172.16.24.109 源 backup-24-108 172.16.24.108 目标 2、源主机Rsync安装 # dnf -y install rsync # vi /etc/rsync_exclude.lst test t ......
实时 数据 Rsync Lsync

CSharp读写word文档数据

背景 在工作中需要对比数据,然后输出一份world文档的对比报告。这需要用C#来读写word文件。 用到的工具 NPOI NPOI 地址:NPOI NPOI版本:2.6.0 个人项目的运行时版本:.NET Core 3.1 解决思路: 既然是要输出一份报告,那么报告的格式是固定的,只需要将报告需要改 ......
文档 数据 CSharp word

ASP.NET Core API模型绑定和Action数据返回格式

参考文档:https://www.cnblogs.com/FlyLolo/p/ASPNETCore2_20.html 模型绑定 [FromQuery] - 从URL中取值。 [FromRoute] - 从路由中取值。 [FromForm] - 从表单中取值。Postman使用form-data或x- ......
模型 格式 数据 Action Core

数据库系统原理之数据库编程

数据库编程 第一节 存储过程 一、存储过程的基本概念 存储过程是一组为了完成某项特定功能的 SQL 语句集,其实质上就是一段存储在数据库中的代码,它可以由声明式的 SQL 语句(如 CREATE、UPDATE 和 SELECT 等语句)和过程式 SQL 语句(如 IF...THEN...ELSE 控 ......
数据库 数据 原理 系统

数据库系统原理之数据库系统概述

数据库系统概述 一、数据库基本概念 1 数据 数据(Data)是描述事物的符号记录,是指用物理符号记录下来的、可以鉴别的信息。 数据以及关于该数据的解释是密切相关的。 数据的解释是对数据含义的说明,也称为数据的语义,即数据所蕴含的信息。 数据与其语义密不可分,没有语义的数据是没有意义和不完整的。 数 ......
数据库 数据 系统 原理

charles抓取PC端http与https协议数据包

一、代理配置 代理-》代理设置,进入如下窗口,设置好http代理端口,勾选支持HTTP/2 注意点,一定要勾选代理-》Windows代理 二、安装SSL证书抓取https协议数据包 点击帮助-》SSL代理-》安装charles跟证书 点击安装证书-》选择本地计算机或者当前用户都可以,然后点击下一页 ......
charles 数据 https http

数据防泄密DLP 学习笔记

一、背景 随着计算机系统在各行各业的普遍应用,办公文件、设计图纸、财务报表等各类数据都以电子文件的形态,在不同的设备(终端、服务器、网络、移动端、云端)上存储、传输、应用,数据安全已经成为政府、军队、企业及个人最为关注的问题。 从宏观上来看,各种网络安全产品、终端安全产品、云安全产品等所追求的根本目 ......
笔记 数据 DLP

西门子300PLC转以太网无需编程实现与1200PLC转以太网数据交换

西门子300PLC转以太网无需编程实现与1200PLC转以太网数据通信本文介绍利用兴达易控生产的PLC转以太网模块(MPI-ETH-XD1.0Plus)实现1200/1500PLC与300(CPU315-2DP)PLC无需用户编程可实现工业以太网数据通信(此案例同样适用于200PLC/400PLC以 ......
以太网 PLC 数据 1200 300

0 爬取的数据,存到mysql中 、1 爬虫和下载中间件、 2 加代理,cookie,header,加入selenium、3 去重规则源码分析(布隆过滤器) 、4 scrapy-redis实现分布式爬虫

0 爬取的数据,存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......

数据挖掘作业4

# -*- coding: utf-8 -*- # 代码8-1 查看数据特征 import numpy as np import pandas as pd inputfile =r"C:\Users\admin\Documents\WeChat Files\wxid_0qjwmqlaa9h522\F ......
数据挖掘 数据

人才及研究方向信息爬取爬虫

人才及研究方向信息爬取爬虫 需求与思路 需求 : 爬取经济管理相关国家级人才 思路: 1 从title出发,比如中国科学院网站 查看不同学部中院士的介绍 2 分学校,学校官网所在的人才页面,查看相关信息 当前师姐给按着学校分了任务,于是打算先从思路2完成 技术路线 使用 python 爬虫 对结果进 ......
爬虫 研究方向 方向 人才 信息