windows数据库 数据linux
手把手教你在 Windows 环境中搭建 MQTT 服务器
前言 前些天要对接一家硬件商的设备数据,对方使用的 MQTT 协议点对点透传,所以又赶紧搭建 MQTT 服务器,写 .NET 程序接收数据等等,今天分享一下如何搭建 MQTT 服务器。 MQTT 协议是什么? MQTT(Message Queuing Telemetry Transport)是一种轻 ......
44python 删除 linux 系统中的文件夹或文件
# 删除文件 import os os.remove('/path') # 删除文件夹(不为空也可以删除) import shutil shutil.rmtree('path') ......
Linux Centos7.5错误:ping外网报错Name or service not known
https://www.cnblogs.com/Zeros/p/16745414.html 问题描述:1 CentOS7.5,当执行ping www.baidu.com命令时,提示Name or service not known出现问题可能情况:1、电脑上禁用VMware相关网络服务。 2、Lin ......
Linux firewalld 防火墙 笔记
Linux 防火墙策略: 严格过滤入站,允许出站 防火墙有两类: 硬件防火墙(可以组成集群保护),软件防火墙(本机安装的软件,本机防护)。 1.firewalld防火墙服务: Linux默认安装的防火墙系统服务: firewalld防火墙是centos7系统默认的防火墙管理工具,一般是自带的无需安装 ......
C# 使用protobuf序列化反序列化数据
protobuf是谷歌的一个序列化数据结构的协议,性能高,存储占用小 经过我的测试对比 1,最慢的是C#内置的BinaryFormatter,这个玩意能不用则不用 2,然后是json,用起来很方便,比BinaryFormatter快了1-2倍 3,接下来就是protobuf,不过需要给类的成员加上特 ......
Hive 数据写入流程
概念简介 外部表:删除表时,外部表只删除元数据,不删除数据。适用于数据源被多处使用的场景,便于数据共享。 内部表:删除表时,内部表的元数据和数据会被一起删除。适用于不需要共享的原始数据或中间数据。 分区表:数据较多,为提高计算速度时使用。 内部表&外部表写入流程图 具体流程Demo 以外部表为例: ......
hive分区表数据导入
数据库分区的主要目的是为了在特定的SQL操作中减少数据读写的总量以缩减响应时间,主要包括两种分区形式:水平分区与垂直分区。水平分区是对表进行行分区。而垂直分区是对列进行分区,一般是通过对表的垂直划分来减少目标表的宽度,常用的是水平分区. 1. hive建立分区表 create external ta ......
Hive 复杂数据类型Array,Map,Struct
建表语句,支持嵌套 CREATE TABLE parquet_test ( id int, str string, mp MAP<STRING,STRING>, lst ARRAY<STRING>, strct STRUCT<A:STRING,B:STRING>) PARTITIONED BY (p ......
Hive写入JSON数据
优缺点: 1.JsonSerDe对json数据格式有严格要求,创建的表结果必须与json结构能对应上,否则会报错。 配置 org.openx.data.jsonserde.JsonSerDe 能解决格式异常报错导致整个任务终止的问题。 必须定义好详细字段嵌套的规则类型,不适合提取ODS原文。 2.g ......
Hive Array数据处理
建表 CREATE TABLE IF NOT EXISTS default.array_test( id String COMMENT 'id', name Array<String> COMMENT '名称' ) COMMENT 'array测试' ROW FORMAT DELIMITED FIE ......
vue实现虚拟滚动(面试题:后端给你十万条数据,你怎么处理?)
<template> <div class="viewport" @scroll="scroll"> <div class="list-phantom" :style="{height: totalHeight+'px'}"></div> <div class="list-area" :style= ......
[转帖]2024年正常使用windows XP之一:系统下载篇
https://zhuanlan.zhihu.com/p/347764175 半夏:2024年正常使用windows XP之一:系统下载篇 半夏:2024年正常使用windows XP之二:补丁及运行库 半夏:2024年正常使用windows XP之三:优化设置篇 半夏:2024年正常使用windo ......
Power BI - 5分钟学习修改数据类型
每天5分钟,今天介绍Power BI修改数据类型 Power BI加载数据时,会尝试将源列的数据类型转换为更高效的存储、计算和数据可视化的数据类型。例如,如果从Excel导入的值的列没有小数值,Power BI Desktop会将整个数据列转换为整数数据类型,这能更好地优化存储提高计算效率。 但是某 ......
[转帖]配置 Windows XP 正常上网(TLS HTTPS),连接到 NAS
https://zhuanlan.zhihu.com/p/208685816# 学习一下. 知乎用户8kqKq9 等 45 人赞同了该文章 Windows XP 是经典的、高效的、可靠的、性能良好的操作系统,然而其大部分版本都已在 2014 年停止支持。其较为流行的版本 SP2 与 SP3 由于各种 ......
数据结构-单调队列
单调队列使用范围: 滑动区间的极值查询与维护 单调队列的原理: 单调队列需要持续维护队列的单调性,我们假设该队列为单增队列,那么最小值可以在队尾取得。 如图是一个刚建立的队列 接下来思考插入一个元素怎么处理:我们从队首开始看,如果队首的元素比目前需要插入的值大,那么原先队列的那个值在滑动过程中就不会 ......
列式云数据库与关系型云数据库:区别、优缺点与选择
列式云数据库与关系型云数据库的区别
数据存储方式
列式云数据库以列为单位组织数据,将同一列的数据存储在一起,每个列都有一个相关的列式存储文件。这种数据存储方式适合于大量数据分析和高性能计算的场景,因为列式云数据库能够更好地压缩数据并提高查询效率。而关系型云数据库则采用传统的关系型数据模型,以行为单位... ......
mysql数据库行锁-表锁
1.数据库的锁 从性能上分为乐观锁和悲观锁:乐观锁是利用版本号,比如数据字段新增一个版本号字段,操作的时候进行版本的比对,需要开发者自己实现;悲观锁就是在操作数据时,认为此操作会出现数据冲突,所以在进行每次操作时都要通过获取锁才能进行对相同数据的操作,这点跟java中的synchronized很相似 ......
云数据库与Web网站:构建高效、可扩展的网络应用
云数据库与Web网站的关系
云数据库与Web网站之间存在着密切的关系。Web网站需要数据库来存储和管理用户数据、交易信息、内容资料等关键信息。而云数据库提供的弹性和可扩展性,使得Web网站能够根据业务需求快速地增加或减少存储资源,从而更加高效地应对用户访问和数据增长。
同时,云数据库还为Web网站提... ......
让数据要素合规高效流通!海南这么干!
1月4日,国家数据局会同中央网信办、科技部、工业和信息化部等17个部门联合印发《“数据要素×”三年行动计划(2024—2026年)》,旨在充分发挥数据要素乘数效应,赋能经济社会发展。 ......
Window 环境安装Redis ,并配置为开启自启动
前言:本文章只讲解如何在Window 环境下安装以及配置Redis,其它教程会在另外的文章详细介绍。 1、我们先来大致了解一下什么是Redis Redis (全称:REmote DIctionary Server) 是一个由 Salvatore Sanfilippo 写的 key-value 存储系 ......
el-table导出当前页数据
下载依赖 npm i --save https://cdn.sheetjs.com/xlsx-0.20.1/xlsx-0.20.1.tgz npm install file-saver --save el-table添加id <el-table id="outTable" >//添加id 拼接导出函 ......
sqlserver不同服务器数据库联合查询
测试语句 添加服务器 EXEC sp_addlinkedserver @server = '127.0.0.1', @srvproduct = '', @provider = 'SQLOLEDB', @datasrc = ''、 测试查询 SELECT * FROM [127.0.0.1].[myD ......
数据库索引概念及其如何使用的相关介绍
在日常开发中,难免会与数据库打交道,然而对数据库中数据的操作又会与另一个名词挂钩,“索引”,下面简单介绍一下索引的相关概念以及何时使用索引最合适。 一、什么是索引?索引是一种数据结构,它可以把表中的数据按照某种规则(如B树、哈希表等)进行排序,以便快速查询和访问数据。使用索引能减少磁盘I/o操作和数 ......
简单地配置MySQL数据库application.properties
在springboot项目中,有两种配置文件,一种是application.properties,另一种是application.yml,两种都可以配置spring boot 项目中的一些变量的定义,参数的设置等。下面来说说两者的区别: 用简单配置数据库为例: application.propert ......
动手学深度学习v2:数据操作+数据预处理
数据操作 import torch x=torch.arange(12) # x的output为 tensor([0,1,2,3,4,5,6,7,8,9,10,11]) # 可以通过张量的shape属性来访问张量的形状和张量中元素的总数 x.shape # output: torch.Size([1 ......
linux 中/bin/bash 和/bin/sh 有点区别
在执行脚本时候我们习惯 /bin/sh /home/grid/ogg_check.sh 或者 /bin/bash /home/grid/ogg_check.sh 但是/bin/bash 不能执行脚本中的alias 的对象,只能用/bin/sh执行才可以 ......
linux内核离线升级
查看当前内核版本 下载内核地址 https://mirrors.aliyun.com/elrepo/kernel/el7/x86_64/RPMS 安装内核 rpm -ivh kernel-lt-* --nodeps --force awk -F\' '$1=="menuentry " {print ......
Linux下chmod常用指令
1.符号模式 u 表示用户(文件所有者)。g 表示组(文件所属的群组)。o 表示其他(其他人)。a 表示所有(所有人,即 u+g+o)。+ 用于添加权限。- 用于移除权限。= 用于设置精确的权限。 例如: chmod u+w file:给文件所有者添加写权限。chmod g-r file:移除组的读 ......
linux df -h 命令卡住 解决方法
用 df -h 查看磁盘情况,无奈卡住无法显示 解决方法: 1、首先就是使用strace去追踪到底在哪里卡住了 strace df -h 2、如果没有strace命令则进行安装即可 yum install strace 3、显示出卡住的地方 stat("/proc/sys/fs/binfmt_mis ......