数据 持久性 数据备份 分布式
大数据分析使用哪些工具？
大数据分析常用的工具包括但不限于以下几种： Hadoop：Hadoop是一个开源的分布式存储和计算框架，包括HDFS（Hadoop分布式文件系统）和MapReduce（分布式计算框架）。Hadoop可以处理大规模数据，并且提供容错性、高可用性和高性能。 Spark：Apache Spark是一个快速 ......
native 向量化 大数据计算引擎
Velox（Facebook, Intel, ByteDance字节, and Ahana） 一个旨在优化查询引擎和数据处理系统的 C++ 向量化数据库加速库。使用C++来实现Native计算引擎，追求极致的性能 https://github.com/facebookincubator/velox ......
WPS中数据透视表的用法
首先任意选中一个有数据的单元格，点击菜单栏“插入”-“数据透视表”。 此处的区域会自动选择，不需要修改，点击“确定”; 此时弹出一个新工作表，看到右边的数据透视表窗格，分为两大版块，“字段列表”和“数据透视表区域”； 而区域分为四块内容，“行区域”、“列区域”、“值区域”、“筛选器”。 选中需要进行 ......
React中store的使用(redux、redux-tookit)及store数据持久化(redux-persist)
React中store的使用(redux、redux-tookit)及store数据持久化(redux-persist) 安装 npm insatll react-redux npm install @reduxjs/toolkit npm install redux-persist 简单使用sto ......
关于数据摆渡 你关心的5个问题都在这儿了！
数据摆渡，这个词语的概念源自于网络隔离和数据交换的场景和需求。不管是物理隔离、协议隔离、应用隔离还是逻辑隔离，最终目的都是为了保护内部核心数据的安全。而隔离之后，又必然会存在文件交换的需求。 传统的跨网数据摆渡方式经历了从人工U盘摆渡到光盘摆渡机，再到FTP、网闸等一些方式的过程，现在也出现了很多专 ......
Oracle、达梦：同一数据库边查询边插入的两种方式
1、方式1 插入的表需要构建好 -- 建表：6秒 500毫秒；抽数据100万：10秒 640毫秒、11秒 189毫秒 insert into T_HUGE_COMPRESS (ID, NAME) ( SELECT * FROM T_HUGE_COMPRESS_BACK ); 2、方式2 插入的表不用 ......
[国家冰川冻土沙漠科学数据中心]-滑坡数据集
滑坡数据集 1. 全球滑坡点及滑坡区域数据集（1915-2021年） 数据贡献者： NASA Landslide Viewer 说明信息： 本数据是世界范围内1915-2021年的滑坡数据，每条数据详细记载了灾害搜集来源、时间、类型、大小、经纬度位置等。其中有点数据和面数据。 有以下两类数据： 1. ......
[国家冰川冻土沙漠科学数据中心]-大气本底数据集
大气本底数据集 1. 中国6小时PM2.5数据集重建（1960-2020年） 数据贡献者： 张晓叶 说明信息： 几十年来，PM2.5改变了地球上的辐射平衡，增加了环境和健康风险，但直到2013年才在中国得到广泛监测。历史长期 PM2.5具有高时间分辨率的记录是必不可少的，但对于研究和环境管理都缺乏。 ......
[国家冰川冻土沙漠科学数据中心]-统计公报数据集
统计公报数据集 1. 甘肃省湿地情况统计数据集（2005-2022年） 数据贡献者： 张耀南 说明信息： 本数据集主要收集了2005-2022年甘肃省湿地情况统计数据，主要包括湿地面积、自然湿地、河流、湖泊、沼泽、人工湿地及湿地总面积占国土面积的比重。数据来源于《中国环境统计年鉴》和《中国林业统计年 ......
[国家冰川冻土沙漠科学数据中心]-地球化学数据集
地球化学数据集 1. 中国西北地区门源 6.9 级地震天然泉水和土壤气体地质流体的地球化学特征数据集（2022年） 数据贡献者： 马向贤 说明信息： 本文记录了2022年1月8日中国西北地区门源6.9级地震震中附近天然泉水和土壤气体的地球化学数据文件。包括主要地表破裂带5-10分钟CO2浓度观测，狮 ......
[国家冰川冻土沙漠科学数据中心]-泥石流数据集
泥石流数据集 1. 2023年8月2日云南东川蒋家沟泥石流观测数据 数据贡献者： 黎晓宇, 魏丽, 宋东日, 钟卫 说明信息： 2023年8月2日云南东川蒋家沟泥石流运动观测统计数据集，内容包括泥石流流态、龙头、龙尾、流过时间、泥深、泥面宽、流速、流量、容重、体积比含沙量、输沙率、径流量、输沙量、历 ......
[国家冰川冻土沙漠科学数据中心]-社会经济文化数据集
社会经济文化数据集 1. 甘肃省工业生产统计数据（2012-2021年） 数据贡献者： 张耀南 说明信息： 数据集命名：甘肃省工业生产统计数据（2012-2021年）.xlsx。注：因2014年数据无法下载，未收集入内。 数据集主要收录了2012-2021年甘肃省各县域的工业生产统计数据。主要包括以 ......
[国家冰川冻土沙漠科学数据中心]-气象数据集
气象数据集 1、 黄河源区玛曲高寒草地陆面过程观测数据集（2010-2019年） 数据贡献者： 孟宪红, 张宇, 尚伦宇, 王少影, 李照国, 吕世华 说明信息： 黄河源区地处青藏高原腹地，是黄河重要的水源涵养区域。高寒草地是黄河源区最重要的植被类型,... 2、 祁连山月尺度降水数据（2001-2 ......
[国家冰川冻土沙漠科学数据中心]-其他数据集
其他数据集 1、 低剂量包络线与不同束流模型对碳原子点扫描束流传输的剂量学效应 数据贡献者： 肖国青 说明信息： 该文章关注不同笔形束模型下的碳离子点扫描治疗中的剂量学效应和人体剂量分布，在考虑碳离子产生的低剂量包络后，进行解析计算后所得到的体内剂量分布和蒙卡计算得到的体内剂量分布结果更加符合，可以 ......
[国家冰川冻土沙漠科学数据中心]-冻土数据集
冻土数据集 1. 基于GPU的Monte Carlo程序ARCHER研究磁场对外照射治疗的剂量影响 数据贡献者： 肖国青 说明信息： 该文章介绍了一款新开发的具有自主知识产权基于GPU的蒙特卡洛程序ARCHER，该程序能快速计算在磁场情况下外照射治疗剂量。结果表明，垂直于束流的磁场对剂量分布有一定的 ......
[国家冰川冻土沙漠科学数据中心]-积雪数据集
积雪数据集 1. 湖泊冰层厚度数据集 数据贡献者： 李兴东 说明信息： 每日湖泊冰雪厚度数据集可为估算全球湖泊冰雪量提供基准，从而提高我们对淡水湖冰的生态和经济意义及其对气候变化的响应的认识。 2. 中国的无云MODIS NDSI数据集（2001-2020年） 数据贡献者： 李星华, 沈焕锋 说明信 ......
[国家冰川冻土沙漠科学数据中心]-水文数据集
水文数据集 1、 2023年8月2日蒋家沟19时37分至19点51分泥石流实时视频（泥石流观测段上游段） 数据贡献者： 黎晓宇, 宋东日, 钟卫, 魏丽 说明信息： 本数据为实时记录视频，拍摄记录了2023年8月2日蒋家沟19时37分至19点51分泥石流 2、 2023年8月2日云南东川蒋家沟泥石流 ......
[国家冰川冻土沙漠科学数据中心]-基础地理数据集
基础地理数据集 1、 甘肃省地震数据集（2000-2023年） 数据贡献者： 张耀南 说明信息： 本数据集收集了甘肃省的地震灾害数据。 属性信息包括：地震震级、经度、纬度、震源深度以及参考位置等。 2、 甘肃省水库、大坝分布数据集（2022年） 数据贡献者： 张耀南 说明信息： 本数据集主要是甘肃省 ......
[国家冰川冻土沙漠科学数据中心]-遥感及产品数据集
遥感及产品数据集 1、 甘肃省12.5m分辨率数字高程模型(DEM)数据集 数据贡献者： 张耀南 说明信息： 本数据集采用ALOS卫星的测绘成果，经过图像拼接、投影转化、裁剪等处理，生成甘肃省12.5 m分辨率数字高程模型（DEM）。数据可为甘肃省区域科学研究提供基础地理数据支持。 2、 甘肃省90 ......
[国家冰川冻土沙漠科学数据中心]-冰川数据集
冰川数据集 1、 甘肃省冰川分布数据集 数据贡献者： 张耀南 说明信息： 本数据集包括的甘肃省冰川分布数据，来源于《中国第二次冰川编目数数据集》和《世界冰川清单》。其中《第二次冰川编目》中的冰川属性主要有指代属性（冰川名称、冰川编码等），几何属性（冰川经纬度、冰川... 2、 新全球山地冰川中心线和 ......
[国家冰川冻土沙漠科学数据中心]-极地数据集
极地数据集 1、 1994-1999年中国南极第11-15次考察中山站海冰观测数据 数据贡献者： 胡红桥 说明信息： 本数据为1994-1999年中国第11至15共5次南极考察中山站海冰观测数据统计汇总，文件以Word及Excel文档形式保存。本数据集为中国南极第11-15次考察1994-1999年 ......
[国家冰川冻土沙漠科学数据中心]-生态数据集
生态数据集 1、 阿拉善高原-河西走廊荒漠植物群落生境照片（2017-2021年） 数据贡献者： 李小军 说明信息： 本数据集针对阿拉善高原-河西走廊荒漠区干旱气候特点，以我国河西走廊和阿拉善高原为调查核心区，兼顾毗邻马鬃山、祁连山西部山地、甘肃中部干旱区等区域，于2017-2021年，调查了分布在 ......
[国家冰川冻土沙漠科学数据中心]-水土保持数据集
水土保持数据集 1、 2022年黄土丘陵沟壑区第一副区桥沟流域径流、泥沙观测数据集 数据贡献者： 黄河水土保持绥德治理监督局（绥德水土保持科学试验站） 说明信息： 本数据集为2022年桥沟流域3个径流站径流、泥沙观测数据，通过径流站测流断面水位观测，泥沙取样，计算产流时的径流、泥沙量。数据包括桥沟流 ......
[国家冰川冻土沙漠科学数据中心]-沙漠与荒漠化数据集
沙漠与荒漠化数据集 1、 青藏高原高寒荒漠植物群落生境照片（2017-2021） 数据贡献者： 曹广民 说明信息： 本数据集针对青藏高原荒漠区的高寒气候特点，以我国青藏高原柴达木盆地为调查核心区，兼顾青藏高原阿里高原谷地等区域，于2017-2021年，调查了分布在这些区域的垫状矮半灌木高寒荒漠、多汁 ......
奇迹MU数据库查询方法
DB2 提供了关连式资料库的查询语言 ＳＱＬ (Structured Query Language)，是一种非常口语化、既易学又易懂的语法。 此一语言几乎是每个资料库系统都必须提供的，奇迹MU也不例外，很多的账号、内容数据查询，都是需要使用到数据库，我们分享一些数据库方法以提供参考。 一、资料定义 ......
mysql大数据量的分页慢优化
例子 这边通过一张40w条记录的表来说明一下优化大数据量表分页慢的思路 表单自带拼接语句 SELECT tbPage.* FROM ( SELECT tbTemp.*, row_number() over ( ORDER BY ID )- 1 AS rownum__ FROM ( SELECT __ ......
vue 插槽上绑定得数据
<template slot-scope="scope"> <el-button @click="handleClick(scope.row)" type="text" size="small">查看</el-button> <el-button type="text" size="small">编 ......
SpringBoot + 通义千问 + 自定义React组件，支持EventStream数据解析！
一、前言 大家好！我是sum墨，一个一线的底层码农，平时喜欢研究和思考一些技术相关的问题并整理成文，限于本人水平，如果文章和代码有表述不当之处，还请不吝赐教。 最近ChatGPT非常受欢迎，尤其是在编写代码方面，我每天都在使用。随着使用时间的增长，我开始对其原理产生了一些兴趣。虽然我无法完全理解这些 ......
dumeter7.3便携版提示「dumeter 数据服务已过期」的临时解决方案
提示 该解决方案会导致该软件设置中的配置丢失。打开后需要重新配置。 解决方案 结束所有DUMeter的任务； 重新打开运行。 如果不行可尝试重启DU Meter Service服务： ......