实时 历程 方案 数据
java导入excel文件，处理合并单元格的数据
@Transactional(readOnly=false) public void importData() { ExcelUtil excelUtil = new ExcelUtil(); System.out.println("jinru"); //读取excel数据 List result ......
使用postman上传excel Java后端解析excel并导入数据
Controller层 @RequestMapping(value = "importExcel", method = RequestMethod.POST) @ResponseBody public String importExcel(@ModelAttribute MultipartFile ......
达梦数据库集群启动笔记
## 集群启动顺序 ### 主库启动数据库服务 ``` cd /opt/dmdbms/bin/bin ./dm_services start DmServiceGRP1_RT_01 ``` ### 备库启动数据库服务 ``` cd /opt/dmdbms/bin/bin ./dm_services ......
go语言如何使用elastic官方客户端go-elasticsearch/v8实现数据批量更新
go语言如何使用elastic官方客户端go-elasticsearch/v8实现数据批量更新 go语言的官方客户端 Elasticsearch 的官方 Go 客户端是由 Elastic 开发、维护和支持的客户端系列的最新成员之一。 初始版本于 2019 年初发布，并在过去几年中逐渐成熟，获得了重试 ......
SkyEye与Jenkins的DevOps持续集成解决方案
在技术飞速发展的当下，随着各行各业的软件逻辑复杂程度提升带来的需求变更，传统测试已无法满足与之相对应的一系列测试任务，有必要引入一个自动化、可持续集成构建的DevOps平台来解决此类问题。本文将主要介绍SkyEye与Jenkins的持续集成解决方案。 何谓DevOps？DevOps是一种软件开发和运 ......
执行bat脚本操作sql文件更新Sqlite数据库
在Windows下操作sqlite数据库 一、确保所在Windows已经安装sqlite3 1.1 Win+R 输入cmd打开命令窗口 ``` # 输入 sqlite3 version ``` 显示如下提示则表示已经安装，且能正常使用  # 启动 ## FE 启动 启动 `bin/start_fe.sh --daemon` ## ......
手贱，把分区扩容，导致分区损坏，变为RAW，最终恢复好数据
手贱，把分区扩容，导致分区损坏，变为RAW。DG这个软件确实可以，能扫到文件。但是恢复大文件。需要激活，网上pj版本的根本行不通。 无奈只能 多款软件对比。最终从某鱼上找了一款替换软件。 最终恢复了自己想要的数据。 这款软件 是能扫到所有文件数据，但是你要注意看，它扫到最后他会对比，会把正常文件（他 ......
竞速榜实时离线对数方案演进介绍
竞速榜是大促期间各采销群提供的基于京东实时销售数据的排行榜，同样应对大促流量洪峰场景，通过榜单撬动品牌在京东增加资源投入。竞速榜基于用户配置规则进行实时数据计算，榜单排名在大促期间实时变化，相关排名数据在微博、朋友圈广泛传播，相关计算以及排名的准确性至关重要。 ......
数据库之Oracle简介
ORCL单仓库，多用户 sys是超级管理员，主要用来维护系统信息和管理实例。不知密码也可以本机登录（远程需要），只能使用SYSDBA或SYSOPER角色登录 system是系统管理员，拥有DBA权限，通常用来管理oracle数据库的用户、权限和存储等。只能用NORMAL方式登录。需要oracle安装 ......
sqlserver数据库逻辑名和文件名修改
1 --查看逻辑名称 2 select name from sys.database_files; 3 4 --修改逻辑名称 5 alter database ZZMK_OneMap_old modify file(name=CJ_OneMap, newname=ZZMK_OneMap_old) 6 ......
数据库行存储索引与列存储索引
行存储是在逻辑上整理为包含行和列的表，实际上以行式数据格式存储的数据，此格式是存储关系表数据的传统方法。 列存储是在逻辑上整理为包含行和列的表，实际上以列式数据格式存储的数据。 行存储索引最适合用于查找数据、搜索特定值的查询，或者针对较小范围的值执行的查询。 对事务工作负载使用行存储索引，因为它们往 ......
使用prometheus监控mysql数据库性能指标
目标：需要实现mysql的性能监控，如cpu占用率，内存占用率，连接数，执行效率等等....... 如图所示： 实现思路一： 使用linux的top命令，定时查看mysql的cup占用率，内存占用率........，然后将得到的数据存放进入数据库，后端拿到数据库数据，前端拿到数据后，进行数据重组，结 ......
SourceTree突然启动失败，解决方案
之前安装的SourceTree还能正常使用，今天启动以后，有蓝色的加载页面，加载完之后就什么都没有了，在任务管理器也没有看到相应的进程。 在网上找了下解决方案，终于找到了有效的解决方案，步骤如下： 1.右键点击 SourceTree 的图标，打开属性页面，查看软件的安装路径 2.打开文件所在路径的上 ......
python + 批量提取文件中exce数据
import pandas as pd import os # 创建一个空的数据框列表 data_frames = [] # 获取当前脚本的目录路径 current_directory = os.getcwd() folder_path = os.path.join(current_director ......
一个数据丢失惨案
前言 最近，有开发同事联系我反馈一个问题，说开发环境出现了数据丢失的情况，想让DBA帮忙排查一下是不是数据库的问题。我心想大概率是程序bug，不太可能是数据库的问题。不过还是要排查一下才会心安，毕竟对于一个DBA而言，数据丢失无疑是最令人紧张的一件事情。 问题排查 开始进行排查之前，我先确认了如下问 ......
redis常见的5中数据类型以及相关命令
#redis # redis 简介 - redis 是采用 ASNI C 语言编写的 - 采用的是 C/S 架构 - 是非关系型数据库 - 以键值对的形式存储在内存中 # redis 在 windows 中的启动命令 - `redis-server redis.windows.conf` - `re ......
HTML5全屏浏览器兼容方案
最近一个项目有页面全屏的的需求，搜索了下有HTML5的全屏API可用，不过各浏览器的支持不一样。 标准webkitFirefoxIE Element.requestFullscreen() webkitRequestFullscreen mozRequestFullScreen msRequestF ......
NativeBuferring——一种零分配的数据类型[上篇]
之前一个项目涉及到针对海量（千万级）实时变化数据的计算，由于对性能要求非常高，我们不得不将参与计算的数据存放到内存中，并通过检测数据存储的变化实时更新内存的数据。存量的数据几乎耗用了上百G的内存，再加上它们在每个时刻都在不断地变化，所以每时每刻都无数的对象被创建出来（添加+修改），同时无数现有的对象... ......
数据处理的那些事「GitHub 热点速览」
 撇开一屏占四分之三屏幕的 AI 相关项目之外，本周剩下的热榜项目就是同数据有关的数据库项目，比如 CockroachDB ......
bootrec 命令是 Windows 操作系统中用于修复启动问题的一组命令。它可以帮助修复引导记录、主引导记录 (MBR)、引导扇区以及启动配置数据 (BCD) 等与启动有关的问题。以下是对 bootrec 命令进行详细说明
bootrec 是一个用于修复启动问题的 Windows 命令。它是 Windows 操作系统的一部分，提供了一些功能强大的工具，用于修复引导记录、主引导记录 (MBR) 和启动配置数据 (BCD) 等问题。 以下是一些常见的 bootrec 命令及其功能： bootrec /fixmbr： 修复主 ......
SpringBoot+Mybatis-Plus使用多数据源
常见的使用Mybatis-Plus配置多数据源方式有两种：一种是通过java config的方式手动配置两个数据源，另一种方式便是使用 dynamic-datasource-spring-boot-starter。 dynamic-datasource-spring-boot-starter 是一个 ......
Docker 数据卷Volume的使用
在root目录下，创建docker-volume文件夹，将网站静态资源，上传到该目录 删除正在运行的容器 docker rm $(docker stop $(docker ps -a -q)) 以数据卷的方式，创建3个tomcat容器，tomcat-8080,tomcat-8081,tomcat-8 ......
职业规划～高级大数据工程师篇
新开分类，增加职业规划随想，用于记录自己对于以后的职业畅想。 畅想自己在2019-2023年这4年期间，自己从基础的平台开发运营， 到各种开源组件的学习应用，再到一个CRUD的大数据工程师。自己一路走来，更多是像一名技师，孰能生巧，唯手熟尔。 如今开一博客，记录日常解决问题，新技术探索学习。 也探讨 ......
基于面向对象的数据封装
# 基于面向对象的数据封装 [toc] ## 1 基于面向对象的数据封装优点 - 将属性和方法放到一起做为一个整体，然后通过实例化对象来处理； - 隐藏内部实现细节，只需要和对象及其属性和方法交互就可以了； - 对类的属性和方法增加 访问权限控制。 ## 2 示例 ```python class B ......
活动回顾｜火山引擎 DataLeap 分享：DataOps、数据治理、指标体系最佳实践（文中领取 PPT）
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 在 7 月 21 日至 22 日举行的 ArchSummit 全球架构师峰会（深圳站）及 DataFunCon.数据智能创新与实践大会（北京站）上，来自火山引擎 DataLeap 的三位专家分别就 DataOps、 ......
07-数据定义
07-数据定义课程目标掌握创建表、增加和删除和修改表结构、添加和修改和删除表中数据、创建表并加入约束。7.1创建表结构1.语法格式create table tableName( columnName dataType(length), ……………….. columnName dataType(len ......
01-数据库基础知识
01-数据库基础知识课程目标了解数据库的基本概念、数据库系统的发展阶段和基本特点、数据库系统的特点。理解实体联系模型、数据模型简介、关系运算、数据库设计基础。掌握MySQL简介、MySQL的安装。1.1数据库的基本概念1.数据：是指存储在某一种媒体上能够被识别的物理符号。通常我们所说的数据包括两方面 ......
11-MySQL数据库的存储过程
11- MySQL数据库的存储过程课程目标了解存储过程简介、关于MySQL的存储过程。掌握MySQL存储过程的创建、 调用、查询、修改、删除、控制语句、基本函数。11.1存储过程简介我们常用的操作数据库语言SQL语句在执行的时候需要要先编译，然后执行，而存储过程（Stored Procedure）是 ......