数据 物流技术 数据源 团队
识别阻塞查询和 SQL Server 阻塞原因的技术
由数据库对象锁定导致的进程阻塞是一个常见问题。锁定通过强制每个执行的 SQL Server 事务通过ACID测试来确保数据库中存储的数据的完整性。它认为每笔交易都必须满足以下要求： 原子性——事务要么在执行时完全完成，要么根本不执行 一致性——事务必须创建一个有效的新数据状态，或者如果发生任何故障， ......
.NET下数据库的负载均衡“经典方案”（大项目必备，建议收藏）
【前言】 本文讲述的“数据库负载均衡”方案，为市面上最经典（没有之一），由.NET界骨灰级大佬推出。采用该技术方案的大公司，一年省下了几个亿的支出。 【正文】 支持.Net Core（2.0及以上） 与 .Net Framework（4.5及以上） 可以部署在Docker, Windows, Lin ......
坑：vue2在props时仅接受第一次返回数据的解决办法
今天在做项目时遇到了一个bug，在列表页进入详情页时带入list以便子组件遍历使用，使用props传参，该list在父组件由`created`生命周期函数访问接口获取，然后子组件在使用时，直接使用`props`接收并调用，大概代码如下： ```js // 父组件 ... created(){ get ......
使用 ARACNE 方法和合成数据集重建基因调控网络
在生物信息学中，基因调控网络的重建是一个重要的研究领域。这种网络可以揭示基因之间的相互作用，帮助我们理解生物系统的复杂性。在本文中，我将介绍如何使用 ARACNE 方法和合成数据集来重建基因调控网络。 ## ARACNE 方法 ARACNE（Algorithm for the Reconstruct ......
API安全技术
自己在日常工作中会涉及到些安全的概念，但是没有成体系，因此最近研读了《API安全技术与实战》一书，在此做些文章记录。 API安全是从安全的角度关注API领域的安全问题和这些问题的解决方案，从技术和管理两个层面提高API自身和API周边生态的安全性。 1）OWASP API 安全漏洞类型 OWASP（ ......
数据库之oracle查询、序列、建表
1. 查询emp表薪水降序排序后的第5-9条数据 2. 创建序列 3. 建表toys，调用序列的nextval方法实现id自增。添加数据 ......
将excel表格的数据转换成Mysql数据库insert插入语句
=CONCATENATE("INSERT INTO 表名(列1,列2,列3) VALUES('" & A1 & "', '" & A2 & "', '" &A3 & "');") 如果是多行，则需要拖住下来，就会动态生成具体的sql语句。 例如=CONCATENATE("INSERT INTO ba ......
大梦数据的备份还原
## 备份 ### 联机备份 联机即在数据库运行状态下进行备份，必须开归档模式，支持库备份、表空间备份、表备份、归档备份。它包括完全备份（拷贝所有有效数据页）和增量备份（在基备份集基础上拷贝修改的数据页）。 增量备份又包含累积增量备份和差异增量备份。累积增量备份的基础备份是全备的备份集。而差异增量备 ......
java导入excel文件，处理合并单元格的数据
@Transactional(readOnly=false) public void importData() { ExcelUtil excelUtil = new ExcelUtil(); System.out.println("jinru"); //读取excel数据 List result ......
使用postman上传excel Java后端解析excel并导入数据
Controller层 @RequestMapping(value = "importExcel", method = RequestMethod.POST) @ResponseBody public String importExcel(@ModelAttribute MultipartFile ......
达梦数据库集群启动笔记
## 集群启动顺序 ### 主库启动数据库服务 ``` cd /opt/dmdbms/bin/bin ./dm_services start DmServiceGRP1_RT_01 ``` ### 备库启动数据库服务 ``` cd /opt/dmdbms/bin/bin ./dm_services ......
go语言如何使用elastic官方客户端go-elasticsearch/v8实现数据批量更新
go语言如何使用elastic官方客户端go-elasticsearch/v8实现数据批量更新 go语言的官方客户端 Elasticsearch 的官方 Go 客户端是由 Elastic 开发、维护和支持的客户端系列的最新成员之一。 初始版本于 2019 年初发布，并在过去几年中逐渐成熟，获得了重试 ......
执行bat脚本操作sql文件更新Sqlite数据库
在Windows下操作sqlite数据库 一、确保所在Windows已经安装sqlite3 1.1 Win+R 输入cmd打开命令窗口 ``` # 输入 sqlite3 version ``` 显示如下提示则表示已经安装，且能正常使用  # 启动 ## FE 启动 启动 `bin/start_fe.sh --daemon` ## ......
手贱，把分区扩容，导致分区损坏，变为RAW，最终恢复好数据
手贱，把分区扩容，导致分区损坏，变为RAW。DG这个软件确实可以，能扫到文件。但是恢复大文件。需要激活，网上pj版本的根本行不通。 无奈只能 多款软件对比。最终从某鱼上找了一款替换软件。 最终恢复了自己想要的数据。 这款软件 是能扫到所有文件数据，但是你要注意看，它扫到最后他会对比，会把正常文件（他 ......
数据库之Oracle简介
ORCL单仓库，多用户 sys是超级管理员，主要用来维护系统信息和管理实例。不知密码也可以本机登录（远程需要），只能使用SYSDBA或SYSOPER角色登录 system是系统管理员，拥有DBA权限，通常用来管理oracle数据库的用户、权限和存储等。只能用NORMAL方式登录。需要oracle安装 ......
sqlserver数据库逻辑名和文件名修改
1 --查看逻辑名称 2 select name from sys.database_files; 3 4 --修改逻辑名称 5 alter database ZZMK_OneMap_old modify file(name=CJ_OneMap, newname=ZZMK_OneMap_old) 6 ......
数据库行存储索引与列存储索引
行存储是在逻辑上整理为包含行和列的表，实际上以行式数据格式存储的数据，此格式是存储关系表数据的传统方法。 列存储是在逻辑上整理为包含行和列的表，实际上以列式数据格式存储的数据。 行存储索引最适合用于查找数据、搜索特定值的查询，或者针对较小范围的值执行的查询。 对事务工作负载使用行存储索引，因为它们往 ......
使用prometheus监控mysql数据库性能指标
目标：需要实现mysql的性能监控，如cpu占用率，内存占用率，连接数，执行效率等等....... 如图所示： 实现思路一： 使用linux的top命令，定时查看mysql的cup占用率，内存占用率........，然后将得到的数据存放进入数据库，后端拿到数据库数据，前端拿到数据后，进行数据重组，结 ......
python + 批量提取文件中exce数据
import pandas as pd import os # 创建一个空的数据框列表 data_frames = [] # 获取当前脚本的目录路径 current_directory = os.getcwd() folder_path = os.path.join(current_director ......
一个数据丢失惨案
前言 最近，有开发同事联系我反馈一个问题，说开发环境出现了数据丢失的情况，想让DBA帮忙排查一下是不是数据库的问题。我心想大概率是程序bug，不太可能是数据库的问题。不过还是要排查一下才会心安，毕竟对于一个DBA而言，数据丢失无疑是最令人紧张的一件事情。 问题排查 开始进行排查之前，我先确认了如下问 ......
redis常见的5中数据类型以及相关命令
#redis # redis 简介 - redis 是采用 ASNI C 语言编写的 - 采用的是 C/S 架构 - 是非关系型数据库 - 以键值对的形式存储在内存中 # redis 在 windows 中的启动命令 - `redis-server redis.windows.conf` - `re ......
NativeBuferring——一种零分配的数据类型[上篇]
之前一个项目涉及到针对海量（千万级）实时变化数据的计算，由于对性能要求非常高，我们不得不将参与计算的数据存放到内存中，并通过检测数据存储的变化实时更新内存的数据。存量的数据几乎耗用了上百G的内存，再加上它们在每个时刻都在不断地变化，所以每时每刻都无数的对象被创建出来（添加+修改），同时无数现有的对象... ......
数据处理的那些事「GitHub 热点速览」
 撇开一屏占四分之三屏幕的 AI 相关项目之外，本周剩下的热榜项目就是同数据有关的数据库项目，比如 CockroachDB ......
英飞凌芯片市场与技术分析
英飞凌芯片市场与技术分析 汽车芯片企业盘点之：德国芯片巨头英飞凌 英飞凌2022年Q4的收入为39.5 亿欧元， 环比下降5%，这可能也是表征了大部份芯片公司收入的拐点（做内存的提前已经掉了）。而2022年英飞凌的收入为142.2亿欧元，其中汽车业务的收入为65.2亿欧元，这也是一个非常高的数字，目 ......
bootrec 命令是 Windows 操作系统中用于修复启动问题的一组命令。它可以帮助修复引导记录、主引导记录 (MBR)、引导扇区以及启动配置数据 (BCD) 等与启动有关的问题。以下是对 bootrec 命令进行详细说明
bootrec 是一个用于修复启动问题的 Windows 命令。它是 Windows 操作系统的一部分，提供了一些功能强大的工具，用于修复引导记录、主引导记录 (MBR) 和启动配置数据 (BCD) 等问题。 以下是一些常见的 bootrec 命令及其功能： bootrec /fixmbr： 修复主 ......
SpringBoot+Mybatis-Plus使用多数据源
常见的使用Mybatis-Plus配置多数据源方式有两种：一种是通过java config的方式手动配置两个数据源，另一种方式便是使用 dynamic-datasource-spring-boot-starter。 dynamic-datasource-spring-boot-starter 是一个 ......
Docker 数据卷Volume的使用
在root目录下，创建docker-volume文件夹，将网站静态资源，上传到该目录 删除正在运行的容器 docker rm $(docker stop $(docker ps -a -q)) 以数据卷的方式，创建3个tomcat容器，tomcat-8080,tomcat-8081,tomcat-8 ......
职业规划～高级大数据工程师篇
新开分类，增加职业规划随想，用于记录自己对于以后的职业畅想。 畅想自己在2019-2023年这4年期间，自己从基础的平台开发运营， 到各种开源组件的学习应用，再到一个CRUD的大数据工程师。自己一路走来，更多是像一名技师，孰能生巧，唯手熟尔。 如今开一博客，记录日常解决问题，新技术探索学习。 也探讨 ......
技术人成长的秘诀！！！
1、走出舒适区——挑战自我极限 一开始加入DoubleClick的时候，我作为一个入门级程序员，专注于技术方面的发展，在其中学到了很多东西。尤其是刚一开始，中国人，不太会讲英文，还是一个入门级程序员，很多东西都不懂，所以每天需要面临很多挑战。 我还记得那个时候，一进入预测组，很多的cluster是用 ......