数据库 数据sql
Hive构造数据踩坑
运维哥哥为了获取每个表的访问时间，开启了Hive钩子，在集群参数里面配置了hive.exec.pre.hooks= org.apache.hadoop.hive.ql.hooks.UpdateInputAccessTimeHook$PreExec，结果导致在使用图1的sql时报找不到虚拟表的错误(如 ......
数据管道
[Eats data platform: Empowering businesses with data](https://medium.com/coupang-engineering/eats-data-platform-empowering-businesses-with-data-3cc00f ......
十二、删除数据
12.1删除表中特定行>>> delete from customers where cust_id='10010'; # 删除指定的列；12.2删除表中所有行当delete语句没有where子句时，删除的是表所有行，但是delete只是删除了内容，但是原先数据占用的空间还在，要清空表并释放表空间T ......
十一、更新数据
11.1更新表中特定行>>> UPDATE costomers SET cust_email='elmer@sina.com' WHERE cust_id='10005'; #更新指定行的特定列>>> update costomers set cust_email='elmer@sina.com', ......
PetaPoco支持达梦数据库
本文用于记录PetaPoco支持达梦数据库所做的修改，本想把做的修改作为RP提交到PetaPoco库的，考虑到国产数据库只有我国推行的比较多，对老外来说可能会有片面性，因此放弃了，本文记录下修改的过程，以便需要的童鞋可以参考。 操作步骤 如下图所示， 添加 DmDatabaseProvider.cs ......
十、插入数据
10.1插入完整行>>> insert into customers values(NULL,'Pep E. LaPew','100 Main Street','Los Angels','CA','90046') ; #给表中的每一列都赋值,该语句当表结构发生变化时会出错>>> insert int ......
二、排序数据
2.1 按单个列排序>>> select * from trade order by trade_time;2.2 按多个列排序>>> select * from trade order by trade_time,book_name;返回结果先按trade_time排序，再对trade_time相 ......
三、过滤数据
数据表中的数据一般都是非常大，我们一般只需要查询特定的数据3.1 where单一子句>>> select * from trade WHERE trade_date='20230313'; #匹配查询>>> select user_id,product_id,order_id form trade ......
六、分组数据
6.1 创建分组 group bygroup by规定：1).group by 可以包含任意数目的列，所以可以对分组进行嵌套；2).若group by 中嵌套了分组，数据将在最后规定的分组上进行汇总；3).group by 子句中列出的每个列都必须是检索列或有效表达式（不能是聚集函数）；4).如果分 ......
SQL coalesce, if null (), nvl 函数
1. coalesce函数 coalesce(expr1, expr2, ...) - Returns the first non-null argument if exists. Otherwise, null. 返回所有参数中第一个非null的，若均为null，返回null。 SELECT co ......
图数据库驱动的基础设施运维实操
本文系图技术在大型、复杂基础设施之中 SRE/DevOps 的实践参考，并以 OpenStack 系统之上的图数据库增强的运维案例为例，揭示图数据库、图算法在智能运维上的应用。 ......
node_exporter是怎么获得数据的
exporter分为两类：独立 和 集成到应用，集成到应用的方式侵犯业务逻辑代码 独立式数据流： [目标系统] ->(采集监控数据、规范数据格式) [exporter] ->(http轮询获取数据) [Prometheus] 常见的exporter数据采集方式： 1）文件方式：例如node expo ......
mall--订单模块数据库表解析
本文主要对购物车功能相关表进行解析，介绍从商品加入购物车到下单的整个流程，涉及购物车优惠计算流程、确认单生成流程、下单流程及取消订单流程。 购物车表 用于存储购物车中每个商品信息，可用于计算商品优惠金额。 create table oms_cart_item ( id bigint not null ......
sql 连续活跃天数
1. 背景 已知数据集为： 目的： 计算每个uid的连续活跃天数，并且每一段活跃期内的开始时间和结束时间 2. 步骤 第一步：处理数据集 处理数据集，使其满足每个uid每个日期只有一条数据。 第二步：以uid为主键，按照日期进行排序，计算row_number. SELECT uid ,`征信查询日期 ......
pymysql操作数据库入门
1. python操作数据库 pymysql PyMSQL是一个纯的python的MySQL客户端。 pip install PyMySQL 使用步骤 创建连接(修高速公路) 创建游标(运输车) 执行sql(提货单) 获取结果(卸货) 关闭游标(车退掉) 关闭连接(路也断掉) import pymy ......
搭建rabbix监控Redis数据库
服务端节点：192.168.30.100 客户端节点：192.168.30.110 部署 zabbix 服务端 systemctl disable --now firewalldsetenforce 0hostnamectl set-hostname zbx-server //获取 zabbix 的 ......
ubuntu 使用xshell5连接跳板机，出现问题： “服务器发送了一个意外的数据包”received:3,expected:20
xshell5访问报错，“服务器发送了一个意外的数据包。received:3,expected:20” 1、排除了网络、防火墙等因素 2、查看sshd服务状态： 3、在/etc/ssh/sshd_config配置文件最后面添加下面一行： KexAlgorithms curve25519-sha256 ......
PyQuery数据解析
PyQuery数据解析 1、导入 from pyquery import PyQuery 2、创建PyQuery对象 p = PyQuery("页面源代码") 3、定位 # 用法 a = p("css选择器") a = p("a") # 选择a标签 a = p("li")("a") # 选择li下的 ......
记录常用SQL
#####创建表 CREATE TABLE WorkOrderTimeFlowRecord( Id int identity(1,1) primary key, CreatedTime datetime NULL, CreatedUserId varchar(50) NULL, UpdatedPro ......
用 Windows 自带刻录软件刻录数据到光盘
1、工具 刻录光驱 空白光盘 2、在电脑上连接光驱并将空白光盘放入光驱 3、在“此电脑”下找到“DVD RW 驱动器”，右键“打开” 4、选择“用于 CD/DVD 播放机”，然后下一步 5、将需要刻录的数据拖拽到“DVD RW 驱动器” 6、右键选择“刻录到光盘”，然后下一步开始刻录数据，刻录完成后 ......
SQL 时间函数
转载自：SQL千字总结：如何更好的操练你手上的时间数据 1. 认识时间格式 非标准时间格式：20200101可转换 可识别时间格式：2020-12-12、2020-12-12 12:12:12、1577836800 说下时间戳：1577836800，表示1970年1月1日开始过去了多少秒 2. 时间 ......
Sql Server 连接读取access数据库
IF EXISTS (SELECT srv.name FROM sys.servers srv WHERE srv.server_id != 0 AND srv.name = N'ACCESSTEST') exec sp_dropserver 'ACCESSTEST', 'droplogins'Go ......
C#请求访问HTTP+JSON数据的解析
一、前言最近工作客户需要一个HTTP的Mes需求，所以自己去学习了C#请求HTTP的方法以及JSON数据的解析方法，总结出了点经验，以便后续自己找起来方便一点，故在此写一篇文章。 二、准备工作下面我用一个聚合数据提供的天气预报API接口来阐述请求HTTP和JSON数据解析的功能； 先看API文档这么 ......
开发手记-前端发送请求返回数据为空
问题描述 发送请求获取到数据并传递给组件，但是组件第一次获取到的数据为空导致报错 猜测可能的原因 react有一个机制会导致两次渲染 axios异步请求，在没有去的结果前就返回 解决组件首次渲染时，数据还未到达，导致错误的情况 这边又分两种情况 组件自己发送请求获取数据 可以在组件中使用 useSt ......
Visual Studio C盘数据迁移，解决C盘空间不足的问题
迁移原理： 将Visual Studio比较占用磁盘空间的 “C:\Program Files (x86)\Microsoft SDKs\” 目录和 “C:\Program Files (x86)\Windows Kits\” 目录移动到D盘， 然后通过mklink命令建立C盘和D盘的软连接 然后在 ......
SQL concat_ws, collect_set, 和explode合并使用
1. 背景 有一个这样的数据集：字段和字段的值是两列 目的是将这个数据转换成规整的一个特征是一列的数据： 2. 做法 第一步：先造出列 select ucid ,CASE WHEN type ='性别' THEN label end `性别` ,CASE WHEN type ='产品' THEN l ......
SQL Server 配置管理器打不开提示错误
SQL Server 配置管理器 无法连接到 WMI 提供程序。您没有权限或者该服务器无法访问。请注意，您只能使用 SQL Server 配置管理器来管理 SQL Server 2005 和更高版本的服务器。 无效类 [0x80041010] 解决“无法连接到WMI提供程序，您没有权限或者该服务器无 ......
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图 1、前言 我们之前定义视图，数据源都是来源于数据库，从数据库中获取数据，然后序列化。那么，如果数据源不来自于数据库，而是来自于其他途径，比如requests请求，这时候，序列化类就用不上ModelSeri ......
APISIX 是怎么保护用户的敏感数据不被泄露的？
本文以 APISIX 作为例子，为大家介绍了如何借助 Global Data Encryption 功能来保护敏感数据，确保不会有任何敏感数据进行明文存储，这样即使 etcd 中所有存储的数据都被盗取，也不会造成敏感数据泄露，从而有效提升了 APISIX 的安全性。 作者刘维，API7.ai 技术工 ......