身份hive
如何使用token进行身份认证
如何使用token进行身份认证 什么是token？ token是一种用于身份认证的技术，它是一个包含用户信息和签名的字符串，通常由服务器生成并返回给客户端。客户端在每次请求时，都需要携带token来证明自己的身份。服务器通过验证token的有效性和完整性，来授权客户端访问受保护的资源。 为什么要使用 ......
Apache Hive
Apache Hive是一个基于Hadoop的数据仓库基础设施。它提供了一种类似于SQL的查询语言，称为HiveQL，用于处理和分析存储在Hadoop分布式文件系统（HDFS）或其他支持Hadoop的文件系统中的大规模数据集。Hive的设计目标是使用户能够执行复杂的分析查询，而无需编写复杂的MapR ......
配置 Git 的用户身份信息
1. 打开 Git Bash 终端。 2. 运行以下命令，将你的邮箱配置为 Git 的全局默认邮箱（将 "you@example.com" 替换为你的实际邮箱）： ```bash git config --global user.email "you@example.com" ``` 3. 运行以下 ......
什么是hive的高级分组聚合，它的用法和注意事项以及性能分析
hive的高级分组聚合是指在聚合时使用GROUPING SETS、CUBE和ROLLUP的分组聚合。 高级分组聚合在很多数据库类SQL中都有出现，并非hive独有，这里只说明hive中的情况。 使用高级分组聚合不仅可以简化SQL语句，而且通常情况下会提升SQL语句的性能。 ## 1.Grouping ......
PHP根据身份证号码，获取性别、获取生日、计算年龄等多个信息
/** * 根据身份证号码获取性别 * @param string $idcard 身份证号码 * @return int $sex 性别 1男 2女 0未知 */ function get_sex($idcard) { if(empty($idcard)) return null; $sexint ......
Hive3.1.3集群安装
一、安装mysql Hive默认的Derby数据库一次只能打开一个会话，不支持多用户并发访问，需要替换Hive的存储引擎为mysql 1. 下载mysql安装包 wget http://dev.mysql.com/get/mysql57-community-release-el7-7.noarch. ......
041.hive-hive输出所有表结构
-- hive 输出库中表结构 -- 输出所有表名 hive -e "use xx;show tables;" > tables.txt vim echo_table.sh -- 输出所有表结构 #!/bin/bash echo 'use xx;' >> tablesDDL.sql cat tabl ......
Windows SID（Security Identifier）是一个用于唯一标识安全主体（如用户、组、计算机等）的标识符。每个安全主体在Windows操作系统中都被分配一个唯一的SID，以便进行身份验证和访问控制。
Windows SID（Security Identifier）是一个用于唯一标识安全主体（如用户、组、计算机等）的标识符。每个安全主体在Windows操作系统中都被分配一个唯一的SID，以便进行身份验证和访问控制。 SID由一系列数字组成，通常以"S-"开头，后面紧跟着一串数字和字符的组合。例如， ......
hive ddl
普通建表 外部表代表会完全接管， 内部表表示删除的时候不会删除HDFS的数据 三种建表语句 第二种把查询语句作为建一个新表， 新表里面就有数据 第三种新建的表里面就没有数据 ......
关于Nacos身份认证绕过漏洞默认密钥和JWT的研究
前言 由于本人的一个习惯，每次遇到漏洞并复现后都要编写poc，以便下一次的直接利用与复测使用。研究Nacos默认密钥和JWT的爱恨情仇的过程中遇到了莫名其妙的问题，在此做以记录，方便日后有大佬遇到相同的问题路过看到能够得以解决。 研究过程 在Nacos身份认证绕过漏洞复现文章中提到jwt.io网站， ......
hive最小化部署 生产部署 hiveserver2 代理对象 和metastore服务
自带的derbe的数据库, 建表后就是在路径下新建了一个文件,映射成表的概念, 同时在yarn会去执行,但是很多数据量很小的操作不会提交到yarn 从stu表读数据的时候 用的inputformat 写数据的时候用的outputformat metastore服务 保存表名和文件路径之间的映射关系 ......
hive 先生成抽象语法树,在进行逻辑优化,再到屋里计划生成,物理优化,最后再执行
driver 主要的任务是将一条 sql 语句翻译成 物理执行计划，例如 一个map Reduce任务 deiver驱动器, 词法分析 select (token)from (token) 和 语法分析 合并成抽象语法树 语义分析,分解成一个个的查询单元, 类似于子查询 ......
记一次Nacos漏洞的复现 --> 身份认证绕过漏洞（QVD-2023-6271）
前记 端午前两天，遇到公司某客户的站点是Nacos，随后就是网上搜一波漏洞，搜到 QVD-2023-6271，故做以下记录 漏洞复现 漏洞描述 漏洞原理为开源服务管理平台 Nacos在默认配置下未对 token.secret.key 进行修改，导致远程攻击者可以绕过密钥认证进入后台造成系统受控等后果 ......
py小程序：根据身份证号提取出生日期、性别、年龄
py小程序：根据身份证号提取出生日期、性别、年龄 ━━━━━━━━━━━━━━━━━━━━━━ 你可以使用 Python 编写一个小程序，根据输入的身份证号码提取出生日期、性别、年龄。下面是可能的实现方式。 ```python import datetime def get_info_from_id ......
vue中微信身份识别（openid）
最近做一个投票功能，为了防止用户恶意刷票，必须鉴别用户身份，对每个人投票次数限制。但投票是开放的，任何人都可以投，并非仅平台注册用户，因此只能使用用户最广泛的微信来识别用户，通过获取微信openid来判定用户是否已经投过票。 在vue中，需要添加一个静态html（weixinOAuth.html）来 ......
Kubernetes(k8s)访问控制：身份认证
Kubernetes(k8s)访问控制：身份认证，Kubernetes访问控制，使用base auth的方式进行认证，使用token的方式进行认证，使用管理员的kubeconfig文件进行认证，使用自定义的kubeconfig文件进行认证。 ......
Apache Superset 身份认证绕过漏洞（CVE-2023-27524）
Apache Superset是一个开源的数据可视化和数据探测平台，它基于Python构建，使用了一些类似于Django和Flask的Python web框架。提供了一个用户友好的界面，可以轻松地创建和共享仪表板、查询和可视化数据，也可以集成到其他应用程序中。 ......
高可用Hive
## 上传hive，mysql安装包 **下载安装包请参考这篇文章里面的网址：https://www.cnblogs.com/skyrainmom/p/17438858.html** ## 解压包设置权限 ``` [root@master ~]# tar xf apache-hive-2.0.0-b ......
Hive扩展之web界面：hwi接口
**HWI是Hive Web Interface的简称，是hive cli的一个web替换方案，以开发的网页形式查看数据** ## 切换用户启动集群 ``` [root@master ~]# su - hadoop Last login: Tue May 2 13:18:34 CST 2023 on ......
当条件求和遇到身份证号
问题：以身份证号为条件进行求和 函数公式解决： =SUMIF(E:E,Q3&"*",M:M)+SUMIF(E:E,Q3&"*",N:N) 条件不能直接用Q3，因为身份证号是超过15位的数字，如果直接使用，结果会对前15位相同的进行求和，此处需要连接一个“*”用以区分。 ......
Docker 安装 Hive
一、安装Docker 以及 配置Docker-compose环境 安装Docker: # 1、切换镜像源 [root@master ~]# wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yu ......
医疗健康数据身份信息加密
1. 算法构想 由于医院的数据涉及到隐私问题和防止个人信息泄露被恶意使用，那么就选择对其中的个人id也就是身份证号进行加密，选用单向加密算法，无法被解码，并且不需要密钥。但是由于一些理论上的漏洞会产生一些问题： 使用的数据加密可能会被暴力破解法进行破解掉，如何尽量减少穷举法能够破解掉的概率。 加密产 ......
快速判断一个身份证号对不对？
#怎么快速判断一个身份证号对不对？ ``` =IF(MID(D2,18,1)=CHOOSE(MOD(SUMPRODUCT(MID(D2,{1,2,3,4,5,6,7,8,9,10,11,12,13,14,15,16,17},1)*{7,9,10,5,8,4,2,1,6,3,7,9,10,5,8,4, ......
以其他用户身份运行SSMS
> [How to Run SSMS as a different user](https://www.sqlserver-dba.com/2021/11/run-ssms-as-a-different-user.html) 以其他用户身份运行是可用的 它实际上是可用的，但不是右键单击，而是使用 S ......
Hive执行计划之只有map阶段SQL性能分析和解读
这种只含map的操作，如果文件大小控制在合适的情况下，都将只有本地操作，其执行非常高效，运行效率完全不输于在计算引擎Tez和Spark上运行。 ......
大数据学习笔记hadoop、hive、java
HDFS伪分布式集群搭建 tar -zxvf hadoop-2.7.7.tar.gzecho $JAVA_HOME/root/software/jdk1.8.0_221#查看loaclhostvim /root/software/hadoop-2.7.7/etc/hadoop/hadoop-env ......
Hive执行计划之什么是hiveSQL向量化模式及优化详解
Hive开启向量化模式也是hiveSQL优化方法中的一种，可以提升hive查询速率，也叫hive矢量化。 问题1：那么什么是hive向量化模式呢？ 问题2：hive向量化什么情况下可以被使用，或者说它有哪些使用场景呢？ 问题3：如何查看hive向量化使用的相关信息？ ## 1.什么是hive向量化模 ......