身份hive
根据身份证号 判断男女、 获取出生日期、
// 通过截取身份证号码的最后两位，进行取余数来判断奇数偶数let sex = value.substring(16, 17);// IDcard为用户输入的身份证号码return sex % 2 == 1 ? '男' : '女'; // 通过截取对应位置拼接对应的字符组成 格式为yyyy-mm-d ......
04身份认证：除了账号密码，我们还能怎么做身份认证？
高效安全的对称加密算法，解决密钥分发难题的加密算法（防止对称密钥泄露），以及提供单向加密的三列算法 问题 现在公司有好几个应用，每一个应用都有独立的账号体系，管理起来失分复杂。而且，内部员工的账号系统也没有建设起来，应该怎么解决这些问题？ 身份认证 分为两个部分：对外认证和对内认证 对外认证，其实就 ......
apache-paimon初体验 （hive用法待完善）
1.官网 https://paimon.apache.org/docs/master/engines/hive/ 2.安装flink 3.下载依赖包到flink lib目录下 4.运行yarnsession 创建Application-Name，并修改配置文件 ./bin/yarn-session. ......
hive的相关学习1---wordCount实例
1、新建一个名为file1.txt的txt文件存储数据 2、在sss数据库中新创建一个名为docs的表 create table if not exists docs(line string); 3、将file1.txt的数据导入到新创建的docs表中 load data local inpath ......
FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient问题的解决
问题描述 今天再次打开虚拟机（之前交完作业之后，就不敢再打开了，害怕看到报错信息），打开hive之后，启用hive命令时，发现了这个问题； 问题解决 经查阅资料发现，原来是因为我再使用hive命令之前，没有开启metastore服务和hiveserver2服务，先开启了这两个服务，再进入hive里面 ......
【漏洞复现】Openfire身份认证绕过漏洞到RCE(CVE-2023-32315)
1、简介 Openfire是一个基于XMPP协议的即时通讯服务器，也称之为即时通讯平台。在即时通讯中往往因为需要保存一些状态或者数据所以不能采用点对点通讯，而是需要搭建服务器来转发。Openfire的管理页面包含5个菜单选项，分别是服务器基本信息配置选项、用户组管理选项、会话管理选项、分组聊天选项和 ......
Win10系统怎么让所有程序都默认以管理员身份运行
Win10系统怎么让所有程序都默认以管理员身份运行？ 2023/8/1 9 很多用户在使用win10系统时，常常使用某一款程序时候，都会跳出“以管理员身份运行”才有效，久而久之会让人心生厌烦，那么如何一键设置任何程序都是以管理员身份运行呢？小编这就为大家奉上教程。 步骤如下： 1、使用小娜搜索“se ......
Hive的分区
在下面的代码中，我们创建了名为emp的分区表，使用关键字partitioned by： create table emp( name string, age int ) partitioned by (provice string,city string); 在这里，用partitioned by指 ......
Hive的ConfigurationProperties
Version Information Hive 0.14.0 adds new parameters to the default white list (see HIVE-8534). Hive 1.1.0 removes some parameters (see HIVE-9331). Hiv ......
以管理员身份运行 Bandizip 并创建符号链接.问题的解决
问题描述 解压文件出现这样的错误； 问题解决 关闭这个，然后右键BandZip软件，以管理员身份运行即可解决； ......
速记：B站拉取饭贩（直播开放平台）身份码的API
近期blivechat更新为接入开放平台读取身份码的方式拉取弹幕了，遂速记一下抓到的B站获取这个身份码的API。 就这东西 https://api.live.bilibili.com/xlive/open-platform/v1/common/operationOnBroadcastCode 请求方 ......
Hive数据库中执行更新和删除数据操作
在Hive中，ACID表是支持ACID（原子性、一致性、隔离性和持久性）事务的表。这意味着这些表支持事务处理，如INSERT、UPDATE、DELETE和COMMIT操作。 然而，并非所有的Hive表都是ACID表。例如，如果你正在使用一个不支持ACID事务的Hive版本或配置，那么你可能无法在这些 ......
HIVE ASCII码
hive中的分割符使用八进制的ASCII码表示 1 八进制 十六进制 十进制 字符 使用方法 2 00 00 0 nul 3 01 01 1 soh 4 02 02 2 stx 5 03 03 3 etx 6 04 04 4 eot 7 05 05 5 enq 8 06 06 6 ack 9 07 ......
opencv-python 身份证识别示例
环境 提示：硬件环境Win10 python:3.8 opencv-python: 3.4.8.29 pytesseract: 0.3.9 cnocr: 2.1.2.1 技术点 这里利用opencv 做身份证照片处理，为识别增加准确度。利用pytesseract 做文字提取，由于是识别身份证，需要提 ......
sqoop1.4.7完全支持Hadoop3.x, Hive3.x Hbase2.x
已经修改好 保存至云盘 自己下载 花了时间的，记得关注我。。。 链接：https://pan.xunlei.com/s/VNe6P6Tm1A9Q-RG5GByN08rdA1# 提取码：5nke 复制这段内容后打开手机迅雷App，查看更方便 下载解压直接用，里面的内容已经改好 但是需要注意的是conf ......
hive启动整个流程
首先是start-all.sh然后打开历史服务器：mapred --daemon start historyserver最后首先启动metastore服务，然后启动hiveserver2服务nohup bin/hive --service metastore >> logs/metastore.lo ......
sqoop把hive中的数据导入mysql中文乱码问题解决
sqoop导出数据中文乱码问题我参考的这个博客sqoop把hive数据导入mysql出现中文乱码_mysql的表数据导入到hive表中文乱码_bboy枫亭的博客-CSDN博客 用方法一就行。剩下的就是测试。 测试样例 bin/sqoop export \ --connect "jdbc:mysql: ......
关于IDEA里面连接数据库找不到org.apache.hive.jdbc.Driver的问题
问题描述 昨天就很顺利地连接上了，今天直接找不到我的class了，吓出一身冷汗； 问题解决 后来发现导入的jar包的路径不太对，突然想起来jar包的位置被我移动了，但是IDEA里面并没有改变原来的位置，找不到jar包的问题， 重新将jar包的路径浏览一遍即可解决； ......
VS Code 的另外一个实例已在以管理员身份运行
在安装插件时，出现 "Code的另一个实例已在以管理员身份运行"的警告。 以管理员身份运行Visual Studio Code解决问题。 ......
使用IDEA连接Hive数据库使用Java代码实现增删改查还需要一个Hive配置类
可以取名为：HiveConfig-- package com.example.config; import com.alibaba.druid.pool.DruidDataSource; import lombok.Data; import org.springframework.beans.fac ......
Hive进行增删改查语句命令之前，需要做的一些配置
1、在我们刚刚将Hive连接到IDEA之后 满怀期待地想要试一试sql语句，发现除了select和insert，其余的都会报错； 2、查阅资料发现，要是想要执行其余的语句 需要在虚拟机的hive-site.xml文件里面，添加上下面的语句： <property> <name>hive.support ......
IDEA远程连接Hive(首先要确保本机和虚拟机在一个公网上面，具有连通性)
1、开启hiveserver2服务 start-all.sh nohup /export/server/apache-hive-3.1.2-bin/bin/hive --service metastore & nohup /export/server/apache-hive-3.1.2-bin/bi ......
hive2.3.1部署
1.安装本人安装hive1.2.1的方式准备mysql和hive 2.不同点为配置hive-site.xml时，需要在文件中额外添加配置 <!--hive2需要初始换元数据 schematool -initSchema -dbType mysql--> <property> <name>datanu ......
FAILED: SemanticException Unable to determine if hdfs://localhost.localdomain:9000/root/software/apache-hive-3.1.2-bin问题的解决
# 问题描述 在hive数据库里面，使用select语句对表的数据进行查找，就出现了这个错误:  # 问题解决 这 ......
输入jps命令发现缺少namenode进程--同时猜想hive启动失败是由于缺少namenode进程的原因
# 问题描述  且  但是在尝试将**NONE ......
关于hive数据库添加信息到表中出现问题的原因细说
# 问题来源 在建表完成之后，尝试使用insert into语句向表中添加数据信息，然后就一直不能成功，当然，添加的数据信息与表的字段类型是对应的； # 问题解决 查阅相关资料发现，原来是虚拟机的内存不太够，然后就按照网上的建议，将下面的语句放置到hadoop下面的**yarn-site.xml** ......
HIVE将长整数转字符串的错误
有一个超长字符串，比如：441066000000001005712973，原来存放在HIVE里表A 是用DECIMAL(24)类型。现在要与另外一个用string类型保存这个字段的表B关联，老是失败。单独检查，发现它与表B的空值关联上。 单独使用语句检查： select cast(441066000 ......
org.apache.hadoop.hive.metastore.HiveMetaException: Schema initialization FAILED! Metastore state would be inconsistent !!问题的解决
# 问题描述 hive进行初始化时，出现这样的问题； # 问题解决 只要进入到我们的虚拟机安装配置的mysql里面，将我们hive-site.xml里面提及到的数据库删除，然后再进行初始化即可； 这次出错是因为，我之前已经初始化过，才出现了这个问题； ......