hadoop apache org rpcnosuchprotocolexception
多模块项目依赖中，项目启动失败-org.yaml.snakeyaml.error.YAMLException: java.nio.charset.MalformedInputException
异常问题专栏收录该内容22 篇文章1 订阅订阅专栏 错误：org.yaml.snakeyaml.error.YAMLException: java.nio.charset.MalformedInputException: Input length = 1 原因：yaml/yml配置文件解析失败 解决 ......
Hadoop3.3.6配置历史服务器和日志
一、配置历史服务器 1.增加配置属性 Hadoop部署模式主要有3种：本地、伪分布式、完全分布式。云服务器只有一台所以我使用的是伪分布式模式部署的。要配置历史服务器只需修改mapred-site.xml文件。在里面增加如下配置。 <!-- 历史服务器端地址 --> <property> <name> ......
关于IDEA里面连接数据库找不到org.apache.hive.jdbc.Driver的问题
问题描述 昨天就很顺利地连接上了，今天直接找不到我的class了，吓出一身冷汗； 问题解决 后来发现导入的jar包的路径不太对，突然想起来jar包的位置被我移动了，但是IDEA里面并没有改变原来的位置，找不到jar包的问题， 重新将jar包的路径浏览一遍即可解决； ......
大数据hadoop学习总结
一、环境配置: 1、hadoop 2、zookeeper 3、hbase 4、phoenix 二、连接准备 hbase-site.xml 1 <?xml version="1.0"?> 2 <?xml-stylesheet type="text/xsl" href="configuration.xs ......
Hadoop基础学习1(SSHfinalshell、vim、别名、hadoop集群)
1.SSH协议 SSH协议为Secure Shell的缩写，是一种网络安全协议，转为远程的登录会话和其他网络服务提供安全性的协议。 在Linux中，SSH的主要用途有：用户加密实现远程登录，服务器之间的免密登录。 SSH协议默认采用RSA算法实现非对称加密，需要两个密钥：公开密钥和私有密钥。 公钥和 ......
1-centOS7搭建伪分布式Hadoop
前言：虚拟机快照的使用 VMware Workstation 软件可以用快照进行迅速的虚拟机状态的切换 ※. 类似于虚拟机备份， 可以使用备份进行快速恢复。 比如没安装jdk之前拍摄快照来备份 ※. 若jdk没安装好或者jdk环境变量配置的有问题， 可以用安装之前的快照快速恢复虚拟机 1.拍摄快照： ......
Ubuntu22系统部署Hadoop3.3.6环境
看boss有招大数据的讲师，好奇看了下，现在大学都讲大数据了，现在是越来越普及。昨天弄了一个云服务器部署了下Hadoop，虽然也是参考网上教程部署，但过程中还是出了不少问题。想着把部署过程完整记录下，所以我就把部署好的实例释放了又实例化了一台新的云服务器重新部署了下，如果是在我本地安装报错了还得重新 ......
FAILED: SemanticException Unable to determine if hdfs://localhost.localdomain:9000/root/software/apache-hive-3.1.2-bin问题的解决
# 问题描述 在hive数据库里面，使用select语句对表的数据进行查找，就出现了这个错误:  # 问题解决 这 ......
报错解决 :Resolved [org.springframework.web.bind.MissingServletRequestParameterException
报错解决 :Resolved [org.springframework.web.bind.MissingServletRequestParameterException 解决方法：RequestParam注解加上required = false属性。这样请求参数可以传null对象。 如果没有加上re ......
IDEA Maven工程报错org.codehaus.plexus.component.repository.exception.ComponentLookupException
使用IDEA 自动生成springboot项目框架，遇到maven工程报错：org.codehaus.plexus.component.repository.exception.ComponentLookupException 1.错误表现 IDEA打开之后，maven同步依赖时，报如下的错误： 2 ......
Idea中导入import org.junit.Test时飘红
转载自：https://blog.csdn.net/aahdjdb/article/details/132186198 如图，导入import org.junit.Test时飘红 解决方法： 1.选中FIle——Project Structure 2.选择——Libraries——Java 3.找到 ......
Apache HTTPD 多后缀解析漏洞
[toc] # Apache HTTPD 多后缀解析漏洞 ### 1.1、漏洞描述 Apache HTTPD 支持一个文件拥有多个后缀，并为不同后缀执行不同的指令。比如，如下配置文件： ```php AddType text/html .html AddLanguage zh-CN .cn ``` ......
Apache HTTPD-未知后缀名解析
[toc] # Apache HTTPD-未知后缀名解析 upload-labs/Pass-07 上传1.php文件 ```php ``` 
[toc] # Apache HTTP_2.4.49_路径穿越漏洞(CVE-2021-41773) | 说明 | 内容 | | | | | 漏洞编号 | CVE-2021-41773 | | 漏洞名称 | Apache HTTP 路径穿越漏洞 | | 漏洞评级 | 高危 | | 影响范围 | 2.4 ......
Apache HTTP_2.4.50_路径穿越漏洞(CVE-2021-42013)
[toc] # Apache HTTP_2.4.50_路径穿越漏洞(CVE-2021-42013) | 说明 | 内容 | | | | | 漏洞编号 | CVE-2021-42013 | | 漏洞名称 | Apache HTTP_2.4.50_路径穿越漏洞 | | 漏洞评级 | 高危 | | 影响范 ......
habase2.5.5解决ERROR: org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not runnin
hbase的master和regionserver启动都正常但是出现错误 org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not runnin之后我翻阅logs里面的启动日志 解决方案 在hbase-site.x ......
Grafana+Influxdb（Prometheus）+Apache Jmeter搭建可视化性能测试监控平台
本文参考链接： [https://cloud.tencent.com/developer/article/1624720](https://cloud.tencent.com/developer/article/1624720) 此性能测试监控平台，架构可以是： - Grafana+Influxdb ......
Hadoop学习
# Hadoop ## java环境安装 ## hadoop上传、解压 环境变量配置 ~~~bash JAVA_HOME=/usr/local/java/jdk1.8.0_161 CLASSPATH=$JAVA_HOME/lib/ PATH=$PATH:$JAVA_HOME/bin export P ......
org.apache.hadoop.hive.metastore.HiveMetaException: Schema initialization FAILED! Metastore state would be inconsistent !!问题的解决
# 问题描述 hive进行初始化时，出现这样的问题； # 问题解决 只要进入到我们的虚拟机安装配置的mysql里面，将我们hive-site.xml里面提及到的数据库删除，然后再进行初始化即可； 这次出错是因为，我之前已经初始化过，才出现了这个问题； ......
Hadoop的写流程(微观层面)
解释： 步骤1：客户端进行发送存储消息，FileSystem通过rpc调用NameNode的put方法,NameNode对文件的路径，大小以及权限进行校验， 步骤2：校验成功后，返回FSDateOutputStream对象给客户端进行使用 步骤3：客户端对文件进行划分，将划分信息返回给NameNod ......
用户案例 | 蜀海供应链基于 Apache DolphinScheduler 的数据表血缘探索与跨大版本升级经验
 ## 导读 蜀海供应链是集销售、研发、采购、生产、品保、仓储、运输、信息、金融为一体的餐饮供应链服务企 ......
Hadoop环境安装与配置
1.基础操作系统环境安装（略） 2.JDK的安装与配置 当前各大数据软件如Hadoop等，仍然停留在Java 8上，在本实验选用的是Java 8。在自己的Linux系统中，jdk可以使用如下命令进行一键安装(需具备sudo权限)。 sudo yum install java-1.8.0-openjd ......
Hadoop大数据平台搭建
# Hadoop平台搭建 ## 一、基础环境准备 ### 1.master、slave1、slave2三台主机上配置以下信息 ``` [root@localhost ~]# cd /etc/sysconfig/network-scripts [root@localhost network-scrip ......
Ubuntu部署Hadoop集群
## 前期准备 ### 系统及软件版本说明 本章操作中所使用的相关操作系统及软件版本如下： | 软件 | 版本 | | | | | 操作系统 | Ubuntu 14.04.1 | | JDK | 1.8.0 | | Hadoop | 2.7.3 | ### JDK 安装 集群中每台机器都需要安装 J ......
CDC一键入湖：当 Apache Hudi DeltaStreamer 遇见 Serverless Spark
Apache Hudi的DeltaStreamer是一种以近实时方式摄取数据并写入Hudi表的工具类，它简化了流式数据入湖并存储为Hudi表的操作，自 `0.10.0` 版开始，Hudi又在DeltaStreamer的基础上增加了基于Debezium的CDC数据处理能力，这使得其可以直接将Debez ......
龙芯平台Hadoop集群搭建问题解决
这几天一直在困扰我 pycurl 版本和本机的版本不符合 他连接又连接的自己自带的版本 与系统不相同 低级也会报错 https://blog.csdn.net/u010910682/article/details/89496550/?ops_request_misc=&request_id=&biz ......
idea 创建maven项目出现 Cannot resolve plugin org.apache.maven.plugins:maven-jar-plugin:3.3.0
idea 创建maven项目出现 Cannot resolve plugin org.apache.maven.plugins:maven-jar-plugin:3.3.0 如下图所示： ![image](https://img2023.cnblogs.com/blog/3233016/202309 ......
Vue项目打包，部署到apache服务器
初学veu，实战项目上线服务器，查遍全网和问遍身边大佬，终于经过我不断地探索，上线成功啦，现在我就为大家梳理一下思路。首先，我们先看一下官网链接: Vue CLI部署.， 参数配置：publicPath. ， Vue Router：HTML5 History 模式 1、步骤1、项目配置2、打包项目， ......
Apache Doris集群部署
一、Doris部署环境及系统依赖 环境要求参考:https://doris.apache.org/zh-CN/docs/dev/install/standard-deployment 1.部署环境 2.系统依赖 1.Java环境 tar xf jdk-8u201-linux-x64.tar.gz - ......