hadoop apache org rpcnosuchprotocolexception
LINUX：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
如图，问题表现为linux中可直接通过hive进行数据插入 但在通过datagrip却更改不了 此时，可能时yarn的运行分配的内存较少，或堆内存溢出。在yarn-site.xml中更改，以及mapred-site.xml中更改，完成。 yarn的 <property> <name>yarn.sch ......
The name org.freedesktop.secrets was not provided by any .service files 报错问题
在搭建cicd docker 靶场的时候出现这个问题，由于是第一次遇到，就想记录下来 通过各种搜索资料搜索 发现只要安装如下包就没问题 1 apt -y install gnome-keyring 这样做之后，一切都可以 这样就可以了 ......
hadoop部署
mapred-site.xml <configuration><property> <name>mapreduce.framework.name</name> <value>yarn</value></property><property> <name>mapreduce.jobhistory.ad ......
hadoop HA高可用集群搭建
首先是四项配置 core-site.xml <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <!-- Licensed under the Apach ......
搭建Hadoop环境
搭建Hadoop环境 一、虚拟机的安装 二、 安装JDK 1.下载jdk wget https://download.java.net/openjdk/jdk8u41/ri/openjdk-8u41-b04-linux-x64-14_jan_2020.tar.gz 使用上述命令安装 2.执行以下命令 ......
报错：Invalid bound statement (not found): org.example.mapper.ZoneInfoMapper.getAll
错误 org.apache.ibatis.binding.BindingException: Invalid bound statement (not found): org.example.mapper.ZoneInfoMapper.getAll 解决方法 <resources> <resourc ......
Apache Hudi 使用指南
Apache Hudi(简称：Hudi)使得您能在hadoop兼容的存储之上存储大量数据，同时它还提供两种原语，使得除了经典的批处理之外，还可以在数据湖上进行流处理。 ......
Apache Doris 使用指南
欢迎参观我的博客，一个Vue 与 SpringBoot结合的产物：https://poetize.cn 博客：https://gitee.com/littledokey/poetize-vue2.git 聊天室：https://gitee.com/littledokey/poetize-im-vue ......
Error: Could not find or load main class org.apache.zookeeper.server.quorum.QuorumPeerMain
下载maven apache-maven-3.9.4-bin.tar.gz 解压 tar -zxvf apache-maven-3.9.4-bin.tar.gz 添加环境变量 vim /etc/profile export MAVEN_HOME=/usr/local/maven-3.9.4 expo ......
记一次springboot启动失败，org.springframework.beans.factory.BeanCreationException: Error creating bean
我的情况是，这个应用启动的java进程在系统中未结束掉导致的， 原进程仍存在，再次启动项目时报了org.springframework.beans.factory.BeanCreationException: Error creating bean 这个错，通过ps -ef|grep tomcat ......
phpstorm apache php xdebug调试超时设置
用phpstorm xdebug apache 调试php代码的时候 总是一分钟就超时。 修改配置文件解决1.php.ini 设置xdebug, 增加 # 超时时间改大一点 xdebug.remote_cookie_expire_time = 3600 max_execution_time=3600 ......
教程 | 使用 Apache SeaTunnel 同步本地文件到阿里云 OSS
一直以来，大数据量一直是爆炸性增长，每天几十 TB 的数据增量已经非常常见，但云存储相对来说还是不便宜的。众多云上的大数据用户特别希望可以非常简单快速的将文件移动到更实惠的 S3、OSS 上进行保存，这篇文章就来介绍如何使用 SeaTunnel 来进行到 OSS 的数据同步。 首先简要介绍一下 Ap ......
Hadoop介绍
一，Hadoop介绍 狭义上Hadoop指的是Apache软件基金会的一款开源软件，用java语言实现。允许用户使用简单的编程模型实现跨机器集群对海量数据进行分布式计算处理 Hadoop核心组件 Hadoop HDFS(分布式文件存储系统):解决海量数据存储 Hadoop YARN(集群资源管理和任 ......
Hadoop集群搭建(完全分布式)
一，Hadoop集群简介 1.1 Hadoop集群整体概述 Hadoop集群包括两个集群:HDFS集群、YARN集群 两个集群逻辑上分离、通常物理上在一起 两个集群都是标准的主从架构集群 Hadoop两种集群内容： 逻辑上分离，物理上合并的理解： 逻辑上分离：两个集群互相之间没有依赖、互不影响 物理 ......
org.apache.ibatis.binding.BindingException: Invalid bound statement (not found): com.example.dao.StudentDao.selectList问题的解决
问题描述 在我写好了后端代码之后，就一直启动不成功，爆出来这个错误，一直说什么，哪里哪里配置不行，哪里哪里没有注解，哪里哪里不一致等，我看了半天~ 问题解决 原来是这里： 之前我没有加RestControlller的注解 加上之后： 数据显示啦！ ......
spring boot错误之-Error (3, 32) java 程序包org springframework boot不存在
问题：spring boot错误之-Error (3, 32) java 程序包org springframework boot不存在 用IDEA创建spring boot，遇到上面的问题（我这里maven用的3.6.1版本） 解决方法：在Settings里面，Maven路径和settings.xm ......
Exception in thread "main" org.apache.ibatis.binding.BindingException: Invalid bound statement (not found)
我报错的原因很简单mapper的interface和xml文件名字不相同导致 我的问题以及对应的解决 1.查看mapper的接口和xml文件名字是否相同 更多解决办法： 【报错解决】org.apache.ibatis.binding.BindingException: Invalid bound s ......
hadoop和hive的兼容问题
本人之前搭建的集群是hadoop3.3.5+hive3.1.3版本，后来发现这两个版本不兼容，虽然官方文档里面说hive3.1.3版本兼容hadoop3.x.y版本，但是当我在使用hive 执行插入语句时发现一直报同一个错误 java.lang.ClassCastException: org.apa ......
解决：org.springframework.boot.context.properties.ConfigurationBeanFactoryMetadata
spring-boot-starter-parent 2.4.0版本以后去掉了ConfigurationBeanFactoryMetadata类 将 spring boot 版本到2.4 以下 ......
Linux轻松搭建网站：安装Apache服务攻略
在如今数字化时代，网站已成为企业宣传和信息传递的重要渠道。而Apache服务器则是众多网站服务中最为常用的一种。本文将详细介绍如何在Linux系统上安装Apache服务，帮助你轻松搭建自己的网站。 1.确认Linux版本 在开始安装Apache服务之前，需要确认你所使用的Linux版本。常见的Lin ......
centos apache 如何在CentOS操作系统上搭建ApacheWeb服务器？？
在今天的互联网时代sogou pinyin linux，Web服务器已经成为了企业和个人建立网站的重要基础设施之一。而在众多的Web服务器软件中，Apache绝对是最受欢迎和广泛使用的开源Web服务器之一。而在CentOS操作系统上搭建Apache服务器，不仅可以提供高效的性能和稳定性，还可以免费获 ......
关于Hadoop和hive启动关闭的一些命令
Hadoop启动/关闭：start-all.sh / stop-all.sh HDFS：start-dfs.sh / stop-dfs.sh YARN：start-yarn.sh / stop-yarn.shhive 启动metastore服务： 前台启动 /export/server/apache ......
Hadoop架构原理 hadoop 架构
Hadoop 1、Hadoop 2.0提供分布式存储（HDFS）和分布式操作系统（Yarn）两大功能软件包 2、Hadoop 1.0项目模块 Hadoop Common：支持其他模块的公用组件 Hadoop Distributed File System（HDFS）：Hadoop的分布式文件系统 H ......
Apache(2.4.49 2.4.50)--目录遍历--命令执行--(CVE-2021-42013)&&(CVE-2021-41773)
Apache(2.4.49 2.4.50)--目录遍历--命令执行--(CVE-2021-42013)&&(CVE-2021-41773) 复现环境 采用Vulfocus靶场环境进行复现，搭建操作和文章参考具体搭建教程参考vulfocus不能同步的解决方法/vulfocus同步失败。 漏洞简介 Ap ......
Apache Log4j Server CVE-2017-5645 反序列化命令执行漏洞
漏洞描述 攻击者可以通过发送一个特别制作的2进制payload，在组件将字节反序列化为对象时，触发并执行构造的payload代码。该漏洞主要是由于在处理ObjectInputStream时，接收函数对于不可靠来源的input没有过滤。可以通过给TcpSocketServer和UdpSocketSer ......
org.apache.cxf.interceptor.Fault: Could not send Message
// cxf调用方法public String callWebService(String WSDL, String medthod, String inXML) { JaxWsDynamicClientFactory clientFactory = JaxWsDynamicClientFactor ......
org/springframework/boot/maven/RepackageMojo has been compiled by a more recent version of the Java
项目场景：项目中执行clean，再执行install时报错，错误如下 org/springframework/boot/maven/RepackageMojo has been compiled by a more recent version of the Java Runtime (class ......
如何快速在 Apache DolphinScheduler 新扩展一个任务插件？
作者 | 代立冬 编辑 | Debra Chen Apache DolphinScheduler 是现代数据工作流编排平台，具有非常强大的可视化能力，DolphinScheduler 致力于使数据工程师、分析师、数据科学家等数据工作者都可以简单轻松地搭建各种数据工作流，让数据处理流程更简单可靠。 D ......
windows下安装和配置hadoop
1.安装hadoop 下载hadoop，下载地址： https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 建议不要下载最高版本，而是下载稳定版本，我下载的是3.2.3版本；将压缩包解压到安装目录，注意安装目录的路径中不要有空格； 我将h ......
hadoop权威指南
Hadoop权威指南 第1部分 Hadoop基础知识 第2章 关于MapReduce MapReduce分为两个阶段，map阶段和reduce阶段。map函数是数据准备阶段，它会准备好一个键值对的数据集合，然后交由reduce函数来处理，比如进行排序、分组、聚合等操作。 MapReduce处理示例， ......