nosuchelementexception quot mapreduce hadoop
JSON parse error: Unexpected character ('}' (code ***)): was expecting double-quote to start field
JSON parse error: Unexpected character ('}' (code 125)): was expecting double-quote to start field name] 出现这个错误是因为请求 { "equipmentid": "123", "equipmen ......
[已解决] bindkey在"~/.zshrc"配置不工作
bindkey is not work in "~/.zshrc" 打算用bindkey来配置autocomplete，结果不工作。只有当进入shell后再次source ~/.zshrc才有效果 找问题找了老半天，最后发现就是zsh-vi-mode搞出的名堂，它会重新bindkey导致先前绑定的会 ......
华为云耀云服务器L实例-大数据学习-MapReduce&Yarn的实操
华为云耀云服务器L实例-大数据学习-MapReduce&Yarn的实操 产品官网：https://www.huaweicloud.com/product/hecs-light.html 今天我们采用可靠更安全、智能不卡顿、价优随心用、上手更简单、管理特省心的华为云耀云服务器L实例为例，继续介绍Map ......
华为云耀云服务器L实例-大数据学习-MapReduce&Yarn的部署
华为云耀云服务器L实例-大数据学习-MapReduce&Yarn的部署 产品官网：https://www.huaweicloud.com/product/hecs-light.html 今天我们采用可靠更安全、智能不卡顿、价优随心用、上手更简单、管理特省心的华为云耀云服务器L实例为例，介绍MapRe ......
华为云耀云服务器L实例-大数据学习-hadoop前置准备2-JDK环境部署
华为云耀云服务器L实例-大数据学习-hadoop前置准备2-JDK环境部署 产品官网：https://www.huaweicloud.com/product/hecs-light.html 今天我们采用可靠更安全、智能不卡顿、价优随心用、上手更简单、管理特省心的华为云耀云服务器L实例为例，演示单台服 ......
华为云耀云服务器L实例-大数据学习-hadoop前置准备1-主机名映射与SSH免密登录
华为云耀云服务器L实例-大数据学习-hadoop前置准备1-主机名映射与SSH免密登录 产品官网：https://www.huaweicloud.com/product/hecs-light.html 今天我们采用可靠更安全、智能不卡顿、价优随心用、上手更简单、管理特省心的华为云耀云服务器L实例为例 ......
华为云耀云服务器L实例-大数据学习-hadoop前置准备3-防火墙、 SElinux 、时间同步等系统设置
华为云耀云服务器L实例-大数据学习-hadoop前置准备3-防火墙、 SElinux 、时间同步等系统设置 产品官网：https://www.huaweicloud.com/product/hecs-light.html 今天我们采用可靠更安全、智能不卡顿、价优随心用、上手更简单、管理特省心的华为云 ......
华为云耀云服务器L实例-大数据学习-单台服务器配置伪分布式模式hadoop集群
华为云耀云服务器L实例-大数据学习-单台服务器配置伪分布式模式hadoop集群 产品官网：https://www.huaweicloud.com/product/hecs-light.html 今天我们采用可靠更安全、智能不卡顿、价优随心用、上手更简单、管理特省心的华为云耀云服务器L实例为例，演示单 ......
Vite + ESBuild error: No loader is configured for ".node" files: node_modules/fsevents/fsevents.node
Vite + ESBuild error: No loader is configured for ".node" files: node_modules/fsevents/fsevents.node Add fsevents to your optimizeDeps exclude in your ......
python json.dump 将字典写文件json文件后多了一个花括号"}",读取时报错：json.decoder.JSONDecodeError: Extra data: line
我的字典格式： import json d = {'Demo': {'Total_Result': 'Pass', 'info': {'test3': 'Pass'}}, '10.0.0.111': {'Total_Result': 'Pass', 'info': {'test_double_dis ......
解决psql: error: connection to server on socket "/var/run/postgresql/.s.PGSQL.5432" failed: No such file or directory Is the server running locally and accepting connections on that socket?
pgsql启动后执行psql显示报错： psql: error: connection to server on socket "/var/run/postgresql/.s.PGSQL.5432" failed: No such file or directory Is the server ru ......
【随手记录】Apache-JMeter部署银河麒麟报错： jmeter module java.desktop does not "opens sun.awt.X11" to unnamed module @5...
操作系统： Linux 0012.novalocal 4.19.90-17.ky10.aarch64 #1 SMP Sun Jun 28 14:27:40 CST 2020 aarch64 aarch64 aarch64 GNU/Linux JDK版本： java 17.0.8 2023-07-18 ......
Failed to convert value of type 'java.lang.String' to required type 'java.lang.Long'; nested exception is java.lang.NumberFormatException: For input string: "getSysTenantNames"
我测试的是一个接口 接口里面没有任何参数 怎么会报参数类型转换错误呢 mad !!!!! 第二个接口 就很蒙 测了好久都是这个问题 而且你打debug 它不进这个接口并且 你执行其他写好的接口 它还是会报同样的错 。。。。。。。。。。。。。。 其实就是你代码的位置写错了 应该写在pc端的 你把代码写 ......
无效设置IPv4设置：ipv4.gateway：网关与"never-default"不兼容
无效设置IPv4设置：ipv4.gateway：网关与"never-default"不兼容 一、问题现象 电脑采用麒麟桌面操作系统V10，在配置完静态IP时，“保存”按钮是灰色的，提示：无效设置IPv4设置：ipv4.gateway：网关与"never-default"不兼容 二、问题原因 禁止添加 ......
K8s中下线Hadoop节点（节点下线，调整副本数）
K8s中下线Hadoop节点（节点下线，调整副本数） 将Hadoop从三副本修改为双副本，同时修改datanode和nodemanager节点数为2 修改hadoop节点副本数和datanode以及yarn nodemanager节点数： hadoop.hdfs.replication=2 hado ......
字符串中string str=null和string str=""和string str=string.Empty的区别
string.Empty相当于“”,Empty是一个静态只读的字段。 string str="" ,初始化对象，并分配一个空字符串的内存空间 string str=null,初始化对象，不会分配内存空间 ......
hadoop配置
基础准备 sudo apt install ssh pdsh # 安装 ssh sudo apt install openjdk-8-jdk # 安装 jdk8 在.bashrc文件中添加： export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 ......
【HMS Core】{"sub_error":20003,"error_description":"parameter invalid","error":1101}
【问题描述】 离线推送服务端报错 {"sub_error":20003,"error_description":"parameter invalid","error":1101} 【解决方案】 错误码1101代表是client_id在系统中不存在，需要检查一下APPID是否配置正确 ......
关于启动JFinal时出现Exception in thread "main" java.lang.NoClassDefFoundError: com/jfinal/server/jetty/ServerFactory
报错—— 因为进行了多次改动，并不清楚到底是哪个改动引起的所以干脆写下了所有要注意的点—— 1.在通过idea运行JFinal时要将最后一位的数字改成0 JFinal.start("src/main/webapp", 8080, "/",0); 2.注意jetty-server的版本，我最开始的版本 ......
SSM 框架中 Form表单提交 通过request.getParameter("属性名") 获取的结果为null
今日换机器引入项目源码之后，项目中表单提交到后台，获取不到参数值 前台代码大致如下 <form action="/login" method="post" name="loginForm" id="loginForm"> <div style="width: 382px; height: 376px ......
hadoop数据迁移
使用Distcp进行Hadoop数据迁移 DispCP官方文档 在进行数据迁移前确认数据量大小和数据文件数,源端和目的端都需要确认： hdfs dfs -count / 59790 7008 22875716090 / 59790：表示目录 / 下的文件总数，即包括目录和文件在内的所有对象的数量。 ......
MySql的information_schema.processlist库学习之"如何检测出大数据sql查询"
1.如何通过MySql检测出大数据sql查询 一般数据库都会存在：information_schema数据库 检测出大数据sql查询[time时间越长说明，数据量越大，要根据公司的限度来衡量，我的思路是500以上都要查看是否是大数据的范畴] 2.案例 -- 检测出大数据sql查询[time时间越长说 ......
jumpserver连接ecs实例报错：UNREACHABLE! => {"changed": false, "msg": "Failed to connect to the host via ssh: ssh_exchange_identification: Connection closed by remote host", "unreachable": true
报错分析思路： 1.是ssh密钥设置有没有对接 2.防火墙拦截问题 3.用户设置问题 4.sshd配置问题 问题解决： 无法与221.229.216.39端口35846进行协商：找不到匹配的主机密钥类型。他们提供的是：ssh-rsa、ssh-dss [preauth] 在sshd配置中加上ssh-r ......
2023"安洵杯"第六届网络安全挑战赛-Misc WP
dacongのsecret 题目 我的解答： 题目给出一张png图片和一个加密压缩包，压缩包里面还存在另一张jpg图片 看名字就知道是盲水印。由于压缩包里的图片提不出来，因此是单图盲水印，我们使用工具得密码 d@C0ng 1s cUt3!!! 解压得到另一张图片，010分析一下得到一串字符 一眼丁真 ......
spring：Exception in thread "main" java.lang.NoClassDefFoundError: org/springframework/core/metrics/ApplicationStartup
设置了父类框架 <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>2.1.10.RELEASE</version> <re ......
spring：Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/commons/logging/LogFactory”
Java运行时环境中找不到org.apache.commons.logging.LogFactory这个类。 在maven中导入依赖即可 <dependency> <groupId>commons-logging</groupId> <artifactId>commons-logging</arti ......
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
001、报错记录 合并gvcf使用脚本如下： gatk CombineGVCFs -R GCF_001704415.2_ARS1.2_genomic.fna --variant gvcf.list -O test.g.vcf.gz 报错如下： 002、解决方法，设置内存上限可以解决上述报错： gat ......
Hadoop YARN Cgroups 资源隔离讲解
目录一、概述二、Hadoop 环境准备三、内存资源限制四、CPU 资源限制1）启用 LCE2）启用 CGroup3）配置 Yarn CGroup 目录3）CPU 资源限制 一、概述 Hadoop YARN (Yet Another Resource Negotiator) 使用 Cgroups（Co ......
Hadoop集群迁移(元数据及HDFS数据）
1.背景 老集群采用的腾讯emr集群，使用过程中磁盘扩容成本费用高且开源组件兼容性存在问题，因此决定采用自建hadoop集群，需要将emr的元数据和hdfs基础数据迁移过来。 EMR版本：3.1.2 自建Hadoop版本：3.1.3 2.集群迁移步骤 2.1 数据迁移 nohup hadoop di ......
SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder"
自动化框架中，从返回的json字符串中获取值，需要用jsonpath <!-- https://mvnrepository.com/artifact/com.jayway.jsonpath/json-path --> <dependency> <groupId>com.jayway.jsonpath ......