节点 下线 副本hadoop
两台实体机器4个虚拟机节点的Hadoop集群搭建（Ubuntu版）
安装Ubuntu Linux元信息 两台机器，每台机器两台Ubuntu Ubuntu版本：ubuntu-22.04.3-desktop-amd64.iso 处理器数量2，每个处理器的核心数量2，总处理器核心数量4 单个虚拟机内存8192MB（8G），最大磁盘大小30G 参考链接 清华大学开源软件镜像 ......
k8s-节点标签label
查看节点标签信息： kubectl get node --show-labels 设置节点标签信息： kubectl label node 节点名 标签值 kubectl label node node2 region=huanai zone=A env=test bussiness=game 显示 ......
02、NATS单节点部署
接下来，我们一起看看如何部署一个单节点的 nats 服务器，这样后续学习 nats 的功能和特性的时候，会更加的清晰，那我们一起看看如何部署单节点的nats服务，后面在学习如何部署集群版的 nats。 1、二进制方式部署 先说下这里使用的环境是： cat /etc/centos-release Ce ......
报错Failed to execute spark task, with exception 'org.apache.hadoop.hive.ql.metadata.HiveException(Failed to create Spark client for Spark session 768047b9-c7f7-459f-9220-5d8d7bdabefe)
在执行hive on spark的时候 上面的错误可能有以下几种问题： 1.版本问题 不匹配 2.时间参数问题 设置的参数太小了 3.在hive-site.xml文件中没有配置spark 的home 我的问题属于第一个问题导致没有跑成功 当时也在想是不是内存出现了问题 ......
linux创建及删除文件节点的命令
1.手动创建文件节点的命令(mknod)： 命令 文件目录&名称 文件类型 主设备号 次设备号 mknod /xxx/xx c 120 1 2.手动删除文件节点的命令(rm)： 命令 文件目录&名称 rm /xxx/xx from: https://blog.csdn.net/wanzhilin88 ......
SpringCloudAlibaba Seata在Openfeign跨节点环境出现全局事务Xid失效原因底层探究
原创/朱季谦 曾经在SpringCloudAlibaba的Seata分布式事务搭建过程中，跨节点通过openfeign调用不同服务时，发现全局事务XID在当前节点也就是TM处，是正常能通过RootContext.getXID()获取到分布式全局事务XID的，但在下游节点就出现获取为NULL的情况，导 ......
hadoop集群 大数据项目实战_电信用户行为分析_day04
进行HIVE环境配置 1.上传相关的包 2.对上传的包进行下载和创建软连接 3.配置相关的文件 4.分别发送给其他机子 假设你需要在所有机器执行同一个指令，则你就需要相关设置 5.在hive的onf文件中创建hive-site.xml进行相关设置 ```xml<configuration> <-- ......
hadoop官方文档解读
Hadoop是一个分布式计算框架，用于存储和处理大规模数据集。 首先搞清楚为什么需要使用Hadoop Hadoop进行数据处理可以充分利用分布式计算和存储的优势，适用于大规模数据的批处理和分布式计算场景。 裸机上进行数据处理则更适合小规模数据或需要实时处理的场景。 在裸机上进行数据处理和使用Hado ......
卷影副本（Volume Shadow Copy）是Windows操作系统提供的一项备份和恢复功能。它允许在文件被修改或删除之前，创建文件或文件夹的副本，以便在需要时进行数据的还原和恢复。卷影副本主要有以下作用和优势
卷影副本（Volume Shadow Copy）是Windows操作系统提供的一项备份和恢复功能。它允许在文件被修改或删除之前，创建文件或文件夹的副本，以便在需要时进行数据的还原和恢复。 卷影副本主要有以下作用和优势： 数据保护和恢复能力： 卷影副本可以保护用户的数据免受意外的文件修改、删除和损坏。 ......
Hadoop 1
hadoop 的核心架构：包括hdfs 和 mapReduce, HDFS 为海量数据提供了存储，而MapReduce 为海量数据提供了计算框架。 HBase：实时分布式数据库，MapReduce：分布式计算框架，HDFS：分布式文件系统。 HDFS中包含三个重要角色： NameNode, Data ......
修改新加节点，重新协调分片速度的配置
PUT _cluster/settings { "transient" : { "cluster.routing.allocation.node_concurrent_recoveries":4, "cluster.routing.allocation.cluster_concurrent_reba ......
hadoop集群 大数据项目实战_电信用户行为分析_day03
配置系统环境 Reis 1.先把之前的dump.rdb删除掉 rm -rf dump.rdb 2.把原始项目给的dump.rdb 放进来，它里面包含了需要的数据，比如端口；在这部之前必须要进行关闭端口，随后传送文件，最后重启端口 相关指令: bin/redis-server conf/redis.c ......
修改串口节点名称
需求：3368的老主板更换为3568的新主板，为了app兼容两款主板，要求串口号一致。有个ttyS0的口，需要对应改为ttySWK0 跟踪驱动代码： dw8250_probe(drivers\tty\serial\8250\8250_dw.c) -->serial8250_register_8250 ......
节点安装Java 1.8
上传jdk-8u361-linux-x64.tar.gz 以下命令安装在node1上 解压 tar -zxvf jdk-8u361-linux-x64.tar.gz -C /export/server/ 配置软连接 (快捷方式) ln -s /export/server/jdk1.8.0_361/ ......
kubeadm 加入work 节点集群时报 http://localhost:10248/healthz处理方法
现象: [kubelet-check] The HTTP call equal to 'curl -sSL http://localhost:10248/healthz' failed with error: Get "http://localhost:10248/healthz": dial tc ......
Base虚拟机克隆集群节点,并固定IP与免密互通
克隆Base虚拟机 先把Base关机,然后右键 - 管理 - 克隆 选择完整克隆 克隆名字这里叫node1 重复步骤,克隆node2/node3 为了分类,创建了一个大数据集群文件夹 以下命令全是root权限执行 配置固定IP # 修改主机名 hostnamectl set-hostname nod ......
Leetcode24. 两两交换链表中的节点
题目描述 给你一个链表，两两交换其中相邻的节点，并返回交换后链表的头节点。你必须在不修改节点内部的值的情况下完成本题（即，只能进行节点交换）。 示例 提交的代码 class Solution { ListNode nextNode; public ListNode swapPairs(ListNod ......
代码随想训练营第四天（Python）｜ 24. 两两交换链表中的节点、19.删除链表的倒数第N个节点、02.07. 链表相交、142.环形链表II
两两交换链表中的节点 关键点：涉及到头节点变动的都使用虚拟节点。画图找出交换节点指向的顺序和退出循环的条件。 1、迭代法 class Solution: def swapPairs(self, head: Optional[ListNode]) -> Optional[ListNode]: dumm ......
k8s 1.26.4的安装步骤（使用kubeadm安装master+1节点） ——( centos7.9，cri-dockerd插件)
一：系统环境初始化（所有节点都需要操作）1.配置服务器时间保持一致yum -y install ntpdatentpdate ntp1.aliyun.com 添加定时同步 每天凌晨0点自动同步时间echo "0 0 * * * ntpdate ntp1.aliyun.com" >> /var/spo ......
倾斜摄影三维模型的根节点合并的重要性分析
三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作，从而实现三维模型轻量化。轻量化压缩比大，模型轻量化效率高，自动化处理能力高；采用多种算法对三维模型进行几何精纠正处理，精度高，... ......
基于LEACH路由协议的网络性能matlab仿真,包括数据量,能耗,存活节点
LEACH的原理在于它将传感器节点分为两类：簇头节点和普通节点。普通节点将数据发送给距离自己最近的簇头节点，然后簇头节点将收集到的数据融合后发送给基站。这种机制可以减少网络中节点的能耗，并且能够提高数据融合比例，减少传输数据量。本课题将分别对比leach协议在不同初始能量，不同数据包长度，以及不同控... ......
用友U8预览不了凭证，打印凭证提示运行错误429，ACTIVEX部件不能创建对象 填制凭证，点击节点时报错，运行时错误‘429’
软件版本：U8 12.5 问题： 预览不了凭证，打印凭证提示运行错误429，ACTIVEX部件不能创建对象 填制凭证，点击节点时报错，运行时错误‘429’ 切换选项 总账-设置-选项-账簿页签 切换凭证套打勾选项 取消勾选打印设置按客户端保存 切换使用新打印控件打印 修改纸张 总账-凭证打印-设置 ......
【DFS】129. 求根节点到叶子结点的和
链接 https://leetcode.cn/problems/sum-root-to-leaf-numbers/description/ 思路 时刻记住，DFS是递归的一种。而解决递归，最朴素的思路就是：递归的定义就是递归的解。 题目要求我们求根节点到叶子结点的和，我们要提供一个值保持其状态，退出 ......
hadoop集群 大数据项目实战_电信用户行为分析_day02
集群配置好后，运行一个小例子，统计单词 1.hdfs dfs -put 将本地系统的文件或文件夹复制到HDFS上 2.hdfs dfs -ls /output 将所有的文件显示出来 3.hdfs dfs -cat /output/ 将所有的文件读取出来 下载part-r-000000 安装Redis ......
Hadoop-3.3.5 自动安装
Hadoop-3.3.5 自动安装脚本 为了方便数据科学与大数据技术的 hadoop-3.3.5 安装与配置 目前适用于新安装的纯净虚拟机，未配置冲突检测.. 所以安装的话请使用全新创建的机器以避免错误... 如何使用 ssh localhost 输入你目前用户的密码 exit 退出当前ssh终端（ ......
hadoop集群 大数据项目实战_电信用户行为分析_day01
上图是相关配置的要求，主要创建了四个虚拟系统，有三台虚拟机搭建hadoop集群，一台作为业务系统。 涉及到相关的Linux指令有::set nu[显示行号] :6[到第6行 shift+G跳到最后一行 进入vi指令后查找相关东西/(你需要查找的东西) 1.配置环境、 第一步设置网络参数，设置静态网络 ......
基于Docker搭建Hadoop+Hive
基于Docker搭建Hadoop+Hive 本文主要是照搬这篇文章的https://zhuanlan.zhihu.com/p/242658224，但是这篇文章有一些细节配置没有讲清楚，这里对其进行完善 零、环境信息 电脑配置 Ubuntu 20.04.6 LTS (Focal Fossa) 5.15 ......
关于FISCO-BCOS如何进行节点扩容并添加到群组
本节假设已经参照搭建第一个区块链网络搭建了一条n节点的联盟链，接下来的操作将生成一个新的节点，然后将节点加入群组1。 🥇为新节点生成私钥证书 接下来的操作都在nodes/127.0.0.1目录下进行 获取证书生成脚本 curl -#LO https://gitee.com/FISCO-BCOS/F ......
Hadoop-Operation category READ is not supported in state standby 故障解决
在查询hdfs时或者执行程序向hdfs写入数据时遇到报错：Operation category READ is not supported in state standby 意思是：该主机状态为待机,不支持操作类别READ. 你会发现最基本的hdfs命令都不能执行，例如：hadoop fs -ls ......
Hadoop2伪分布式安装
最近有观看我主讲的《Hadoop基础与演练》课程的同学问到Hadoop环境到底应该怎么安装。Hadoop的安装其实非常的简单，网上有很多教程，官网也有示例。但是可能部分同学对于linux不太熟悉，导致安装的时候会遇到各种问题，打击学习激情。本文就来详细的讲解一下如何配置Hadoop2的伪分布式环境， ......