idea安装bigdata tool 插件 HDFS客户端

发布时间 2023-08-23 12:45:22作者: 伽澄

在idea里面下载bigdata tool插件 使用hdfs客户端

一、下载hadoop安装包,并将文件解压

二、在idea的插件里面找到 bbigdata tool插件并进行安装

 如果在idea里面下载比较慢,可以在官网下载 Big Data Tools - IntelliJ IDEs Plugin | Marketplace (jetbrains.com) 在idea设置里面选择从磁盘安装插件

 

三、配置环境

在windows系统中配置环境变量

 变量名:HADOOP_HOME

变量值:下载的hadoop解压后地址

四、下载hadoop.dill和winutils.exe文件,将文件放到hadoop文件下的bin目录中

 五、重启idea 点击右侧的bigdata tool ,选择HDFS 进行配置

对下载后的hadoop文件夹中的文件按照之前部署HDFS的模式重新部署文件

hadoop的权限修改

每次更改文件,可能都需要以root用户登录,或伪装成root用户,这样比较麻烦

这个可以配置,在hdfs-site.xml来配置:

属性值改成false即可

<property>
<name>dfs.permissions</name>
<value>false</value>
</property>