大数据|如何在windows上搭建hadoop的客户端 windows客户端|hadoop

一般情况，hadoop是集群运行在Linux上作为服务端，我们想使用命令行访问集群，就需要登录hadoop-master机器使用 hadoop fs -* 命令访问，感觉这样操作有点麻烦，所以我们在本地的windows上搭建一个hadoop的客户端，使用cmd命令访问集群。

获取hadoop包

最简单的方式就是直接将master上的hadoop包下载到本地

文章图片

配置环境变量

# 新增 HADOOP_HOME=D:\tools\hadoop\hadoop-3.2.1# PATH后面追加 %HADOOP_HOME%\bin

文章图片

百度搜索关键字"winutils.exe"，自己下载，这里就不提供了。

文章图片

配置机器映射

很多情况情况下， Hadoop的配置文件都使用机器名代替IP，Linux节点只需要修改机器名 /etc/hostname 和 IP映射 /etc/hosts 就行。windows需要修改C:\Windows\System32\drivers\etc\hosts文件，新增如下映射就行

文章图片

第一列是机器IP，第二列是机器名
使用以下命令列出根目录下所有的文件、文件夹

hadoop fs -ls /

出现以下错误

The system cannot find the path specified. Error: JAVA_HOME is incorrectly set. Please update D:\tools\hadoop\hadoop-3.2.1\etc\hadoop\hadoop-env.cmd '-Xmx512m' is not recognized as an internal or external command, operable program or batch file.

文章图片

需要更新配置文件${HADOOP_HOME}/etc/hadoop/hadoop-env.cmd，配置JAVA_HOME

文章图片

因为JAVA_HOME路径里面出现了【空格】，所有用【双引号】引起来。
再使用上面命令行，成功

文章图片

【大数据|如何在windows上搭建hadoop的客户端】hadoop常用命令行可参考
https://blog.csdn.net/admin_15082037343/article/details/93304234

大数据|如何在windows上搭建hadoop的客户端

推荐阅读

海门大桥

胃癌|胃癌偏爱这4类人，若你在其中，做好这5点，或许能幸免！

王者荣耀下载最新版安卓，王者荣耀助手安卓版下载

电商怎么做粮油电商是什么意思，粮油是啥

弈星重塑啦！从围棋的对弈体验入手，天才少年的成长的关键词是：以身入局，____ 王者荣耀8月5日每日一题答案

安卓强制前台,手机回收模式下安卓应用如何继续在后台运行?

电脑调哪几个设置可以让电脑变快速度电脑调哪几个设置可以让电脑变快

老款5角硬币图片「新款5元硬币」

西瓜汁放冰箱可以保存多久

qqbot源码分析,nginx源码分析

梦见抱着男孩

雨隐村曾经有几位首领火影忍者手游10月28日每日一题答案

你看过最好看的美剧是什么？

php长数据发送 php传输数据的方式

行政处罚的种类包括人身罚行为罚财产罚和申诫罚行政处罚的种类

mysql批量查询语句 mysql查询批量替换

六月黄吃到什么时候

小森生活游戏介绍小森生活好玩吗

鸡丸的做法大全鸡丸怎么做

秦时明月世界怎么转职秦时明月世界转职业