Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

旧城等待, 2023-10-06 23:26 132阅读 0赞

在windows系统本地运行spark的wordcount程序,会出现一个异常,但不影响现有程序运行。

在这里插入图片描述
发现是因为在Windows环境中缺少winutils.exe程序。
因为一般情况下Hadoop、spark都是运行在Linux系统下的,在windows下运行时需要安装Windows下运行的支持插件:hadoop2.7-common-bin。

原因分析 :https://www.cnblogs.com/tijun/p/7567664.html

解决办法

1、下载spark 依赖对应的hadoop版本,我的spark版本是3.0 对应的 hadoop选择 3.0.0即可。
http://hadoop.apache.org/releases.html

2.解压配置环境变量
在这里插入图片描述
在这里插入图片描述

下载地址:https://github.com/cdarlint/winutils
下载对应的版本这两个文件,放到hadoop 的bin 目录下。
在这里插入图片描述
如图:
在这里插入图片描述
bingo,问题解决!

发表评论

表情:
评论列表 (有 0 条评论,132人围观)

还没有评论,来说两句吧...

相关阅读