java - 尝试以myuser身份运行作业时，权限被拒绝，但错误提示root用户没有足够的权限

我正在尝试使Hadoop MapReduce正常工作，但始终面临访问问题。
我不确定是什么问题，无论是配置还是其他问题。

例如，当我跑步时，这个字数



我收到以下错误:

14/09/10 20:15:51 INFO input.FileInputFormat: Total input paths to process : 1
14/09/10 20:15:51 INFO mapred.JobClient: Running job: job_201409101946_0010
14/09/10 20:15:52 INFO mapred.JobClient:  map 0% reduce 0%
14/09/10 20:15:52 INFO mapred.JobClient: Task Id : attempt_201409101946_0010_m_000002_0,         Status : FAILED
Error initializing attempt_201409101946_0010_m_000002_0:
org.apache.hadoop.security.AccessControlException:
org.apache.hadoop.security.AccessControlException: Permission denied: user=root,
access=EXECUTE, inode="job_201409101946_0010":hadoop:supergroup:rwx------
at sun.reflect.GeneratedConstructorAccessor7.newInstance(Unknown Source)
...

显然，user = root无法访问用户hadoop拥有的目录。但是问题是我以我的用户身份运行该作业，而且我不确定为什么根本涉及root用户。您知道什么可能导致此问题吗？

最佳答案

首先，/user/myuser/应该是HDFS上的路径，而不是本地路径。然后，它需要存在，因此，如果不存在，请运行:
hadoop dfs -mkdir /user/myuser/然后hadoop dfs -chown myuser:groopOfMyuser /user/myuser/，其中groupOfMyuser是myuser所属的组。

要检查它是否存在，请运行:hadoop dfs -ls /user/
然后，要将文件上传到HDFS的输入目录，请使用以下命令:
hadoop dfs -copyFromLocal /local/path/input.txt /user/myuser/
请注意，输入和输出路径应该是目录(在HDFS上)，而不是文件。因此，运行程序的正确命令将是:
hadoop jar /usr/share/hadoop/hadoop-examples-1.2.1.jar wordcount /user/myuser /user/myuser/output
最后，检查hadoop dirs($HADOOP_HOME)是否由myuser或hadoop或其他任何人拥有，并以拥有jar的人的身份运行这些jar，或者使用chown更改其所有权。

(假设您使用的是旧API，但是您也可以轻松地在新API中找到等效的命令。)

关于java - 尝试以myuser身份运行作业时，权限被拒绝，但错误提示root用户没有足够的权限，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/25777158/