小编Eun*_* Yu的帖子

容器运行超出虚拟内存限制

当我做rhadoop示例时,发生以下错误.

超出虚拟内存限制.当前用法:使用121.2 MB的1 GB物理内存; 2.1 GB的2.1 GB虚拟内存使用.杀死容器.

根据要求杀死容器.退出代码是143

容器以非零退出代码143退出

hadoop流式传输失败,错误代码为1

我该如何解决?

我的hadoop设置.

mapred-site.xml中

<configuration>
        <property>
                <name>mapreduce.framework.name</name>
                <value>yarn</value>
        </property>
</configuration>
Run Code Online (Sandbox Code Playgroud)

纱的site.xml

<configuration>

<!-- Site specific YARN configuration properties -->
        <property>
                <name>yarn.nodemanager.aux-services</name>
                <value>mapreduce_shuffle</value>
        </property>
        <property>
                <name>yarn.nodemanager.aux-services.mapreduce_shuffle.class</name>
                <value>org.apache.hadoop.mapred.ShuffleHandler</value>
        </property>
        <property>
                <name>yarn.nodemanager.local-dirs</name>
                <value>/usr/local/hadoop-2.7.3/data/yarn/nm-local-dir</value>
        </property>
        <property>
                <name>yarn.resourcemanager.fs.state-store.uri</name>
                <value>/usr/local/hadoop-2.7.3/data/yarn/system/rmstore</value>
        </property>
        <property>
                <name>yarn.resourcemanager.hostname</name>
                <value>localhost</value>
        </property>
        <property>
                <name>yarn.web-proxy.address</name>
                <value>0.0.0.0:8089</value>
        </property>
</configuration>
Run Code Online (Sandbox Code Playgroud)

hadoop r rstudio rstudio-server rhadoop

6
推荐指数
2
解决办法
6370
查看次数

hadoop 中 namenode 未格式化

在普通账户中。

\n\n

我创建了一些目录。

\n\n
/usr/local/hadoop-2.7.3/data/dfs/namenode\n/usr/local/hadoop-2.7.3/data/dfs/namesecondary\n/usr/local/hadoop-2.7.3/data/dfs/datanode\n/usr/local/hadoop-2.7.3/data/yarn/nm-local-dir\n/usr/local/hadoop-2.7.3/data/yarn/system/rmstore\n
Run Code Online (Sandbox Code Playgroud)\n\n

并输入一些命令

\n\n
bin/hdfs namenode \xe2\x80\x93format\nsudo sbin/start-all.sh\njps\n
Run Code Online (Sandbox Code Playgroud)\n\n

然后

\n\n

在普通帐户中,我只能看到 jps。

\n\n

在 root 帐户中,我可以看到 Jps、DataNode、SecondaryNameNode、NodeManager 和 ResourceManager。

\n\n

我有 2 个问题。

\n\n
    \n
  1. 为什么普通账户只能看到jps?
  2. \n
  3. 为什么namenode没有启动?
  4. \n
\n\n

感谢您的阅读。\n如果您帮助我,我将不胜感激。

\n\n

名称节点日志文件

\n\n

\r\n
\r\n
/usr/local/hadoop-2.7.3/data/dfs/namenode\n/usr/local/hadoop-2.7.3/data/dfs/namesecondary\n/usr/local/hadoop-2.7.3/data/dfs/datanode\n/usr/local/hadoop-2.7.3/data/yarn/nm-local-dir\n/usr/local/hadoop-2.7.3/data/yarn/system/rmstore\n
Run Code Online (Sandbox Code Playgroud)\r\n
\r\n
\r\n

\n

installation hadoop

5
推荐指数
1
解决办法
7951
查看次数

标签 统计

hadoop ×2

installation ×1

r ×1

rhadoop ×1

rstudio ×1

rstudio-server ×1