小编Vij*_*and的帖子

仅具有主节点和任务节点的AWS EMR

当我确定源数据在S3中并且处理后的结果将存储在S3中时,是否可以构建一个具有主节点和一组任务(从属)节点(不包含核心节点)的AWS EMR。

基本上,问题是“当EMR将在S3中处理数据时,需要有Datanode处理什么”(在HD3中我们不存储和使用任何东西)。

emr

5
推荐指数
1
解决办法
565
查看次数

如何获取HBASE中处于FAILED_OPEN状态的区域?

Hbase hbck 运行成功,没有不一致的情况,但有 3 个区域处于过渡状态(3 个区域中有 2 个处于 CLOSED 状态,1 个处于 FAILED_OPEN)状态。(所有三个区域都是一个表的一部分)

由于 HBASE 处于一致状态,因此 Hbase 操作没有问题,但由于区域处于过渡状态,因此我无法运行平衡器。

如何从过渡中删除/移动这些区域。

在发布这个问题之前我尝试了以下命令。

hbase hbck <Table_Name>
hbase hack -fix <Table_Name>
hbase hack -repair <Table_Name>
hbase hbck -fixHdfsHoles -fixHdfsOrphans <Table_Name>
Run Code Online (Sandbox Code Playgroud)

这些地区名称也没有目录

enter code here
 hdfs dfs -ls /hbase/data/default/<Table_name> | grep de0efd872dc4b3dca6929213f4fbe582
 hdfs dfs -ls /hbase/data/default/<Table_name> | grep ab6a101fb92de7150562664ca841ac0d
 hdfs dfs -ls /hbase/data/default/<Table_name> | grep 068a2b30ada2b9a2958b3815b7f32dfc
Run Code Online (Sandbox Code Playgroud)

hbase

5
推荐指数
1
解决办法
4208
查看次数

标签 统计

emr ×1

hbase ×1