我怎么知道nodetool修复是否完成

Question

我有一个2节点的apache cassandra(2.0.3)集群,其rep因子为1.我在cqlsh中使用以下命令将rep因子更改为2

ALTER KEYSPACE "mykeyspace" WITH REPLICATION =   { 'class' : 'SimpleStrategy', 'replication_factor' : 2 };

然后我尝试在执行此类alter之后运行推荐的"nodetool repair".

问题是这个命令有时会很快完成.当它完成时,通常会说"丢失通知......"并且退出代码不为零.

所以我只重复这个'nodetool repair'直到它完成没有错误.我还检查'nodetool status'是否报告了每个节点的预期磁盘空间.(使用rep因子1,每个节点都说大约7GB,我希望在nodetool修复之后每个节点都是14GB,假设平均时间没有集群使用)

在这种情况下,是否有更正确的方法来确定'nodetool repair'已完成？

Answer 1

一般来说,您可以nodetool repair使用两个nodetool命令监视操作:

• compactionstats
• netstats

修复操作有两个不同的阶段.首先,它计算节点之间的差异(要完成的修复工作),然后通过将数据流式传输到适当的节点来处理这些差异.

这将检查活动的Merkle Tree计算:

$ nodetool compactionstats
pending tasks: 0
Active compaction remaining time :        n/a

修复流可以通过以下方式监控:

$ nodetool netstats

实际上,TheLastPickle的Aaron Morton建议使用以下Bash脚本/命令来监视任何活动的修复流:

while true; do date; diff <(nodetool -h localhost netstats) <(sleep 5 && nodetool -h localhost netstats); done

DataStax在他们的支持论坛上发布了关于悬挂维修故障的帖子.如果你有任何挂起的修复流,你应该能够看到它们netstats.如果您的某个节点在修复过程中变得不可用,则会发生这种情况.要监视特定的修复操作,可以检查日志文件中是否有以下条目:

DEBUG [WRITE-/172.30.77.197] 2013-05-03 12:43:09,107 OutboundTcpConnection.java(第165行)错误写入/172.30.77.197 java.net.SocketException:连接重置

请注意,修复会话也应在system.log中表示:

[repair #02fc68f0-210c-11e7-aa88-c35a9a02c19a] Starting...

[repair #02fc68f0-210c-11e7-aa88-c35a9a02c19a] Completed...

Answer 2

当您启动修复命令时，可以使用选项 --trace 监视修复流：

nodetool repair --trace <key_space> <table>