我正在 hadoop 中运行一个火花流作业。这台机器被 Kerberized 并且它运行了 42 小时并且由于 HDFS 令牌授权到期而失败。
我什至为 kinit 命令设置了 crontab，该命令每 8 小时运行一次，并且我拥有 10 小时的 Max-renew 生命周期令牌。
由于错误而失败：org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.token.SecretManager$InvalidToken): token (HDFS_DELEGATION_TOKEN token
在启动它时，我也在命令行中使用原则运行该作业。