Kubernetes 中是否有一个活性探针可以捕获 python 容器何时冻结？

Question

我有一个运行无限循环的 python 程序，但是，每隔一段时间代码就会冻结。没有出现任何错误或任何其他消息来提醒我出现问题。我想知道 Kubernetes 是否有任何活性探针可以帮助捕获代码何时冻结，以便它可以杀死并重新启动该容器。

我有一个想法，让 python 代码在每次完成循环时生成一个定期日志。这样我就可以让活性探针每 30 秒左右检查一次日志文件，以查看文件是否已更新。如果在指定的时间后文件尚未更新，则假定程序冻结并且容器被终止并重新启动。

我目前正在使用以下 python 代码进行测试：

#Libraries
import logging
import random as r
from time import sleep

#Global Veriables
FREEZE_TIME = 60


'''Starts an infinate loop that has a 10% chance of 
freezing...........................................'''
def main():
    #Create .log file to hold logged info.
    logging.basicConfig(filename="freeze.log", level=logging.INFO)

    #Start infinate loop
    while True:
        freeze = r.randint(1, 10) #10% chance of freezing.
        sleep(2)
        logging.info('Running infinate loop...')
        print("Running infinate loop...")

        #Simulate a freeze.
        if freeze == 1:
            print(f"Simulating freeze for {FREEZE_TIME} sec.")
            sleep(FREEZE_TIME)


#Start code with main()
if __name__ == "__main__":
    main()

如果有人能告诉我如何实现这个日志想法或者是否有更好的方法来做到这一点，我将不胜感激！我目前正在 Windows 10 的 Docker-Desktop 上使用 Kubernetes，如果这有什么区别的话。另外，我对此还很陌生，所以如果你能将你的答案保持在“Kubernetes 傻瓜”级别，我将不胜感激。

Answer 1

Kubernetes 中活跃度探测的常见方法是访问 HTTP 端点（如果应用程序有它）。Kubernetes 检查响应状态代码是否属于 200-399 范围（=成功）或不属于（=失败）。运行 HTTP 服务器不是强制性的，因为您可以运行一个命令或命令序列。在这种情况下，健康状态基于退出代码（0 - 正常，任何其他 - 失败）。

考虑到脚本的性质和日志的想法，我会编写另一个 python 脚本来读取该日志的最后一行并解析时间戳。然后，如果当前时间与时间戳之间的差值大于[insert reasonable amount]then exit(1)，否则exit(0)。

如果您已经准备好健康检查脚本，可以通过以下方式启用：

spec:
  containers:
  - name: my_app
    image: my_image
    livenessProbe:
      exec:
        command:  # the command to run
        - python3
        - check_health.py
      initialDelaySeconds: 5  # wait 5 sec after start for the log to appear
      periodSeconds: 5  # run every 5 seconds

该文档有详细的解释和一些很好的例子。