Pods卡在ContainerCreating中，“无法为容器分配IP地址”

Question

问题

在ContainerCreating滚动更新消息后，600个pod部署中的多个pod卡在其中：

Failed create pod sandbox: rpc error: code = Unknown desc = NetworkPlugin cni failed to set up pod <pod name> network: add cmd: failed to assign an IP address to container

我尝试过的

• 在EKS和CNI 1.5.0上升级到v1.12。 此问题已结束，说明CNI 1.5.0已解决该问题。 它不适合我们。在另一个线程中，泄漏的ENI被指责，但由于CNI升级而被关闭。
• 安装了cni-metrics-helper，这是输出的快照：

maxIPAddresses, value: 759.000000
ipamdActionInProgress, value: 1.000000
addReqCount, value: 16093.000000
awsAPILatency, value: 564.000000
delReqCount, value: 32337.000000
eniMaxAvailable, value: 69.000000
assignIPAddresses, value: 558.000000
totalIPAddresses, value: 682.000000
eniAllocated, value: 69.000000

问题

CNI指标输出是否表明存在问题？好像有足够的IP。

我还能尝试调试什么？

Answer 1

您似乎已达到子网中 IP 地址的最大数量，文档中可能会建议这样的事情：

maxIPAddress：集群中Pod可使用的最大IP地址数。（假设子网中有足够的 IP）。

另请查看maxUnavailable和maxSurge参数，它们控制滚动升级期间出现的 POD 数量 - 也许您的配置假设在滚动升级期间您将拥有超过 600 个 POD（例如 130%），并且达到了 AWS 网络的限制。