tencent cloud

容器服务

动态与公告
产品动态
公告
产品发布记录
产品简介
产品概述
产品优势
产品架构
应用场景
产品功能
基本概念
原生 Kubernetes 名词对照
容器服务高危操作
地域和可用区
开源组件
购买指南
购买指引
购买 TKE 标准集群
购买原生节点
购买超级节点
快速入门
新手指引
快速创建一个标准集群
入门示例
容器应用部署 Check List
集群配置
标准集群概述
集群管理
网络管理
存储管理
节点管理
GPU 资源管理
远程终端
应用配置
工作负载管理
服务和配置管理
组件和应用管理
弹性伸缩
容器登录方式
可观测配置
运维可观测性
成本洞察和优化
调度配置
调度组件概述
资源利用率优化调度
业务优先级保障调度
Qos 感知调度
安全和稳定性
容器服务安全组设置
身份验证和授权
应用安全
多集群管理
计划升级
备份中心
云原生服务指南
云原生 etcd
Prometheus 监控服务
TKE Serverless 集群指南
TKE 注册集群指南
实践教程
集群
Serverless 集群
调度
安全
服务部署
网络
发布
日志
监控
运维
Terraform
DevOps
弹性伸缩
容器化
微服务
成本管理
混合云
AI
故障处理
节点磁盘爆满排障处理
节点高负载排障处理
节点内存碎片化排障处理
集群 DNS 解析异常排障处理
集群 Kube-Proxy 异常排障处理
集群 API Server 网络无法访问排障处理
Service&Ingress 网络无法访问排障处理
Service&Ingress 常见报错和处理
Nginx Ingress 偶现 Connection Refused
CLB Ingress 创建报错排障处理
Pod 网络无法访问排查处理
Pod 状态异常与处理措施
授权腾讯云售后运维排障
CLB 回环问题
API 文档
History
Introduction
API Category
Making API Requests
Elastic Cluster APIs
Resource Reserved Coupon APIs
Cluster APIs
Third-party Node APIs
Relevant APIs for Addon
Network APIs
Node APIs
Node Pool APIs
TKE Edge Cluster APIs
Cloud Native Monitoring APIs
Scaling group APIs
Super Node APIs
Other APIs
Data Types
Error Codes
TKE API 2022-05-01
常见问题
TKE 标准集群
TKE Serverless 集群
运维类
隐患处理
服务类
镜像仓库类
远程终端类
事件类
资源管理类
服务协议
TKE Service Level Agreement
TKE Serverless Service Level Agreement
联系我们
词汇表

非固定 IP 模式使用说明

PDF
聚焦模式
字号
最后更新时间: 2023-02-23 18:42:28

使用场景

适用于不依赖容器固定 IP 的场景。例如,可部署多副本的无状态服务,无状态离线业务等。

能力和限制

支持节点维护可用的网卡/ IP 池,从而支持 Pod 大规模快速重建。
支持预绑定策略,从而一定范围内支持 Pod 快速扩容。
支持弹性伸缩网卡/ IP,从而可避免 IP 浪费,提高 IP 利用率。
预绑定值不可为0,即暂不能支持完全按需分配,节点数过多可能会造成 IP 浪费。

IP 地址管理原理

TKE 组件在每个节点维护一个可弹性伸缩的独占网卡/IP 池。已绑定的独占网卡/IP 数量将被维持在 Pod 数量 + 最小预绑定数量Pod 数量 + 最大预绑定数量之间。
已绑定数量 < Pod 数量 + 最小预绑定数量时,会绑定独占网卡/IP 使得已绑定数量 = Pod 数量 + 最小预绑定数量
已绑定数量 > Pod 数量 + 最大预绑定数量时,会定时释放独占网卡/IP(约2分钟一次),直到已绑定数量 = Pod 数量 + 最大预绑定数量
最大可绑定数量 < 当前已绑定数量时,会直接释放多余的空闲独占网卡/IP,使得已绑定数量 = 最大可绑定数量

使用方法

启用非固定 IP

创建集群选择非固定 IP 模式的 VPC-CNI:集群创建时不勾选固定Pod IP 选项。




支持快释放

默认情况,非固定 IP 模式管理的网卡/IP 池采用慢释放策略,默认是2分钟只释放1个多余的网卡/IP,若用户需要更高效的利用 IP,则需要开启快释放,快释放模式下,每2分钟会检查一次网卡/IP 池,释放多余的网卡/IP,直到空闲网卡/IP 数等于最大预绑定值。开启方式如下:

tke-eni-ipamd 组件版本 >= v3.5.0

1. 登录 容器服务控制台,单击左侧导航栏中集群
2. 在集群管理页面,选择需开启快释放的集群 ID,进入集群详情页。
3. 在集群详情页面,选择左侧组件管理
4. 在组件管理页面中,找到 eniipamd 组件,选择更新配置
5. 在更新配置页面,勾选快释放,并点击完成。

tke-eni-ipamd 组件版本 < v3.5.0 或组件管理中无 eniipamd 组件

修改现存的 tke-eni-agent daemonset:kubectl edit ds tke-eni-agent -n kube-system
spec.template.spec.containers[0].args 中加入以下启动参数开启快释放。修改后,agent 会滚动更新生效特性。
- --enable-quick-release

指定某节点预绑定数量

可通过修改节点对应的 CRD NEC 的注解来指定该节点 eni-ip 预绑定的数量,相关的注解为:
# 共享网卡模式指定最小预绑定值
"tke.cloud.tencent.com/route-eni-ip-min-warm-target"
# 共享网卡模式指定最大预绑定值
"tke.cloud.tencent.com/route-eni-ip-max-warm-target"
# 独占网卡模式指定最小预绑定值
"tke.cloud.tencent.com/direct-eni-min-warm-target"
# 独占网卡模式指定最大预绑定值
"tke.cloud.tencent.com/direct-eni-max-warm-target"
修改方法如下:
# 示例, 修改节点 <nodeName> 的最小预绑定 ip 值为1
kubectl annotate nec <nodeName> "tke.cloud.tencent.com/route-eni-ip-min-warm-target"="1" --overwrite
# 示例, 修改节点 <nodeName> 的最大预绑定 ip 值为3
kubectl annotate nec <nodeName> "tke.cloud.tencent.com/route-eni-ip-max-warm-target"="3" --overwrite
修改后即触发动态预绑定的检查,如果预绑定数量不满足期望,会绑定足够网卡/IP。反之则会解绑网卡/IP。
修改时这两个注解必须同时存在,且满足:0 ≤ 最小预绑定 ≤ 最大预绑定,否则修改失败。

指定某节点最大绑定数量

可通过修改节点对应的 CRD nec 的注解来指定该节点网卡/IP 最大绑定的数量,可指定最大的网卡数和单网卡绑定的 IP 数,相关的注解为:
# 共享网卡模式指定最大网卡数
kubectl annotate nec <nodeName> "tke.cloud.tencent.com/route-eni-max-attach"="1" --overwrite
# 共享网卡模式指定单网卡绑定的 IP 数
kubectl annotate nec <nodeName> "tke.cloud.tencent.com/max-ip-per-route-eni"="9" --overwrite
# 独占网卡模式指定最大独占网卡数
kubectl annotate nec <nodeName> "tke.cloud.tencent.com/direct-eni-max-attach"="5" --overwrite
修改时需保证修改值大于等于节点当前正在使用的网卡/IP 数量,否则修改失败。 修改后即触发动态预绑定的检查,如果已绑定数量 > 最大可绑定值,则会解绑网卡/IP,使已绑定数量 = 最大可绑定值

指定默认预绑定数量

tke-eni-ipamd 组件版本 >= v3.5.0

1. 登录 容器服务控制台,单击左侧导航栏中集群
2. 在集群管理页面,选择需指定默认预绑定数量的集群 ID,进入集群详情页。
3. 在集群详情页面,选择左侧组件管理
4. 在组件管理页面中,找到 eniipamd 组件,选择更新配置
5. 在更新配置页面,填写欲设置的共享网卡/独占网卡模式预绑定默认值,并单击完成

tke-eni-ipamd 组件版本 < v3.5.0 或组件管理中无 eniipamd 组件

修改现存的 tke-eni-ipamd deployment:kubectl edit deploy tke-eni-ipamd -n kube-system
spec.template.spec.containers[0].args 中加入以下启动参数修改默认预绑定值。修改后,ipamd 会自动重启并生效。默认值只影响新增的节点:
# 共享网卡模式最小预绑定默认值,默认值为 5
- --ip-min-warm-target=3
# 共享网卡模式最大预绑定默认值,默认值为 5
- --ip-max-warm-target=3
# 独占网卡模式最小预绑定默认值,默认值为 1
- --eni-min-warm-target=3
# 独占网卡模式最大预绑定默认值,默认值为 1
- --eni-max-warm-target=3


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈