tencent cloud

容器服务

动态与公告
产品动态
公告
产品发布记录
产品简介
产品概述
产品优势
产品架构
应用场景
产品功能
基本概念
原生 Kubernetes 名词对照
容器服务高危操作
地域和可用区
开源组件
购买指南
购买指引
购买 TKE 标准集群
购买原生节点
购买超级节点
快速入门
新手指引
快速创建一个标准集群
入门示例
容器应用部署 Check List
集群配置
标准集群概述
集群管理
网络管理
存储管理
节点管理
GPU 资源管理
远程终端
应用配置
工作负载管理
服务和配置管理
组件和应用管理
弹性伸缩
容器登录方式
可观测配置
运维可观测性
成本洞察和优化
调度配置
调度组件概述
资源利用率优化调度
业务优先级保障调度
Qos 感知调度
安全和稳定性
容器服务安全组设置
身份验证和授权
应用安全
多集群管理
计划升级
备份中心
云原生服务指南
云原生 etcd
Prometheus 监控服务
TKE Serverless 集群指南
TKE 注册集群指南
实践教程
集群
Serverless 集群
调度
安全
服务部署
网络
发布
日志
监控
运维
Terraform
DevOps
弹性伸缩
容器化
微服务
成本管理
混合云
AI
故障处理
节点磁盘爆满排障处理
节点高负载排障处理
节点内存碎片化排障处理
集群 DNS 解析异常排障处理
集群 Kube-Proxy 异常排障处理
集群 API Server 网络无法访问排障处理
Service&Ingress 网络无法访问排障处理
Service&Ingress 常见报错和处理
Nginx Ingress 偶现 Connection Refused
CLB Ingress 创建报错排障处理
Pod 网络无法访问排查处理
Pod 状态异常与处理措施
授权腾讯云售后运维排障
CLB 回环问题
API 文档
History
Introduction
API Category
Making API Requests
Elastic Cluster APIs
Resource Reserved Coupon APIs
Cluster APIs
Third-party Node APIs
Relevant APIs for Addon
Network APIs
Node APIs
Node Pool APIs
TKE Edge Cluster APIs
Cloud Native Monitoring APIs
Scaling group APIs
Super Node APIs
Other APIs
Data Types
Error Codes
TKE API 2022-05-01
常见问题
TKE 标准集群
TKE Serverless 集群
运维类
隐患处理
服务类
镜像仓库类
远程终端类
事件类
资源管理类
服务协议
TKE Service Level Agreement
TKE Serverless Service Level Agreement
联系我们
词汇表

VPC-CNI 组件介绍

PDF
聚焦模式
字号
最后更新时间: 2024-02-01 10:04:35
VPC-CNI 组件包含3个 kubernetes 集群组件,分别是 tke-eni-agenttke-eni-ipamdtke-eni-ip-scheduler

tke-eni-agent

daemonset形式部署在集群中的每个节点上,职责:
拷贝 tke-route-enitke-eni-ipamc 等 CNI 插件到节点 CNI 执行文件目录(默认为 /opt/cni/bin)。
在 CNI 配置目录(默认为/etc/cni/net.d/)生成 CNI 配置文件。
设置节点策略路由和弹性网卡。
Pod IP 分配/释放的 GRPC Server。
定期进行 IP 垃圾回收,回收 Pod 已不在节点上的 IP。
通过 kubernetes 的 device-plugin 机制 设置网卡和 IP 的扩展资源。

tke-eni-ipamd

deployment形式部署在集群中的特定节点或 master 上,职责:
创建管理 CRD 资源(nec, vipc, vip, veni)。
非固定 IP 模式下,依据节点需求和状态创建/绑定/解绑/删除弹性网卡,分配/释放弹性网卡 IP。
固定 IP 模式下,依据 Pod 需求和状态创建/绑定/解绑/删除弹性网卡,分配/释放弹性网卡 IP。
节点弹性网卡安全组管理。
依据 Pod 需求创建/绑定/解绑/删除弹性公网 IP。

tke-eni-ip-scheduler

deployment形式部署在集群中的特定节点或 master 上,仅固定 IP 模式会部署,为调度扩展插件,职责:
多子网情况下,需要让已固定 IP 的 Pod 调度到指定子网的节点。
固定 IP 模式下,判断 Pod 调度的节点对应子网 IP 是否充足。

组件权限说明

说明:
权限场景章节中仅列举了组件核心功能涉及到的相关权限,完整权限列表请参考权限定义章节。

tke-eni-agent 权限

权限说明

该组件权限是当前功能实现的最小权限依赖。
需要修改网络相关的内核参数,如 net.ipv4.ip_forward,net.ipv4.rp_filter等,所以需要开启特权级容器。

权限场景

功能
涉及对象
涉及操作权限
分配 IP 过程中,需要获取 pod 和 node 相关信息。
pods、namespaces、nodes
get/list/watch
获取网络配置信息。
configmaps
get/list/watch
管理 node 的相关网络扩展资源,如 tke.cloud.tencent.com/eni-ip 等。
nodes/status
get/list/watch/patch
通过自定义对象获取分配 IP、网卡等网络配置信息,并与 eni-ipamd 组件配合工作。
networking.tke.cloud.tencent.com groups
get/list/watch/delete/update
通过 events 暴露组件的工作状态,节点网络的相关变更信息。
events
get/list/watch/create/update/patch

权限定义

kind: ClusterRole
metadata:
name: tke-eni-agent
rules:
- apiGroups: [""]
resources:
- pods
- namespaces
- nodes
- configmaps
verbs: ["list", "watch", "get"]
- apiGroups: [""]
resources:
- nodes/status
verbs: ["list", "watch", "get", "patch"]
- apiGroups: ["networking.tke.cloud.tencent.com"]
resources:
- underlayips
- nodeeniconfigs
- vpcipclaims
- vpcips
- vpcenis
verbs: ["get", "list", "watch", "delete", "update"]
- apiGroups: [""]
resources:
- events
verbs: ["list", "watch", "get", "update", "patch", "create"]

tke-eni-ipamd 权限

权限说明

该组件权限是当前功能实现的最小权限依赖。

权限场景

功能
涉及对象
涉及操作权限
分配 IP 的过程中,需要获取 Pod 和 Node 的相关信息。
pods、namespaces、nodes、nodes/status
get/list/watch
给超级节点的 Pod 分配 IP 的过程中,需要将分配信息更新到 Pod 的注解中。
pods
update/patch
全局路由工作模式下,需要将分配给节点的 podCIDR 写到 nodes 对象上,同时与节点自动扩缩容配合工作时,需要更新 nodes 的 conditions 和 taints。
nodes、nodes/status
update/patch
多副本运行功能基于 LeaderElection 实现,LeaderElection 需要 configmaps 或 endpoints 的相关读写权限,同时运行信息通过 events 暴露。
configmaps、endpoints、events
get/list/watch/create/update/patch
固定 IP 的 Pod 销毁时,需要获取所属的 workload 信息来判断是否需要释放固定 IP。
statefulsets、deployments
get/list/watch
使用自定义对象来管理相关网络资源(弹性网卡、IP、安全组等)。
customresourcedefinitions
create/update/get
networking.tke.cloud.tencent.com apiGroups
get/list/watch/create/update/patch/delete
需要获取原生节点的相关信息。
node.tke.cloud.tencent.com apiGroups
get/list/watch
注册节点相关能力需要与 cilium 组件配合工作。
cilium.io apiGroups
get/list/watch/create/update/patch/delete

权限定义

apiVersion: rbac.authorization.k8s.io/v1
# kubernetes versions before 1.8.0 should use rbac.authorization.k8s.io/v1beta1
kind: ClusterRole
metadata:
name: tke-eni-ipamd
rules:
- apiGroups: [""]
resources:
- pods
- namespaces
- nodes
- nodes/status
verbs: ["list", "watch", "get", "patch", "update"]
- apiGroups: [""]
resources:
- configmaps
- endpoints
- events
verbs: ["get", "list", "watch", "update", "create", "patch"]
- apiGroups: ["apps", "extensions"]
resources:
- statefulsets
- deployments
verbs: ["list", "watch", "get"]
- apiGroups: ["apiextensions.k8s.io"]
resources:
- customresourcedefinitions
verbs: ["create", "update", "get"]
- apiGroups: ["networking.tke.cloud.tencent.com"]
resources:
- staticipconfigs
- underlayips
- nodeeniconfigs
- vpcipclaims
- vpcips
- eipclaims
- vpcenis
verbs: ["create", "update", "delete", "get", "list", "watch", "patch"]
- apiGroups: ["node.tke.cloud.tencent.com"]
resources:
- machines
verbs: ["get", "list", "watch"]
- apiGroups: [ "cilium.io" ]
resources:
- ciliumnodes
- ciliumnodes/status
- ciliumnodes/finalizers
verbs: [ "create", "update", "delete", "get", "list", "watch", "patch" ]


tke-eni-ip-scheduler 权限

权限说明

该组件权限是当前功能实现的最小权限依赖。
需要挂载主机 /var/lib/kubelet 相关目录到容器来完成 volume 的 mount/umount,所以需要开启特权级容器。

权限场景

功能
涉及对象
涉及操作权限
需要扩展 bindVerb,以解决 Pod 并发绑定时 IP 分配冲突的问题。
pods/binding
get/list/watch/create/update/patch
多副本运行功能基于 LeaderElection 实现,LeaderElection 需要 configmaps 或 endpoints 的相关读写权限,同时运行信息通过 events 暴露。
configmaps、endpoints、events
get/list/watch/create/update/patch
扩展调度时需要获取 pod 和 nodes 的相关信息。
pods、namespaces、nodes、nodes/status
get/list/watch
扩展调度时需要与组件自定义对象进行交互,从而实现 IP 的完整分配,解决 IP 分配冲突的问题。
networking.tke.cloud.tencent.com groups
get/list/watch/update

权限定义

apiVersion: rbac.authorization.k8s.io/v1
# kubernetes versions before 1.8.0 should use rbac.authorization.k8s.io/v1beta1
kind: ClusterRole
metadata:
name: tke-eni-ip-scheduler
rules:
- apiGroups: [""]
resources:
- pods/binding
verbs: ["get", "list", "watch", "update", "create", "patch"]
- apiGroups: [""]
resources:
- ["configmaps", "endpoints", "events"]
verbs: ["get", "list", "watch", "update", "create", "patch"]
- apiGroups: [""]
resources:
- ["pods", "namespaces", "nodes", "nodes/status"]
verbs: ["list", "watch", "get"]
- apiGroups: ["networking.tke.cloud.tencent.com"]
resources:
- ["nodeeniconfigs", "vpcipclaims", "vpcips"]
verbs: ["get", "list", "watch", "update"]



帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈