【K8S系列】深入解析k8s网络插件—Cilium

分类：k8s作者：颜淡慕潇

序言

做一件事并不难，难的是在于坚持。坚持一下也不难，难的是坚持到底。

文章标记颜色说明：

  • 黄色：重要标题
  • 红色：用来标记结论
  • 绿色：用来标记论点
  • 蓝色：用来标记论点

在现代容器化应用程序的世界中，容器编排平台Kubernetes已经成为标准。为了支持复杂的应用和微服务架构，网络是Kubernetes集群中不可或缺的一部分。

本文将深入解析一种Kubernetes网络插件 - Cilium，从多个方面进行详细介绍，包括概念介绍、优缺点、实现原理、使用场景、具体使用方法、常见问题以及解决方案。

希望这篇文章能让你不仅有一定的收获，而且可以愉快的学习，如果有什么建议，都可以留言和我交流

 专栏介绍

这是这篇文章所在的专栏，欢迎订阅：【深入解析k8s】专栏

简单介绍一下这个专栏要做的事：

Kubernetes是一个分布式系统，能够管理和编排容器化应用程序。其中，监控是一个非常重要的方面，可以帮助用户了解集群的健康状态、性能和可用性。

在本文中，将详细介绍Kubernetes网络插件中的【Cilium】插件。

1 基础介绍 

在Kubernetes中，网络插件也称为容器网络接口（Container Network Interface，CNI）插件，用于实现容器之间的通信和网络连接。以下是一些常见的Kubernetes网络插件：

  1. Flannel：Flannel是一个流行的CNI插件，它使用虚拟网络覆盖技术（overlay network）来连接不同节点上的容器。Flannel支持多种后端驱动，如VXLAN、UDP、Host-GW等。

  2. Calico：Calico是一个开源的网络和安全解决方案，它使用BGP协议来实现容器之间的路由。Calico支持灵活的网络策略和安全规则，可用于大规模部署。

  3. Weave Net：Weave Net是一个轻量级的CNI插件，通过创建虚拟网络设备和网络代理来连接不同节点上的容器。Weave Net支持overlay模式和直连模式，具有灵活性。

  4. Cilium：Cilium是面向Kubernetes的高性能网络和安全解决方案，利用eBPF（Extended Berkeley Packet Filter）技术来提供快速的容器间通信和网络策略实施。

  5. Canal：Canal是一个综合性的CNI插件，结合了Calico和Flannel的功能。它可以使用Flannel提供overlay网络，同时使用Calico的网络策略和安全性功能。

  6. Antrea：Antrea是一个基于Open vSwitch的CNI插件，专为Kubernetes网络和安全性而设计。它提供了高性能的网络连接和网络策略功能。

  7. kube-router：kube-router是一个开源的CNI插件，它结合了网络和服务代理功能。它支持BGP和IPIP协议，并具有负载均衡的特性。

这些是Kubernetes网络插件中的一些常见选项，每个插件都有其特定的优势和适用场景。选择合适的网络插件取决于你的需求、网络拓扑和性能要求等因素。

同时，Kubernetes社区也在不断发展和推出新的网络插件，以满足不断变化的需求。

2 Cilium 介绍

2.1 概念介绍

Cilium是一个高性能、面向服务的网络插件，旨在提供强大的网络和安全功能。它采用eBPF（扩展 Berkeley数据包过滤器）技术，以更高效和安全的方式管理Kubernetes集群中的网络通信。Cilium的关键概念包括：

  1. Service Identity: Cilium基于应用层的服务标识来管理网络策略，而不是仅仅依赖IP地址或端口号。

  2. eBPF: Cilium使用eBPF技术来拦截和处理网络数据包，允许在数据包级别实施安全策略和路由。

  3. Distributed L3/L4 Load Balancing: Cilium可以自动进行负载均衡，以分发流量到后端服务实例。

2.2 优劣势

优点：

  1. 高性能: Cilium的使用eBPF技术可以实现卓越的性能，减少了网络包处理的性能开销。

  2. 强大的安全性: Cilium支持网络层面的安全策略，可以保护集群中的应用程序免受网络攻击。

  3. 应用层负载均衡: 可以实现应用层面的负载均衡，使流量分发更智能。

  4. Service Identity: 提供了强大的服务标识，有助于精细控制应用程序之间的通信。

  5. 可扩展性: Cilium支持大规模集群，并且易于扩展以适应不断增长的需求。

缺点：

  1. 学习曲线: 对于不熟悉eBPF和Cilium的用户来说，上手可能会有一定难度。

  2. 复杂性: 在复杂的网络环境中，配置和管理Cilium可能会变得复杂。

2.3 实现原理

Cilium的实现原理主要基于eBPF技术。eBPF允许在Linux内核中运行自定义代码，以在数据包处理路径上执行高度优化的操作。Cilium使用eBPF来实现以下功能：

  1. 包过滤: Cilium使用eBPF程序来检查每个传入和传出的数据包，以确保它们符合定义的策略。

  2. 负载均衡: 通过eBPF，Cilium可以进行应用层负载均衡，将流量均匀分配到后端服务。

  3. Service Identity: 通过eBPF，Cilium可以在数据包中识别服务标识，从而执行精细的网络策略。

  4. 安全策略: 使用eBPF，Cilium可以实施强大的网络安全策略，如网络隔离、入侵检测和防火墙。

2.4 使用场景

Cilium适用于多种使用场景，包括但不限于：

  1. 微服务架构: 对于基于微服务的应用程序，Cilium可以提供高级的网络策略和负载均衡。

  2. 安全性要求高的环境: 需要强大网络安全性的组织可以受益于Cilium的网络策略和安全功能。

  3. 高性能需求: 需要在高流量负载下获得卓越性能的组织可以选择Cilium，因为它使用eBPF技术进行高效的包处理。

  4. 多云环境: 适用于多云部署，因为Cilium提供了跨云平台的网络策略一致性。

3 安装使用

Cilium的安装方法通常取决于您的Kubernetes集群配置和个人偏好。以下是一种常见的安装方法，假定您正在使用Helm来部署Cilium。在此之前，请确保已经安装了Helm和Kubernetes集群。

3.2 安装Helm：

安装Helm： 

如果尚未安装Helm，请按照官方文档的说明进行安装：https://helm.sh/docs/intro/install/

3.3  添加Cilium Helm存储库：

执行以下命令将Cilium Helm存储库添加到Helm中：

3.4 创建Cilium命名空间：

在Kubernetes中创建一个新的命名空间（如果已经存在了，可以跳过此步骤）：

 
 
bashCopy code
 
 
kubectl create namespace cilium 
 
 
安装Cilium Helm Chart：
 
 
使用Helm来安装Cilium Helm Chart。您可以根据自己的需求进行配置。以下是一个示例命令：
 
 
 
 
bashCopy code
 
 
helm install cilium cilium/cilium --namespace cilium \ --set global.k8sServiceHost=$(kubectl get svc kubernetes -n default -o jsonpath='{.spec.clusterIP}') \ --set global.k8sServicePort=443 
 
 
这个命令将Cilium安装在名为cilium的命名空间中，并配置它以与Kubernetes API服务器进行通信。
 
 
等待部署完成：
 
 
使用以下命令检查Cilium部署的状态：
 
 
 
 
bashCopy code
 
 
kubectl get pods -n cilium 
 
 
等到所有的Cilium组件都处于运行状态。
 
 
验证安装：
 
 
可以创建一个简单的Pod，并尝试在集群中进行网络通信，以验证Cilium的安装是否成功。 
 
 
这只是一个基本的安装过程示例。根据您的需求，您可以调整Cilium的配置选项，如策略和网络参数。请查阅Cilium的官方文档以获取更详细的安装和配置信息：https://docs.cilium.io/en/stable/gettingstarted/k8s-install/
 

 

4 拓展
 

 
 
Cilium在使用过程中可能会遇到各种问题，这些问题的解决方案取决于具体情况。
 
 
 
 
以下是一些常见的Cilium问题及其可能的解决方案：
 

 

4.1 Cilium Pods未处于运行状态
 

问题描述：
 

 
 
当您检查Cilium的Pod时，其中一个或多个Pod可能未处于运行状态或出现错误。
 

 

解决方案：
 

 
 
    

  • 使用以下命令查看Cilium Pod的状态和日志以获取更多信息： 
    kubectl get pods -n cilium kubectl logs -n cilium <cilium-pod-name>
     
     
    • 

  • 确保Cilium的相关依赖项已正确安装并满足要求。
    • 

  • 如果发现Pod处于CrashLoopBackOff状态，请查看相关日志以获取错误信息，并尝试解决错误。
    • 

  • 如果有任何配置问题，检查Helm Chart或Cilium CRD的配置是否正确。
    • 



 

4.2 NetworkPolicy未生效
 

问题描述：
 

 
 
定义的Cilium NetworkPolicy似乎不生效，应用程序之间的通信不受限制。
 

 

解决方案：
 

 
 
    

  • 使用以下命令检查NetworkPolicy是否存在并已应用： 
    kubectl get networkpolicies -n <namespace>
     
    • 

  • 确保目标Pod正确标记以匹配NetworkPolicy中的标签选择器。
    • 

  • 检查NetworkPolicy中的策略规则，确保它们不会阻止预期的通信。
    • 

  • 使用cilium status命令检查Cilium的状态，确保Cilium Agent正常运行。
    • 

  • 查看Cilium的日志以获取关于NetworkPolicy问题的更多信息。
    • 



 

4.3 性能问题
 

问题描述：
 

 
 
Cilium可能导致性能问题，如延迟增加或吞吐量下降。
 

 

解决方案：
 

 
 
    

  • 使用性能监控工具（如Prometheus和Grafana）来监控Cilium和集群的性能。
    • 

  • 检查Cilium的配置是否合理，是否存在不必要的策略或规则。
    • 

  • 确保主机上的资源（CPU、内存）足够，以满足Cilium的需求。
    • 

  • 考虑升级Cilium版本，因为新版本通常会修复性能问题。
    • 



 

4.4 安全性问题
 

问题描述：
 

 
 
Cilium未正确实施网络安全策略，导致潜在的安全漏洞。
 

 

解决方案：
 

 
 
    

  • 审查网络策略以确保它们正确地限制了应用程序之间的通信。
    • 

  • 使用Cilium的安全特性，如应用层防火墙和入侵检测功能，以增强安全性。
    • 

  • 定期更新Cilium以获取最新的安全补丁。
    • 

  • 使用Cilium的审计和日志功能来监视网络活动，以检测潜在的安全问题。
    • 



 

4.5 版本兼容性
 

问题描述：
 

 
 
Cilium的版本与Kubernetes或其他组件不兼容。
 

 

解决方案：
 

 
 
    

  • 查阅Cilium的官方文档，了解Cilium版本与Kubernetes版本的兼容性信息。
    • 

  • 如果Cilium版本与Kubernetes版本不兼容，请升级或降级Cilium，以满足集群的要求。
    • 



 

4.6 网络故障
 

问题描述：
 

 
 
Cilium可能导致网络故障，影响应用程序的可用性。
 

 

解决方案：
 

 
 
    

  • 使用Cilium的诊断工具来识别网络故障的根本原因。
    • 

  • 检查Cilium的配置，特别是负载均衡和路由规则，以确保它们正确配置。
    • 

  • 定期备份Cilium的配置，以便在需要时还原。
    • 



 

5 总结
 

 
 
总结起来，Cilium是一个强大的Kubernetes网络插件，通过eBPF技术提供高性能和高级的网络功能。
 
 
尽管它可能具有一定的学习曲线和复杂性，但对于需要高性能和安全性的组织来说，它是一个有价值的选择。
 
 
通过了解其概念、优缺点、实现原理、使用场景、使用方法以及解决常见问题的方法，可以更好地利用Cilium来管理和保护Kubernetes集群中的网络通信。
 

 

6 投票
 

原文地址：https://blog.csdn.net/weixin_36755535/article/details/132637357
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

                            

                    

                

                

                    

                        

                            
相关推荐

                            



                                
【博客694】k8s kubelet 状态更新机制

                                
文章浏览阅读942次。kube-controller-manager 和 kubelet 是异步工作的，这意味着延迟可能包括任何的网络延迟、apiserver 的延迟、etcd 延迟，一个节点上的负载引起的延迟等等。当 Kubernetes 中 Node 节点出现状态异常的情况下，节点上的 Pod 会被重新调度到其他节点上去，但是有的时候我们会发现节点 Down 掉以后，Pod 并不会立即触发重新调度，这实际上就是和 Kubelet 的状态更新机制密切相关的，Kubernetes 提供了一些参数配置来触发重新调度的时间。_node-monitor-period

                            

                                
滴滴弹性云基于 K8S 的调度实践

                                
文章浏览阅读3.8k次。上篇文章详细介绍了弹性云混部的落地历程，弹性云是滴滴内部提供给网约车等核心服务的容器平台，其基于 k8s 实现了对海量 node 的管理和 pod 的调度。本文重点介绍弹性云的调度能力，分为以下部分：调度链路图：介绍当前弹性云调度体系链路，对架构体系有一个初步的认知k8s 调度能力的运用：整体介绍弹性云现在用到的 k8s 调度能力和对其的增强k8s 版本的升级：介绍到从 k8s 1.12 到 1...._滴滴机房 腾讯

                            

                                
NUMA架构在kubernetes中的应用

                                
文章浏览阅读897次。对于cpu来说，这种分配方式并不会有太大问题，因为cpu可以灵活调度，numa调度时我们只计算绑定了numa cpu的pod是可以接受的，但是对于内存来说，numa node上申请了的内存无法做到随时迁移，这就会导致调度器视角numa node的mem资源足够，但是等到pod真正使用时，由于没有绑定numa node的pod申请的内存，导致numa node的mem资源不足，造成swap中断或者远端内存申请，这会对绑定mem的pod来带来性能损耗。忽略了没有绑定numa node的pod资源。_kubectl numa

                            

                                
k8s中资源对象有哪些及它们如何协作

                                
文章浏览阅读796次，点赞17次，收藏15次。只要在Service定义中设置了ClusterIp:None，就定义了一个HeadLess Service， 它与普通的Service关键区别在于它没有ClusterIp地址，如果解析HeadLess Service的DNS域名，则会返回该Service对应的全部Pod的EndPoint列表，这就意味着客户端是直接与后端的pod建立了TCP/IP链接进行通信的。一个Label是一个键值对。注解：属于资源对象的元数据，可以被理解为一种特殊的标签，不过更多的是与程序挂钩，通常用于实现资源对象属性的自定义扩展。

                            

                                
Kubernetes 部署DolphinScheduler 创建租户失败

                                
文章浏览阅读763次。但是此时如果配置成 NONE, 租户创建成功了，但是无法创建资源文件，也就是无法上传文件，可能 dolphinscheduler 团队就想着将文件上传到 hdfs，暂不支持本地。需要将 resource.storage.type 置为 NONE, 因为我之前用的 1.3.6 版本的时候，即使资源文件存在本地文件也需要配置成 hdfs。_[error] 2023-10-24 18:10:43.762 +0800 org.apache.dolphinscheduler.api.servic

                            

                                
Kubernetes[k8s] 最新版1.27.3 - 1.28.0安装教程,使用containerd模式

                                
文章浏览阅读2.7k次，点赞2次，收藏13次。公司使用的是交老的k8s版本（1.16），由于老版本的K8s对于现在很多新特性不支持，所以需要升级到新版本。目前2023年7月11日最新版本的k8s是v1.27.3。通过参考官方文档进行k8s部署工作。其中涉及到操作系统配置、防火墙配置、私有镜像仓库等。_k8s最新版本

                            

                                
kubernetes新版本使用kubeadm init的超全问题解决和建议

                                
文章浏览阅读1.8w次，点赞14次，收藏27次。能节省你在kubeadm init 时遇到问题的排错时间⌚️。整合了网上大佬

                            

                                
Kubernetes(K8S)集群部署

                                
文章浏览阅读1.1k次，点赞2次，收藏7次。具体操作步骤可以参考之前的教程，建议是先安装一台，然后克隆虚拟机，这样速度快。注意：在克隆时记得修改Mac地址、IP地址、UUID和主机名。（最后别忘了保存下快照~）_部署k8s集群

                            

                                
k8s从初识到上天系列第二篇：kubernetes的组件和架构

                                
文章浏览阅读863次，点赞23次，收藏16次。当部署完 Kubernetes，便拥有了一个完整的集群。一组工作机器，称为节点， 会运行容器化应用程序。每个集群至少有一个工作节点。工作节点会 托管Pod ，而 Pod 就是作为应用负载的组件。控制平面管理集群中的工作节点和Pod。说人话版本：集群：cluster，多个几点被组织到一起共同为系统提供服务过程称之为集群。本质上是将承载同一个软件服务节点组织到一起，称之为该软件(服务)的集群，当然集群中的节点身份地位是不一样的。k8s集群也是如此，他也是多个节点组成。

                            

                                
Rancher管理K8S

                                
文章浏览阅读943次。Rancher是一个开源的企业级多集群Kubernetes管理平台，实现了Kubernetes集群在混合云+本地数据中心的集中部署与管理，以确保集群的安全性，加速企业数字化转型。Rancher 1.0版本在2016年就已发布，时至今日，Rancher已经成长为企业在生产环境中运行容器和Kubernetes的首要选择。_rancher管理k8s

                            

                                
kubeadm搭建k8s高可用集群（keepalived+nginx+3master）

                                
文章浏览阅读742次，点赞2次，收藏3次。本篇来讲解如何在centos下安装部署高可用k8s集群。_kubeadm ha keepalived + nginx

                            

                                
OpenEular23.09（欧拉）操作系统为企业搭建独立的K8S集群环境，详细流程+截图

                                
文章浏览阅读1.9k次，点赞21次，收藏25次。那么这个空间设置成内存的2倍大小。点击IPv4设置--手动--添加--设置ip--设置DNS服务器，最后点击--“保存”；首先选中--“本地标准磁盘”，存储配置--自定义分区，点击--“完成”；在--主机名--设置主机名：（例如k8s-master01)，点击--点击+，设置--挂载点/boot--期望容量，点击--添加挂载点；点击--+--挂载点swap--期望容量，点击--“添加挂载点”；默认选择--亚洲--上海，并调整日期和时间，点击--“完成”；设备类型--确认--LVM，卷组--选择“修改”；_euler 服务器搭建

                            

                                
tkestack/gpu-manager在k8s1.23版本之后的使用

                                
文章浏览阅读1k次。在1.25版本的k8s集群中部署gpu-manage时，虽然显示gpu节点上gpu-manage的pod实例都是running状态，但是给pod申领。既可以用源码的Makefile自动编译打包成新的镜像，但是源码的。说明gpu-manager和容器运行时接口通信失败了。编译后的镜像在1.25版本的k8s中可以正常使用。，但是在k8s1.23版本之后，接口路径已经改为。资源时，却始终找不到有资源的节点。，另外有一些依赖需要国际上的支持。可以看到这里用的运行时接口是。查看节点的详情时，返回的。_launch gpu manager 报错 can't create container runtime manager: context dead

                            

                                
k8s存储卷-动态PV

                                
文章浏览阅读1k次，点赞18次，收藏16次。SelfLink：API的资源对象之一，表示资源对象在集群当中自身的一个连结，self-Link是一个唯一的标识号，可以用于标识k8s集群当中的每个资源的对象。容器里使用的配置，在provisioner当中定义好环境变量，传给容器，storageclass的名称，NFS服务器的地址，NFS的目录。NFS的provisionner的客户端以pod的方式运行在集群当中，监听k8s集群当中PV的请求，然后动态的创建于NFS相关的PV。命名为 nfs-client-provisioner-clusterrole。

                            

                                
K8S证书过期解决办法之替换证书

                                
文章浏览阅读6.3k次，点赞2次，收藏20次。k8s证书过期解决方案之替换证书_k8s证书过期如何更换

                            

                                
K8S集群中使用JDOS KMS服务对敏感数据安全加密 | 京东云技术团队

                                
文章浏览阅读1k次。KMS，Key Management Service，即密钥管理服务，在K8S集群中，以驱动和插件的形式启用对Secret，Configmap进行加密。以保护敏感数据

                            

                                
K8S exporter应用

                                
文章浏览阅读888次。exporter对于云服务的监控还是很不完美，毕竟每家都有自己的护城河。自动发现多实例这样的借助consul 阿波罗这样的会简单一些。aws可以借助cloudwatch这样的导入模板到grafana中。还是希望能将类似腾讯云云监控中的这些指标采集到prometheus中，但是这过程应该还很遥远grafana出图 prometheus查询语法这些东西有时间的好好研究一下。报警有必要进行分级别，收敛配置一下！_command: - "-redis.password-file=/redis_passwd.json

                            

                                
Kubernetes 默认的4种命名空间

                                
文章浏览阅读1k次。可以在此处（https://cloud.google.com/kubernetes-engine/docs/how-to/kube-dns）和此处（https://www.digitalocean.com/community/tutorials/an-introduction-to-the-kubernetes-dns-service）找到更多的详细信息。-or-ipvs/）和此处（https://arthurchiao.art/blog/cracking-k8s-node-proxy/）。_k8s默认命名空间

                            

                                
【C站首发】全网最新Kubernetes（K8s）1.28版本探秘及部署 基于Containerd容器运行时（100年证书kubeadm）

                                
文章浏览阅读4.9k次，点赞11次，收藏32次。如果运行runc命令时提示：runc: error while loading shared libraries: libseccomp.so.2: cannot open shared object file: No such file or directory，则表明runc没有找到libseccomp，需要检查libseccomp是否安装，本次安装默认就可以查询到。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。_kubernetes 1.28

                            

                                
【K8S系列】深入解析k8s网络插件—Canal

                                
文章浏览阅读3.6w次，点赞118次，收藏144次。Canal 提供了网络功能，使得 Kubernetes 集群中的 Pod 可以相互通信，并与集群外部的服务进行通信。它通过网络插件的方式，为每个 Pod 分配唯一的 IP 地址，并管理网络流量的路由和转发。此外，Canal 还支持网络策略，用于定义 Pod 之间的通信规则和安全策略。Canal 基于 Calico 和 Flannel 项目，结合了二者的优点。它使用 Calico 的数据平面，提供高性能的网络转发和安全特性，同时使用 Flannel 的控制平面，实现 IP 地址管理和网络策略的配置。_k8s canal

                            

                    



            

            

              
          

            

              




              

            

          

          
          

            

              

                  
    
              

            

          

          

            

              

                  
    
              

            

          

          
          

            

              

                
                
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot