【k8s系列】使用MicroK8s 5分钟搭建k8s集群含踩坑经验

MicrosK8s介绍

MicroK8s 是一个经过 CNCF 认证的轻量级的 Kubernetes开源部署工具,用于自动化部署、扩展和管理容器化应用程序。它在一个小的占用空间中提供了核心 Kubernetes 组件的功能,使其可以从单个节点扩展到高可用性生产集群。MicroK8s 是一个单一的软件包,使开发人员能够在 60 秒内获得功能齐全、一致且安全的 Kubernetes 系统。

版本选择

  • 虚拟机系统: Ubuntu: 22.04 LTS(建议,官网默认教程是用Ubuntu,也支持其他Linux系统,可以查看后面官网链接)
  • MicroK8s: 1.23以上(MicroK8s version对应的就是Kubernetes Version)
  • 虚拟机: Parallels Desktop 18.1.1
  • 宿主机器: 我的笔记本是MacOS M2 13.2.1 (22D68)
  • 每台虚拟机需要2CPU2G内存

准备三台虚拟机

这里虚拟机安装就不说了,网上很多,如果使用Parallels Desktop的朋友可以直接用Parallels自带的安装工具点击Unbuntu,就会自动安装最新版本。

这里我把用来做K8s集群的三台虚拟机分别划分为 Master(m)、Worker 1(w1)、Worker 2(w2),大家在本文后面的内容会看到类似的名字。

建议先在虚拟机安装net-tool,后面需要用来查ip可能用到

sudo apt-get update
sudo apt-get install net-tools

分别在三台虚拟机修改hostname,这一步可选,因为本文暂时用不到,但是避免大家因为域名问题导致集群节点出现奇奇怪怪访问受限问题
Master

sudo hostnamectl set-hostname m
sudo vi /etc/hosts
192.168.50.97 m
192.168.50.99 w1
192.168.50.163 w2

Worker 1

sudo hostnamectl set-hostname w1
sudo vi /etc/hosts
192.168.50.97 m
192.168.50.99 w1
192.168.50.163 w2

Worker 2

sudo hostnamectl set-hostname w2
sudo vi /etc/hosts
192.168.50.97 m
192.168.50.99 w1
192.168.50.163 w2

以上设置完全后,每个几点互相之前应该都可以通过新的hostname访问,可以互相ping下,测试链接

ping m
ping w1
ping w2

搭建MicroK8s环境

参考: 官方文档

注意: 在国内如果直接按官网文档安装,因为网络问题可能会有坑。我调整了下步骤,以下需要在三台虚拟机操作同样的步骤,配置相同的运行环境。注意这里要想安装成功,必须要让你的虚拟机可以科学上网,这个很重要!!!如果大家用Parallels,可以在宿主机打开你购买的合法代理,然后虚拟机选择Shared Network,这样虚拟机就可以跟你宿主机共享网络科学上网,进行下载安装,建议一台台虚拟机分开使用Shared Network模式安装,不然可能会出现你几个虚拟机同时使用Shared Network出现IP冲突导致不能顺利下载Microk8s组件。在后面配置集群的时候记得把虚拟机网络切换回Bridge模式,否则你集群节点互相会访问不了。

安装Microk8s

sudo snap install microk8s --classic --channel=1.23/stable
microk8s status --wait-ready

这里安装成功,控制台会有如下信息输出,如果没有输出,意味着安装失败了,可以尝试切换其他版本。默认里面addons插件都是disable的,这里因为我机子已经提前装了,所以显示有enabled的插件。

把当前用户加入Admin Group

这样可以使用当前用户操作Microk8s指令时,拥有admin权限

sudo usermod -a -G microk8s $USER
sudo chown -f -R $USER ~/.kube
su - $USER

访问K8s

MicroK8s已经绑定了K8s原生命令,默认会带有microk8s别名+K8s原生命令去避免与K8s原生命令冲突,所以需要用以下指令去查看K8s状态

microk8s kubectl get nodes

这里以m node为例子,控制台可以看到如下信息:

parallels@m:/opt/k8s$ microk8s kubectl get nodes
NAME   STATUS   ROLES    AGE   VERSION
m      Ready    <none>   13h   v1.23.17-2+7a25397bc9bdd6

启动和停止MicroK8s服务

如果有需要停止或者重启MicroK8s,可以使用以下指令。我们并不需要重启服务才能完成microK8s安装,因为可以忽略一下命令。

microk8s stop
microk8s start

到这里三台机完成上面步骤就已经搭建好K8s单机版了,是不是很快呢,接下来我们进行集群搭建!

搭建MicroK8s集群

MicroK8s搭建集群非常简单,只需要让每个worker节点的机子加入到master节点即可。

把Worker节点分别加入到MicroK8s集群

(1)首先先在Master节点输入以下命令

microk8s add-node

控制台会输出一下指令

parallels@m:/opt/k8s$ microk8s add-node
From the node you wish to join to this cluster,run the following:
microk8s join 192.168.50.97:25000/5863a82ebcb27960812a04e0b681d2d9/4b62d7a9ae9b

Use the '--worker' flag to join a node as a worker not running the control plane,eg:
microk8s join 192.168.50.97:25000/5863a82ebcb27960812a04e0b681d2d9/4b62d7a9ae9b --worker

If the node you are adding is not reachable through the default interface you can use one of the following:
microk8s join 192.168.50.97:25000/5863a82ebcb27960812a04e0b681d2d9/4b62d7a9ae9

(2)在Worker 节点执行
把上面生成的指令复制到Worker节点机子运行

192.168.50.97:25000/5863a82ebcb27960812a04e0b681d2d9/4b62d7a9ae9b --worker

这样我们就已经完成了一台机子的集群搭建了,另外一台机子只需要重复(1)、(2)步骤即可。这里值得注意的是microk8s add-node生成的指令只能用于一台Worker node,另外一台机子要加入集群记得需要重新在Master node执行一次,然后再复制到另一台Workder Node执行,因为一份token只能用于一台机子,两台独立的Workder node,需要分别执行,这个很重要!

在Master节点检查节点运行情况

Master节点执行microk8s kubectl get no可以查看集群运行情况,这里可以看到所有集群内的节点都是Ready状态。

在Master节点打开存储插件

集群如果需要持久化数据,这里可以直接输入以下指令把存储插件打开,会自动使用宿主机器进行数据存储。

microk8s enable hostpath-storage

如果想配置集群存储服务(NFS),可以查看后面章节,会单独介绍。

在Master节点打开DNS插件

K8s集群内部DNS服务管理,输入以下指令即可

microk8s enable dns

查看K8s插件启用情况

在Master节点输入以下指令,可以查看插件的启用情况:

microk8s status --wait-ready


到这里集群已经搭建完毕!

发布应用到K8s集群

在Master节点部署和运行Nginx

这里只需要在Master节点部署和运行Nginx

microk8s kubectl create deployment nginx --image=nginx

通过一下命令查看Nginx运行情况,这里需要大约1-2分钟才会变成Ready

microk8s kubectl get pods


目前我们的Nginx Pod虽然已经在运行,但是还没办法访问,我们需要对外发布服务才可以在浏览器访问。

在Master节点发布Nginx

发布K8s服务:

microk8s kubectl expose deployment nginx --type="NodePort" --port 80

成功后,控制台会输出

service/nginx exposed

如果直接访问Master节点IP192.168.50.97,会发现没办法在浏览器访问,因为默认情况下,K8s会将Nginx用到的80端口默认映射到K8s集群的随机端口,通过一下命令可以查看Nginx服务情况:

microk8s kubectl get svc nginx

控制台输出:

NAME    TYPE       CLUSTER-IP      EXTERNAL-IP   PORT(S)        AGE
nginx   NodePort   10.152.183.26   <none>        80:30096/TCP   52

因此,这里的 30096才是K8s集群对外暴露的Nginx访问端口,我们可以在宿主机的浏览器通过{虚拟机IP}:30096访问K8s集群各个节点的30096端口,就可以看到Nginx欢迎页面。

Master IP

Nginx


Worker 1 IP

Nginx


Worker2 IP

Nginx


到这里就全部完成啦,下一章我会介绍怎么使用NFS Server作为MicroK8s的持久化存储服务

本文Microk8s常用命令总结

1.查看MicroK8s安装状态

microk8s status --wait-ready

2.启动和停止MicroK8s服务

microk8s stop
microk8s start

3.查看集群节点和服务状态

microk8s kubectl get nodes
microk8s kubectl get services

4.修改MicroK8s指令别名

alias kubectl='microk8s kubectl'

5.部署和运行APP

microk8s kubectl create deployment nginx --image=nginx

6.查看Pod运行状态

microk8s kubectl get pods

7.对外发布服务

microk8s kubectl expose deployment nginx --type="NodePort" --port 80

8.查询服务运行状态

microk8s kubectl get svc nginx

9.启用MicroK8s插件

microk8s enable hostpath-storage

10.生成加入集群指令

microk8s add-node

11.退出集群

以下命令在子节点执行

microk8s leave

以下命令在Master节点执行

microk8s remove-node 10.22.254.79

原文地址:https://blog.csdn.net/Evan_Leung/article/details/131225526

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


文章浏览阅读942次。kube-controller-manager 和 kubelet 是异步工作的,这意味着延迟可能包括任何的网络延迟、apiserver 的延迟、etcd 延迟,一个节点上的负载引起的延迟等等。当 Kubernetes 中 Node 节点出现状态异常的情况下,节点上的 Pod 会被重新调度到其他节点上去,但是有的时候我们会发现节点 Down 掉以后,Pod 并不会立即触发重新调度,这实际上就是和 Kubelet 的状态更新机制密切相关的,Kubernetes 提供了一些参数配置来触发重新调度的时间。_node-monitor-period
文章浏览阅读3.8k次。上篇文章详细介绍了弹性云混部的落地历程,弹性云是滴滴内部提供给网约车等核心服务的容器平台,其基于 k8s 实现了对海量 node 的管理和 pod 的调度。本文重点介绍弹性云的调度能力,分为以下部分:调度链路图:介绍当前弹性云调度体系链路,对架构体系有一个初步的认知k8s 调度能力的运用:整体介绍弹性云现在用到的 k8s 调度能力和对其的增强k8s 版本的升级:介绍到从 k8s 1.12 到 1...._滴滴机房 腾讯
文章浏览阅读897次。对于cpu来说,这种分配方式并不会有太大问题,因为cpu可以灵活调度,numa调度时我们只计算绑定了numa cpu的pod是可以接受的,但是对于内存来说,numa node上申请了的内存无法做到随时迁移,这就会导致调度器视角numa node的mem资源足够,但是等到pod真正使用时,由于没有绑定numa node的pod申请的内存,导致numa node的mem资源不足,造成swap中断或者远端内存申请,这会对绑定mem的pod来带来性能损耗。忽略了没有绑定numa node的pod资源。_kubectl numa
文章浏览阅读796次,点赞17次,收藏15次。只要在Service定义中设置了ClusterIp:None,就定义了一个HeadLess Service, 它与普通的Service关键区别在于它没有ClusterIp地址,如果解析HeadLess Service的DNS域名,则会返回该Service对应的全部Pod的EndPoint列表,这就意味着客户端是直接与后端的pod建立了TCP/IP链接进行通信的。一个Label是一个键值对。注解:属于资源对象的元数据,可以被理解为一种特殊的标签,不过更多的是与程序挂钩,通常用于实现资源对象属性的自定义扩展。
文章浏览阅读763次。但是此时如果配置成 NONE, 租户创建成功了,但是无法创建资源文件,也就是无法上传文件,可能 dolphinscheduler 团队就想着将文件上传到 hdfs,暂不支持本地。需要将 resource.storage.type 置为 NONE, 因为我之前用的 1.3.6 版本的时候,即使资源文件存在本地文件也需要配置成 hdfs。_[error] 2023-10-24 18:10:43.762 +0800 org.apache.dolphinscheduler.api.servic
文章浏览阅读2.7k次,点赞2次,收藏13次。公司使用的是交老的k8s版本(1.16),由于老版本的K8s对于现在很多新特性不支持,所以需要升级到新版本。目前2023年7月11日最新版本的k8s是v1.27.3。通过参考官方文档进行k8s部署工作。其中涉及到操作系统配置、防火墙配置、私有镜像仓库等。_k8s最新版本
文章浏览阅读1.8w次,点赞14次,收藏27次。能节省你在kubeadm init 时遇到问题的排错时间⌚️。整合了网上大佬
文章浏览阅读1.1k次,点赞2次,收藏7次。具体操作步骤可以参考之前的教程,建议是先安装一台,然后克隆虚拟机,这样速度快。注意:在克隆时记得修改Mac地址、IP地址、UUID和主机名。(最后别忘了保存下快照~)_部署k8s集群
文章浏览阅读863次,点赞23次,收藏16次。当部署完 Kubernetes,便拥有了一个完整的集群。一组工作机器,称为节点, 会运行容器化应用程序。每个集群至少有一个工作节点。工作节点会 托管Pod ,而 Pod 就是作为应用负载的组件。控制平面管理集群中的工作节点和Pod。说人话版本:集群:cluster,多个几点被组织到一起共同为系统提供服务过程称之为集群。本质上是将承载同一个软件服务节点组织到一起,称之为该软件(服务)的集群,当然集群中的节点身份地位是不一样的。k8s集群也是如此,他也是多个节点组成。
文章浏览阅读943次。Rancher是一个开源的企业级多集群Kubernetes管理平台,实现了Kubernetes集群在混合云+本地数据中心的集中部署与管理,以确保集群的安全性,加速企业数字化转型。Rancher 1.0版本在2016年就已发布,时至今日,Rancher已经成长为企业在生产环境中运行容器和Kubernetes的首要选择。_rancher管理k8s
文章浏览阅读742次,点赞2次,收藏3次。本篇来讲解如何在centos下安装部署高可用k8s集群。_kubeadm ha keepalived + nginx
文章浏览阅读1.9k次,点赞21次,收藏25次。那么这个空间设置成内存的2倍大小。点击IPv4设置--手动--添加--设置ip--设置DNS服务器,最后点击--“保存”;首先选中--“本地标准磁盘”,存储配置--自定义分区,点击--“完成”;在--主机名--设置主机名:(例如k8s-master01),点击--点击+,设置--挂载点/boot--期望容量,点击--添加挂载点;点击--+--挂载点swap--期望容量,点击--“添加挂载点”;默认选择--亚洲--上海,并调整日期和时间,点击--“完成”;设备类型--确认--LVM,卷组--选择“修改”;_euler 服务器搭建
文章浏览阅读1k次。在1.25版本的k8s集群中部署gpu-manage时,虽然显示gpu节点上gpu-manage的pod实例都是running状态,但是给pod申领。既可以用源码的Makefile自动编译打包成新的镜像,但是源码的。说明gpu-manager和容器运行时接口通信失败了。编译后的镜像在1.25版本的k8s中可以正常使用。,但是在k8s1.23版本之后,接口路径已经改为。资源时,却始终找不到有资源的节点。,另外有一些依赖需要国际上的支持。可以看到这里用的运行时接口是。查看节点的详情时,返回的。_launch gpu manager 报错 can't create container runtime manager: context dead
文章浏览阅读1k次,点赞18次,收藏16次。SelfLink:API的资源对象之一,表示资源对象在集群当中自身的一个连结,self-Link是一个唯一的标识号,可以用于标识k8s集群当中的每个资源的对象。容器里使用的配置,在provisioner当中定义好环境变量,传给容器,storageclass的名称,NFS服务器的地址,NFS的目录。NFS的provisionner的客户端以pod的方式运行在集群当中,监听k8s集群当中PV的请求,然后动态的创建于NFS相关的PV。命名为 nfs-client-provisioner-clusterrole。
文章浏览阅读6.3k次,点赞2次,收藏20次。k8s证书过期解决方案之替换证书_k8s证书过期如何更换
文章浏览阅读1k次。KMS,Key Management Service,即密钥管理服务,在K8S集群中,以驱动和插件的形式启用对Secret,Configmap进行加密。以保护敏感数据
文章浏览阅读888次。exporter对于云服务的监控还是很不完美,毕竟每家都有自己的护城河。自动发现多实例这样的借助consul 阿波罗这样的会简单一些。aws可以借助cloudwatch这样的导入模板到grafana中。还是希望能将类似腾讯云云监控中的这些指标采集到prometheus中,但是这过程应该还很遥远grafana出图 prometheus查询语法这些东西有时间的好好研究一下。报警有必要进行分级别,收敛配置一下!_command: - "-redis.password-file=/redis_passwd.json
文章浏览阅读1k次。可以在此处(https://cloud.google.com/kubernetes-engine/docs/how-to/kube-dns)和此处(https://www.digitalocean.com/community/tutorials/an-introduction-to-the-kubernetes-dns-service)找到更多的详细信息。-or-ipvs/)和此处(https://arthurchiao.art/blog/cracking-k8s-node-proxy/)。_k8s默认命名空间
文章浏览阅读4.9k次,点赞11次,收藏32次。如果运行runc命令时提示:runc: error while loading shared libraries: libseccomp.so.2: cannot open shared object file: No such file or directory,则表明runc没有找到libseccomp,需要检查libseccomp是否安装,本次安装默认就可以查询到。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。所有主机均需要操作。_kubernetes 1.28
文章浏览阅读3.6w次,点赞118次,收藏144次。Canal 提供了网络功能,使得 Kubernetes 集群中的 Pod 可以相互通信,并与集群外部的服务进行通信。它通过网络插件的方式,为每个 Pod 分配唯一的 IP 地址,并管理网络流量的路由和转发。此外,Canal 还支持网络策略,用于定义 Pod 之间的通信规则和安全策略。Canal 基于 Calico 和 Flannel 项目,结合了二者的优点。它使用 Calico 的数据平面,提供高性能的网络转发和安全特性,同时使用 Flannel 的控制平面,实现 IP 地址管理和网络策略的配置。_k8s canal