RK3588搭建k8s_rk3588 集群

RK3588内核版本：Ubuntu 20.04.6 LTS (GNU/Linux 5.10.160 aarch64)

欲安装docker和k8s版本：

Kubernetes-1.22.10
Docker-20.10
1
2

1.卸载原有docker,k8s(如果原本没有安装可跳过)

卸载docker

卸载k8s

2.修改hostname和hosts两个文件

root@firefly:~/k8s# cat /etc/hostname
firefly  #唯一的用户名
root@firefly:~/k8s# cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
#我删掉了奇怪的 127.0.1.1
127.0.0.1 localhost
192.168.31.151 firefly
1
2
3
4
5
6
7
8

3.安装docker

参考安装网址

第一步、卸载旧版本docker

sudo apt-get remove docker docker-engine docker.io containerd runc
1

第二步、更新及安装工具软件

1、更新系统里的所有的能更新的软件

sudo apt-get update
1

2、安装几个工具软件

sudo apt-get install \
    apt-transport-https \
    ca-certificates \
    curl \
    gnupg \
    lsb-release
1
2
3
4
5
6

3、增加一个docker的官方GPG key：

gpgkey：是用来验证软件的真伪 ——防伪的

curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /usr/share/keyrings/docker-archive-keyring.gpg
1

4、下载仓库文件，注意修改为arch=arm64

echo \
  "deb [arch=arm64 signed-by=/usr/share/keyrings/docker-archive-keyring.gpg] https://download.docker.com/linux/ubuntu \
  $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
1
2
3

第三步、安装docker，注意版本，需要和k8s版本搭配，

1、再次更新系统

sudo apt-get update
1

2、安装docker-ce软件，需要安装20.10的，其他版本不行

sudo apt-get install docker-ce=5:20.10.* docker-ce-cli=5:20.10.* containerd.io
1

第四步、测试运行一个docker容器

sudo docker run hello-world
1

第五步，有一部需要配置，不然后面安装k8s可能会报错

参考如下，参考，具体如下：

vim /etc/docker/daemon.json

{
  "exec-opts": ["native.cgroupdriver=systemd"]
}
1
2
3
4
5

重启docker

systemctl restart docker
1

4.k8s安装

参考文档，但这个文档的镜像下载部分存在问题，已解决

添加证书

curl https://mirrors.aliyun.com/kubernetes/apt/doc/apt-key.gpg | apt-key add - 
1

添加apt源

cat <<EOF >/etc/apt/sources.list.d/kubernetes.list
deb https://mirrors.aliyun.com/kubernetes/apt/ kubernetes-xenial main
EOF
1
2
3

apt-get update
1

然后开始准备安装

apt-get install -y kubelet=1.22.10-00 kubeadm=1.22.10-00 kubectl=1.22.10-00
1

查看所需镜像

kubeadm config images list --kubernetes-version=v1.22.10
1

所需镜像如下所示：所需的镜像coredns是有v的

k8s.gcr.io/kube-apiserver:v1.22.10
k8s.gcr.io/kube-controller-manager:v1.22.10
k8s.gcr.io/kube-scheduler:v1.22.10
k8s.gcr.io/kube-proxy:v1.22.10
k8s.gcr.io/pause:3.5
k8s.gcr.io/etcd:3.5.0-0
k8s.gcr.io/coredns/coredns:v1.8.4
1
2
3
4
5
6
7

拉取国内镜像

docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-apiserver:v1.22.10
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-controller-manager:v1.22.10
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-scheduler:v1.22.10
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-proxy:v1.22.10
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.5
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/etcd:3.5.0-0
docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/coredns:1.8.4

1
2
3
4
5
6
7
8

然后更改名字

docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/kube-apiserver:v1.22.10 k8s.gcr.io/kube-apiserver:v1.22.10
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/kube-controller-manager:v1.22.10 k8s.gcr.io/kube-controller-manager:v1.22.10
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/kube-scheduler:v1.22.10 k8s.gcr.io/kube-scheduler:v1.22.10
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/kube-proxy:v1.22.10 k8s.gcr.io/kube-proxy:v1.22.10
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.5 k8s.gcr.io/pause:3.5
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/etcd:3.5.0-0 k8s.gcr.io/etcd:3.5.0-0
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/coredns:1.8.4 k8s.gcr.io/coredns/coredns:v1.8.4
1
2
3
4
5
6
7

然后初始化，apiserver-advertise-address可以改为自己的ip地址

kubeadm init --kubernetes-version=v1.22.10 --pod-network-cidr=10.244.0.0/16 --service-cidr=10.96.0.0/12 --ignore-preflight-errors=all --apiserver-advertise-address=192.168.31.151
1

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
1
2
3

安装网络组件

kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
1

如果无法访问，就先下载下来，然后ssh传到rk3588中

等待几分钟，然后kubectl get node即可