kubernetes1.24+containerd搭建

来源:https://www.cnblogs.com/zhanchenjin/archive/2022/07/15/16481954.html
-Advertisement-
Play Games

java基礎知識圖解 軟體開發 軟體開發 軟體，即一系列按照特定順序組織的電腦數據和指令的集合。有系統軟體和應用軟體之分。 人機交互方式 圖形化界面(Graphical User Interface GUI)：這種方式簡單直觀，使用者易於接受，容易上手操作。 命令行方式(Command Line ...


 

1. 安裝containerd

 

　　k8s1.24不支持docker作為運行時容器，需要採用containerd

　　k8s1.24可以支持docker的遠程鏡像

1.1. 安裝

　　apt-get install containerd.io=1.6.6-1

1.2. 生成containerd預設配置文件(所有節點)

　　mv /etc/containerd/config.toml /etc/containerd/config.toml.orig

　　containerd config default > /etc/containerd/config.toml

1.3. 修改config.toml文件

  • endpoint加速器

　　　　[plugins."io.containerd.tracing.processor.v1.otlp"]

   　　　　　endpoint = "https://docker.mirrors.ustc.edu.cn/"

    　　  　　insecure = false

   　　  　　 protocol = “"

  • 修改sandbox_image

　　　　#sandbox_image = "k8s.gcr.io/pause:3.6"

    　　  sandbox_image = "registry.aliyuncs.com/google_containers/pause:3.7"

  • 修改Systemdcgroup

　　　　[plugins."io.containerd.grpc.v1.cri".containerd.runtimes.runc.options]

            　　IoUid = 0

            　　NoNewKeyring = false

            　　NoPivotRoot = false

            　　Root = ""

            　　ShimCgroup = ""

            　　SystemdCgroup = true

  • 修改root和state的路徑(看硬碟情況)

　　　　required_plugins = []

　　　　root = "/home/containerd/root"

　　　　state = "/home/containerd/state"

　　　　temp = ""

　　　　version = 2

1.4. 重啟containerd

　　systemctl restart containerd

1.5. 查看鏡像

　　sudo crictl image ls

　　 

1.6. 查看容器

　　sudo crictl ps

qiteck@server:~$ sudo crictl ps
WARN[0000] runtime connect using default endpoints: [unix:///var/run/dockershim.sock unix:///run/containerd/containerd.sock unix:///run/crio/crio.sock unix:///var/run/cri-dockerd.sock]. As the default settings are now deprecated, you should set the endpoint instead.
ERRO[0000] unable to determine runtime API version: rpc error: code = Unavailable desc = connection error: desc = "transport: Error while dialing dial unix /var/run/dockershim.sock: connect: no such file or directory"
WARN[0000] image connect using default endpoints: [unix:///var/run/dockershim.sock unix:///run/containerd/containerd.sock unix:///run/crio/crio.sock unix:///var/run/cri-dockerd.sock]. As the default settings are now deprecated, you should set the endpoint instead.
ERRO[0000] unable to determine image API version: rpc error: code = Unavailable desc = connection error: desc = "transport: Error while dialing dial unix /var/run/dockershim.sock: connect: no such file or directory"
CONTAINER           IMAGE               CREATED             STATE               NAME                ATTEMPT             POD ID              POD
ef543e51cfa0c       b008bec0252cb       5 hours ago         Running             omp                 0                   0fa6d165a2c35       omp-7696d4c57-2r6fl
706fb4abbdd02       cec7ba5a893a8       6 hours ago         Running             omp2                0                   2d63b9953013f       omp2-77689d4c5b-vmz2l
c589f102227c3       beac3508eacfe       30 hours ago        Running             account             0                   27abc088678b6       account-794585bbbb-p927k
433d94b8dd567       6358d98c814a7       31 hours ago        Running             game                0                   2c41d2412209b       game-7f44bb65f8-cjbrq
6b035346f216c       d9814b25e52ba       46 hours ago        Running             consul              0                   c390fa719ff8d       consul-server-2
6774c93cb6c59       d9814b25e52ba       46 hours ago        Running             consul              0                   6ab43d041c87a       consul-client-m7jwf
0134002a22882       d9814b25e52ba       46 hours ago        Running             consul              0                   54f1d07e965d1       consul-server-0
fb04bc0d7364e       2e858e385e1d1       46 hours ago        Running             gateway             0                   f0416f209774a       gateway-6d5fc9979f-99mmk
6d5fcf76bb4fa       4e845a6c446da       46 hours ago        Running             ota                 1                   baa0a202dab7c       ota-848849756c-zgz78
835c6b1d4d477       d349e70825881       46 hours ago        Running             advertise           1                   e6de5d636a3e1       advertise-74d996d7dd-w7fnh
46a2861697792       6e715ec1cdef6       46 hours ago        Running             file                1                   7e0ddf0e5d55d       file-7bbd64f796-frfff
f2a039b8e6cb6       94a191ac1e06d       46 hours ago        Running             device              1                   84607636a1206       device-75777b668c-n25kq
588286ca925e0       408c00be0844f       46 hours ago        Running             count               1                   5645003fb9953       count-679b5fb4bb-lfhbl
8a575ea4e8421       94a191ac1e06d       46 hours ago        Running             device              1                   20963e33e429d       device-75777b668c-w5dnx
086ed6c6e5be1       6e715ec1cdef6       46 hours ago        Running             file                1                   a11fcbbd7e88d       file-7bbd64f796-hn5pj
a83d8fc2ee00a       ef376b69a2934       46 hours ago        Running             sport               1                   f33a7bcafb377       sport-89bc7648f-4w46v
e7f76b6f1c84f       2f2f9a205f3c1       46 hours ago        Running             rcache              1                   ca980f5411acb       rcache-55f4549cb8-6cqmx
b709db2369dc1       ae97cd3e4622d       46 hours ago        Running             course              1                   96d75555bb645       course-694b96bd8d-6qqmk
97be53613824b       82a5eb76d151c       46 hours ago        Running             msg                 1                   1b2e5ea5c2aa8       msg-7dbd97bddd-mg6d4
546a1501a6ccd       49512e7b89bc1       46 hours ago        Running             erp                 1                   4d2c7b154361d       erp-6b879f8d7-krn5p
d598b2782d979       e237e85065092       46 hours ago        Running             kube-flannel        5                   26bb55717d190       kube-flannel-ds-rt8z5
2746d12ffc426       77b49675beae1       46 hours ago        Running             kube-proxy          5                   c4daf9ff2bba3       kube-proxy-ngnrv　　

2. 安裝kubeadm、kubelet 和 kubectl

  • kubeadm：用來初始化集群的指令。
  • kubelet：在集群中的每個節點上用來啟動 pod 和容器等。
  • kubectl：用來與集群通信的命令行工具。

　　安裝1.24.0版本

　　環境是ubuntu22.04

　　sudo apt-get update && sudo apt-get install -y apt-transport-https curl

 

　　需要能訪問google

　　curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | sudo apt-key add -

　　國內的源（此源可以使用，本次搭建使用的是此源）：

　　cat <<EOF >/etc/apt/sources.list.d/kubernetes.list

　　deb http://mirrors.ustc.edu.cn/kubernetes/apt kubernetes-xenial main

　　EOF

　　sudo apt-get update

　　sudo apt-get install -y kubelet=1.24.2-00 kubeadm=1.24.2-00 kubectl=1.24.2-00

　　sudo apt-mark hold kubelet kubeadm kubectl

 

　　安裝完，看下版本：

xxxx@iZ2zeabl8ta0jq1nd850igZ:~/program$ kubectl version

WARNING: This version information is deprecated and will be replaced with the output from kubectl version --short.  Use --output=yaml|json to get the full version.

Client Version: version.Info{Major:"1", Minor:"24", GitVersion:"v1.24.2", GitCommit:"f66044f4361b9f1f96f0053dd46cb7dce5e990a8", GitTreeState:"clean", BuildDate:"2022-06-15T14:22:29Z", GoVersion:"go1.18.3", Compiler:"gc", Platform:"linux/amd64"}

Kustomize Version: v4.5.4

The connection to the server localhost:8080 was refused - did you specify the right host or port

 

3. 關閉swap

　　如果不關閉kubernetes運行會出現錯誤， 即使安裝成功了，node重啟後也會出現kubernetes server運行錯誤。

  • 暫時關閉

　　　sudo swapoff -a 

  • 永久關閉

　　　編輯 /etc/fstab 文件

　　　vi /etc/fstab

 　　  將 /dev/mapper/centos-swap swap swap default 0 0 這一行前面加個 # 號將其註釋掉。

 

4. master主節點啟動

 

4.1. 清空數據

　　sudo rm -rf /var/lib/etcd

4.2. 生成預設配置文件

　　kubeadm config print init-defaults --kubeconfig ClusterConfiguration > kubeadm.yml

4.3. 修改配置文件

　　

 

　　name: logic需要是host的name，hostname獲取

　　name也可以隨便取，只要/etc/hosts裡面有配置地址就可以，

　　podSubnet的地址需要和flannel一致，因為是通過flannel來分配ip地址的, k8s會在各個子王上面劃分對應的ip網段

 

4.4. 指定配置文件初始化

　　

xxxx@iZ2zeabl8ta0jq1nd850igZ:~/program/k8s$ sudo kubeadm init --config kubeadm.yml

　　

　　提示這樣就初始化成功k8s的master主節點了

 

4.4. 查看pods：

xxxx@server:~$ sudo kubectl get pods --all-namespaces
NAMESPACE     NAME                                         READY   STATUS    RESTARTS        AGE
default       account-794585bbbb-p927k                     1/1     Running   0               29h
default       account-794585bbbb-xdlt7                     1/1     Running   0               29h
default       advertise-74d996d7dd-qtxzf                   1/1     Running   0               2d22h
default       advertise-74d996d7dd-w7fnh                   1/1     Running   1 (46h ago)     2d22h
default       consul-client-m7jwf                          1/1     Running   0               45h
default       consul-client-vpd94                          1/1     Running   0               45h
default       consul-server-0                              1/1     Running   0               45h
default       consul-server-1                              1/1     Running   0               45h
default       consul-server-2                              1/1     Running   0               45h
default       count-679b5fb4bb-hlqrj                       1/1     Running   0               2d22h
default       count-679b5fb4bb-lfhbl                       1/1     Running   1 (46h ago)     2d22h
default       course-694b96bd8d-6qqmk                      1/1     Running   1 (46h ago)     2d22h
default       course-694b96bd8d-j6lfw                      1/1     Running   0               2d22h

4.5. 拷貝授權登陸文件給當前用戶：

　　 配置文件設置kubectl的使用，包括連接api伺服器，證書許可權等等

　　K8s會用到當前用戶的許可權，可以拷貝配置文件，或者設置鏈接

　　拷貝：

　　　　mkdir -p $HOME/.kube

    　　  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config

   　　   sudo chown $(id -u):$(id -g) $HOME/.kube/config

　　軟連接：

　　　　mkdir -p $HOME/.kube

　　　　sudo ln -sf /etc/kubernetes/admin.conf ~/.kube/config

 

　　否則將報錯：The connection to the server localhost:8080 was refused - did you specify the right host or port?

　　如果按照前面這麼配置還有問題的話，需要註意區分sudo和非sudo的情況，非sudo的情況下要保證對/etc/kubernetes/admin.conf的許可權,

　　8080埠是kubectl預設請求的埠,這個是不安全的埠，安全的訪問方式是https://localhost:6443

 

4.6. 修改nodeport埠範圍：

　　Nodeport的預設埠範圍是30000-32767

　　很影響使用，把它改成1-65535

 

　　編輯 kube-apiserver.yaml文件

　　vim /etc/kubernetes/manifests/kube-apiserver.yaml

　　找到 --service-cluster-ip-range 這一行，在這一行的下一行增加 如下內容

　　- --service-node-port-range=1-65535

　　實際內容如下:

　　

　　最後 重啟 kubelet
　　sudo systemctl daemon-reload
　　sudo systemctl restart kubelet

 

4.7. 設置master節點可以部署pod

這是因為kubernetes出於安全考慮預設情況下無法在master節點上部署pod，

 

  • 1 node(s) had taint {node-role.kubernetes.io/master: } that the pod didn't tolerate.：

　　　　kubectl taint nodes --all node-role.kubernetes.io/master-

 

　　　　執行後將輸出如下信息（其中報錯可忽略）：

　　　　pastedGraphic.png

  • 1 node(s) had untolerated taint {node-role.kubernetes.io/control-plane: }. preemption: 0/1 nodes are available：

　　　　kubectl taint nodes --all node-role.kubernetes.io/control-plane-

 

4.8. 日誌查看

　　　　

　　systemctl status kubelet

　　journalctl -xefu kubelet

　　vim /var/log/pods/kube-system_kube-apiserver

 

4.9. POD網路差距flannel安裝

　　用來部署pod的地址

  • 　下載配置：

　　　　wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

  • 　修改配置文件：

　　　　確保kube-flannel.yml的這個欄位“Network”: “10.244.0.0/16" 與kubeadm.conf的podSubnet地址一致

  • 　部署：

　　　　kubectl apply -f kube-flannel.yml

  • 　檢測flannel進程是否啟動：

　　　　qiteck@logic:~/program/k8s_1.24.2$ ps -ef|grep flannel

　　　　root        4673    4326  0 09:16 ?        00:00:00 /opt/bin/flanneld --ip-masq --kube-subnet-mgr

  • 檢測flannel進程是否啟動：
xxxx@server:~$ sudo kubectl get pods -n kube-system
NAME                                         READY   STATUS    RESTARTS        AGE
coredns-74586cf9b6-8mbqz                     1/1     Running   3 (6d23h ago)   6d23h
coredns-74586cf9b6-hz48p                     1/1     Running   3 (6d23h ago)   6d23h
etcd-master.cluster.k8s                      1/1     Running   5 (6d23h ago)   6d23h
kube-apiserver-master.cluster.k8s            1/1     Running   0               3d1h
kube-controller-manager-master.cluster.k8s   1/1     Running   7 (2d23h ago)   6d23h
kube-flannel-ds-rt8z5                        1/1     Running   5 (46h ago)     3d
kube-flannel-ds-t6nrc                        1/1     Running   1 (6d23h ago)   6d23h
kube-proxy-ngnrv                             1/1     Running   5 (46h ago)     3d
kube-proxy-tjh8h                             1/1     Running   4 (6d23h ago)   6d23h
kube-scheduler-master.cluster.k8s            1/1     Running   7 (2d23h ago)   6d23h
  • 看下cni0網卡是否有了：
xxxx@server:~$ ifconfig
br-0480d1b7cefb: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 172.18.0.1  netmask 255.255.0.0  broadcast 172.18.255.255
        inet6 fe80::42:e1ff:fe6e:8e3c  prefixlen 64  scopeid 0x20<link>
        ether 02:42:e1:6e:8e:3c  txqueuelen 0  (Ethernet)
        RX packets 84662  bytes 119261797 (119.2 MB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 83663  bytes 121420317 (121.4 MB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

cni0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1450
        inet 10.244.1.1  netmask 255.255.255.0  broadcast 10.244.1.255
        inet6 fe80::b821:f2ff:fe1d:809a  prefixlen 64  scopeid 0x20<link>
        ether ba:21:f2:1d:80:9a  txqueuelen 1000  (Ethernet)
        RX packets 9016802  bytes 993361285 (993.3 MB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 6600536  bytes 1003467886 (1.0 GB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0
  • 看下是否有生成/run/flannel/subnet.env文件：

　　　　設置flannel插件的信息, 一旦flanneld啟動，它會自動將一些數據寫入/run/flannel/subnet.env

 

至此，k8s主節點已經搭建起來了。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • TDSQL PG版再升級，深度參與開源生態建設
    7月14日，騰訊雲資料庫TDSQL PG版的開源版本（開源代號TBase）迎來又一次重大升級：升級後的TDSQL PG V2.4.0版在2PC事務方面得到優化，易用性大幅提升，具備更強的分散式計算性能。 TDSQL PG版是一款具備HTAP（混合事務分析處理）能力、經過騰訊多年持續投入研發的資料庫產 ...
  • 什麼是回表，怎麼解決？
    表tbl有a,b,c三個欄位，其中a是主鍵，b上建了索引，然後編寫sql語句SELECT * FROM tbl WHERE a=1這樣不會產生回表，因為所有的數據在a的索引樹中均能找到SELECT * FROM tbl WHERE b=1這樣就會產生回表，因為where條件是b欄位，那麼會去b的索引 ...
  • HMS Core圖形圖像技術展現最新功能和應用場景，加速構建數智生活
    【2022年7月15日，杭州】HUAWEI Developer Day（華為開發者日，簡稱HDD）杭州站拉開帷幕。在數字經濟不斷發展的今天，開發者對圖形圖像的開發需求更加深入和多樣化，從虛擬環境重構到用戶交互再到視覺呈現，開發者對於數字世界存在一個完整的需求鏈條。在HMS Core.Sparkle應 ...
  • 華為通用卡證識別功能，一鍵實現多種卡綁定
    目前很多應用都有身份證、銀行卡一鍵識別功能，但面對各種會員卡、通行證、駕駛證、行駛證等日常生活中經常用到的卡證，因為不同商家的卡號位置，版面樣式各異，所以無法使用類似身份證的專門的身份證識別API，如果要在旅游類App、商超類App等手動輸入卡證號碼，不僅繁瑣還容易出錯，沒有很好的交互體驗。此時，使 ...
  • Vue生命周期和MVVM框架
    生命周期 組件從開始到結束的全過程 創建階段：beforeCreate、created 掛載階段：beforeMount、mounted 更新階段：beforeUpdate、updated 銷毀階段：beforeDestroy、destroyed 與動態組件有關的兩個特殊的鉤子： activated ...
  • 博客園美化教程
    自己的官方模板一直沒有弄，今天看到了一個不錯的主題網站，於是果斷尋求方法進行美化，看了不少博客園的博客，發現一些博客非常驚艷，這些基本都屬於自己定製的，於是開始自定義美化起來。 1. 開通javaScript許可權 進入管理>設置>勾選下麵的JS許可權，然後填寫一下開通的理由等待管理員進行審核通過。 2 ...
  • sass 混合指令 (Mixin Directives)詳解
    混合指令（Mixin）用於定義可重覆使用的樣式，避免了使用無語意的 class，比如 .float-left。混合指令可以包含所有的 CSS 規則，絕大部分 Sass 規則，甚至通過參數功能引入變數，輸出多樣化的樣式。 ...
  • 前端面試筆試題-高頻
    本文簡介 本文主要講解使用 NodeJS 操作 Redis ，順便會先帶一帶 Redis 基礎用法。 在寫本文時，使用 NPM 安裝的 Redis 依賴包已經到了 4.1.0 版本了。我以前用過 2.8 ，這兩個版本在用法上也是有差別的。可能一些老項目還在用老版本的依賴包。所以我會把2個版本的用法都 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類