הפעלת יציאה לקריאה בלבד של kubelet

אם יש לכם עומסי עבודה או כלי מעקב שעדיין מסתמכים על יציאת kubelet לקריאה בלבד, אתם יכולים להפעיל את היציאה בצמתים של אשכולות אדמין ואשכולות משתמשים ב-Google Distributed Cloud. היציאה מושבתת כברירת מחדל, לכן צריך להפעיל אותה על ידי פריסת DaemonSet עם הרשאות שמשנה את הפרמטרים של kubelet. היציאה לקריאה בלבד לא דורשת אימות או הרשאה, ולכן כדאי לעבור ליציאת kubelet המאובטחת 10250.

דרישות מוקדמות

לפני שמריצים את הסקריפט הבא לתיקון, חשוב לוודא ש-Google Distributed Cloud תקין. אתם יכולים להשתמש בפתרון הזה כדי לתקן אשכולות של אדמינים ואשכולות של משתמשים בגרסה 1.16 ואילך.

יצירת קובץ DaemonSet

יוצרים קובץ DaemonSet בשם patch.yaml בספרייה הנוכחית, שומרים אותו ומוסיפים לו את התוכן הבא:

apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: onprem-node-patcher
  namespace: kube-system
spec:
  selector:
    matchLabels:
      name: onprem-node-patcher
  updateStrategy:
    type: RollingUpdate
  template:
    metadata:
      labels:
        name: onprem-node-patcher
    spec:
      tolerations:
      - operator: Exists
      volumes:
      - name: host
        hostPath:
          path: /
      hostPID: true
      initContainers:
      - name: read-only-patcher
        image: "ubuntu"
        env:
        - name: KUBELET_READONLY_PORT
          value: "10255"
        # Number of 1G hugepages. Update the value as desired.
        command:
        - /bin/bash
        - -c
        - |
          set -xeuo pipefail
          configfile="/host/var/lib/kubelet/config.yaml"
          kubeletservice="/host/etc/systemd/system/kubelet.service"
          # $1: The read-only port for the kubelet to serve on with no
          #     authentication/authorization (set to 0 to disable)
          function set-readonly-port-in-config() {
            [[ "$#" -eq 1 ]] || return
            local readonlyport; readonlyport="$1"
            local actual; actual="$(grep readOnlyPort "${configfile}")"
            if [[ "${actual}" == "" ]]; then
              echo "readOnlyPort: ${readonlyport}" >> "${configfile}"
            else
              sed -E -i 's/readOnlyPort: [0-9]+/readOnlyPort: '"${readonlyport}"'/g' ${configfile}
            fi
            echo "Successfully append readOnlyPort: ${readonlyport} to ${configfile}"
          }
          sed -E -i 's/--read-only-port=[0-9]+/--read-only-port='"${KUBELET_READONLY_PORT}"'/g' ${kubeletservice}
          [[ -f ${configfile} ]] && set-readonly-port-in-config "${KUBELET_READONLY_PORT}"
          echo "Restarting kubelet..."
          chroot /host nsenter -a -t1 -- systemctl daemon-reload
          chroot /host nsenter -a -t1 -- systemctl restart kubelet.service
          echo "Success!"
        volumeMounts:
        - name: host
          mountPath: /host
        resources:
          requests:
            memory: 5Mi
            cpu: 5m
        securityContext:
          privileged: true
      containers:
      - image: gcr.io/google-containers/pause:3.2
        name: pause
      # Ensures that the pods will only run on the nodes having the correct
      # label.
      nodeSelector:
        "kubernetes.io/os": "linux"

עדכון מספר היציאה לקריאה בלבד

  • כדי לשנות את מספר היציאה, עורכים ידנית את משתנה הסביבה KUBELET_READONLY_PORT בקובץ ה-YAML של DaemonSet.

  • יציאת ברירת המחדל לקריאה בלבד היא 10255. אל תבחרו את 10250 כי היא תתנגש עם היציאה המאובטחת שהוגדרה מראש.

תיקון אשכול האדמין

   kubectl apply -f patch.yaml \
    --kubeconfig ADMIN_CLUSTER_KUBECONFIG

תיקון אשכול המשתמשים

   kubectl apply -f patch.yaml \
    --kubeconfig USER_CLUSTER_KUBECONFIG

שחזור

  • כדי להשבית את היציאה לקריאה בלבד, עורכים ידנית את משתנה הסביבה KUBELET_READONLY_PORT בקובץ ה-YAML של DaemonSet.

  • אחרי ששומרים את השינויים, ה-DaemonSet יופעל מחדש כדי לשנות את ה-kubelet בהתאם.

נקודות שצריך לשים לב אליהן

  • מחזור החיים של התיקון הזה זהה לזה של האפליקציות המותקנות של צד שלישי. אפשר להריץ אותו בכל שלב כפעולה ביום השני. אבל יכול להיות שהיא לא תישמר אחרי שתיצרו מחדש את האשכול. כדי שהשינוי הזה יהיה קבוע, צריך לפרוס את ה-DaemonSet הזה כשלב בפעולה שאחרי האיניציאליזציה של Google Distributed Cloud.

  • אחרי הרצה אחת, צריך לשנות את קובץ התצורה של kubelet ולטעון אותו מחדש. אפשר להריץ את הפקודה kubectl delete -f patch.yaml כדי לנקות את משאבי DaemonSet.

  • אי אפשר להשתמש בתיקון הזה ב-Google Distributed Cloud שפועל ב-Windows.

  • ‫Kubernetes לא מבצע בדיקות אימות או הרשאה ביציאה הלא מאובטחת הזו 10255. אם תפעילו אותה, נתוני kubelet לא יהיו מוגנים ויהיו חשופים למשתמשים לא מורשים. ה-kubelet משרת את אותה נקודת קצה ביציאה המאומתת והמאובטחת יותר 10250, כדאי לשקול לעבור ליציאה המאובטחת הזו.