Membuat cluster bersama untuk menjalankan workload container

Dokumen ini menjelaskan cara membuat cluster Kubernetes bersama di zona Google Distributed Cloud (GDC) dengan air gap. Cluster bersama mencakup beberapa project, dan mencakup layanan terkelola GDC yang komprehensif yang menawarkan konfigurasi cluster Kubernetes yang sangat spesifik dan kurang dapat dikonfigurasi dibandingkan cluster standar. Untuk mengetahui informasi selengkapnya tentang cluster standar, lihat Konfigurasi cluster Kubernetes.

Cluster bersama adalah resource zona dan tidak dapat mencakup beberapa zona. Untuk mengoperasikan cluster di universe multi-zona, Anda harus membuat cluster secara manual di setiap zona.

Dokumen ini ditujukan untuk audiens seperti developer aplikasi dalam grup operator aplikasi, yang bertanggung jawab mengelola workload container dalam organisasi mereka. Untuk mengetahui informasi selengkapnya, lihat Audiens untuk dokumentasi GDC dengan air gap.

Sebelum memulai

  • Untuk mendapatkan izin yang diperlukan untuk membuat cluster bersama, minta IAM Org Admin untuk memberi Anda peran User Cluster Admin (user-cluster-admin). Peran ini tidak terikat ke namespace.

  • Untuk menggunakan API atau Terraform guna membuat cluster bersama, buat file kubeconfig server API zona untuk menghosting cluster Anda. Tetapkan variabel lingkungan MANAGEMENT_API_SERVER ke jalur kubeconfig. Untuk mengetahui informasi selengkapnya, lihat Resource server API pengelolaan zona.

  • Tinjau batas cluster untuk pertimbangan resource.

Merencanakan blok CIDR pod

Untuk mengalokasikan blok CIDR pod berukuran sesuai untuk workload, Anda harus menghitung jumlah alamat IP yang diperlukan untuk cluster Kubernetes sebelum membuatnya. Sebagian besar parameter jaringan tidak dapat diubah setelah cluster dibuat.

Cluster Kubernetes mengikuti logika berikut saat mengalokasikan alamat IP:

  • Kubernetes menetapkan blok CIDR /24 yang terdiri dari 256 alamat ke setiap node. Jumlah ini sesuai dengan jumlah maksimum default 110 pod per node untuk cluster Kubernetes.
  • Ukuran blok CIDR yang ditetapkan ke sebuah node bergantung pada nilai pod maksimum per node.
  • Blok selalu berisi alamat setidaknya dua kali lebih banyak dari jumlah maksimum pod per node.

Lihat contoh berikut untuk memahami cara nilai default Per node mask size= /24 dihitung untuk mengakomodasi 110 pod:

Maximum pods per node = 110
Total number of IP addresses required = 2 * 110 = 220

Per node mask size = /24
Number of IP addresses in a /24 = 2(32 - 24) = 256

Tentukan mask CIDR pod yang diperlukan untuk dikonfigurasi untuk cluster Kubernetes berdasarkan jumlah node yang diperlukan. Rencanakan penambahan node di masa mendatang ke cluster saat mengonfigurasi rentang CIDR:

  Total number of nodes supported = 2(Per node mask size - pod CIDR mask)

Mengingat ada Ukuran mask per node= /24 default , lihat tabel berikut yang memetakan mask CIDR pod ke jumlah node yang didukung.

Masker CIDR Pod Penghitungan: 2(Ukuran mask per node - mask CIDR) Jumlah maksimum node yang didukung, termasuk node bidang kontrol
/21 2(24 - 21) 8
/20 2(24-20) 16
/19 2(24 - 19) 32
/18 2(24 - 18) 64

Setelah menghitung blok CIDR pod untuk cluster Kubernetes, konfigurasikan blok tersebut sebagai bagian dari alur kerja pembuatan cluster di bagian berikutnya.

Membuat cluster bersama

Selesaikan langkah-langkah berikut untuk membuat cluster Kubernetes bersama:

Konsol

  1. Di pemilih project, pilih organisasi Anda.

    Cluster bersama adalah resource cakupan organisasi. Jika memilih project, Anda akan membuat cluster standar, yang dicakup oleh project. Untuk mengetahui informasi selengkapnya, lihat hierarki resource.

  2. Di menu navigasi, pilih Kubernetes Engine > Clusters.

  3. Klik Create Cluster.

  4. Di kolom Name, tentukan nama untuk cluster.

  5. Pilih versi Kubernetes untuk cluster.

  6. Pilih zona tempat membuat cluster.

  7. Klik Attach Project dan pilih project yang ada untuk dilampirkan ke cluster Anda. Kemudian, klik Simpan. Anda dapat melampirkan atau melepaskan project setelah membuat cluster dari halaman detail project. Anda harus memiliki project yang terpasang ke cluster sebelum men-deploy workload container.

    Membuat cluster menggunakan konsol.

  8. Klik Berikutnya.

  9. Konfigurasikan setelan jaringan untuk cluster Anda. Anda tidak dapat mengubah setelan jaringan ini setelah membuat cluster. Protokol Internet default dan satu-satunya yang didukung untuk cluster Kubernetes adalah Internet Protocol versi 4 (IPv4).

    1. Jika Anda ingin membuat node load balancer khusus, masukkan jumlah node yang akan dibuat. Secara default, Anda menerima nol node, dan traffic load balancer berjalan melalui node kontrol.

    2. Pilih Service CIDR (Classless Inter-Domain Routing) yang akan digunakan. Layanan yang Anda deploy, seperti load balancer, dialokasikan alamat IP dari rentang ini.

    3. Pilih Pod CIDR yang akan digunakan. Cluster mengalokasikan alamat IP dari rentang ini ke pod dan VM Anda.

    4. Klik Berikutnya.

  10. Tinjau detail node pool default yang dibuat otomatis untuk cluster. Klik Edit untuk mengubah node pool default.

  11. Untuk membuat node pool tambahan, pilih Add Node Pool. Saat mengedit node pool default atau menambahkan node pool baru, Anda dapat menyesuaikannya dengan opsi berikut:

    1. Tetapkan nama untuk node pool. Anda tidak dapat mengubah nama setelah membuat node pool.
    2. Tentukan jumlah worker node yang akan dibuat di node pool.

    3. Pilih class mesin yang paling sesuai dengan persyaratan workload Anda. Lihat daftar setelan berikut:

      • Jenis mesin
      • CPU
      • Memori

    4. Klik Simpan.

  12. Klik Create untuk membuat cluster.

Pembuatan cluster bersama dapat memerlukan waktu hingga 90 menit.

API

  1. Buat resource kustom Cluster:

    kubectl --kubeconfig MANAGEMENT_API_SERVER apply -f - <<EOF
apiVersion: cluster.gdc.goog/v1
kind: Cluster
metadata:
  name: CLUSTER_NAME
  namespace: platform
spec:
  clusterNetwork:
    podCIDRSize: POD_CIDR
    serviceCIDRSize: SERVICE_CIDR
  initialVersion:
    kubernetesVersion: KUBERNETES_VERSION
  nodePools:
  - machineTypeName: MACHINE_TYPE
    name: NODE_POOL_NAME
    nodeCount: NUMBER_OF_WORKER_NODES
    taints: TAINTS
    labels: LABELS
    acceleratorOptions:
      gpuPartitionScheme: GPU_PARTITION_SCHEME
  releaseChannel:
    channel: UNSPECIFIED
EOF

    Ganti kode berikut:

    • MANAGEMENT_API_SERVER: jalur kubeconfig server API zonal.
    • CLUSTER_NAME: nama cluster. Nama cluster tidak boleh diakhiri dengan -system. Akhiran -system dicadangkan untuk cluster yang dibuat oleh GDC.
    • POD_CIDR: ukuran rentang jaringan tempat alamat IP virtual pod dialokasikan. Jika tidak ditetapkan, nilai default 21 akan digunakan.
    • SERVICE_CIDR: ukuran rentang jaringan tempat alamat IP virtual layanan dialokasikan. Jika tidak ditetapkan, nilai default 23 akan digunakan.
    • KUBERNETES_VERSION: versi Kubernetes cluster, seperti 1.26.5-gke.2100. Untuk mencantumkan versi Kubernetes yang tersedia untuk dikonfigurasi, lihat Mencantumkan versi Kubernetes yang tersedia untuk cluster.
    • MACHINE_TYPE: jenis mesin untuk worker node dari node pool. Lihat jenis mesin yang tersedia untuk mengetahui apa saja yang dapat dikonfigurasi.
    • NODE_POOL_NAME: nama node pool.
    • NUMBER_OF_WORKER_NODES: jumlah node worker yang akan disediakan di node pool.
    • TAINTS: taint yang akan diterapkan ke node dari node pool ini. Kolom ini bersifat opsional.
    • LABELS: label yang akan diterapkan ke node dari node pool ini. Objek ini berisi daftar key-value pair. Kolom ini bersifat opsional.
    • GPU_PARTITION_SCHEME: skema partisi GPU, jika Anda menjalankan workload GPU. Kolom ini bersifat opsional. Contoh, mixed-2. GPU tidak dipartisi jika kolom ini tidak ditetapkan. Untuk mengetahui informasi selengkapnya tentang profil Multi-Instance GPU (MIG) yang tersedia, lihat Profil MIG yang didukung.

    Pembuatan cluster bersama dapat memerlukan waktu hingga 90 menit.

  2. Buat resource kustom ProjectBinding:

    kubectl --kubeconfig MANAGEMENT_API_SERVER apply -f - <<EOF
apiVersion: resourcemanager.gdc.goog/v1
kind: ProjectBinding
metadata:
  name: CLUSTER_NAME-PROJECT_NAME
  namespace: platform
  labels:
    resourcemanager.gdc.goog/projectbinding-for-user-project: "true"
spec:
  clusterRef:
    name: CLUSTER_NAME
  selector:
    nameSelector:
      matchNames:
      - PROJECT_NAME
EOF

    Ganti kode berikut:

    • MANAGEMENT_API_SERVER: jalur kubeconfig server API zonal.
    • CLUSTER_NAME: nama cluster.
    • PROJECT_NAME: nama project yang akan diikat. Setiap resource ProjectBinding hanya dapat dipetakan ke satu cluster. Jika sebuah project memerlukan akses ke beberapa cluster, ProjectBinding yang unik harus dibuat untuk setiap cluster.

    Anda harus melampirkan project ke cluster sebelum developer dapat men-deploy workload container ke cluster.

Terraform

  1. Dalam file konfigurasi Terraform, sisipkan cuplikan kode berikut untuk membuat resource kustom Cluster:

    provider "kubernetes" {
  config_path = "MANAGEMENT_API_SERVER"
}

resource "kubernetes_manifest" "CLUSTER_RESOURCE_NAME" {
  manifest = {
    "apiVersion" = "cluster.gdc.goog/v1"
    "kind" = "Cluster"
    "metadata" = {
      "name" = "CLUSTER_NAME"
      "namespace" = "platform"
    }
    "spec" = {
      "clusterNetwork" = {
        "podCIDRSize" = "POD_CIDR"
        "serviceCIDRSize" = "SERVICE_CIDR"
      }
      "initialVersion" = {
        "kubernetesVersion" = "KUBERNETES_VERSION"
      }
      "nodePools" = [{
        "machineTypeName" = "MACHINE_TYPE"
        "name" = "NODE_POOL_NAME"
        "nodeCount" = "NUMBER_OF_WORKER_NODES"
        "taints" = "TAINTS"
        "labels" = "LABELS"
        "acceleratorOptions" = {
          "gpuPartitionScheme" = "GPU_PARTITION_SCHEME"
        }
      }]
      "releaseChannel" = {
        "channel" = "UNSPECIFIED"
      }
    }
  }
}

    Ganti kode berikut:

    • MANAGEMENT_API_SERVER: jalur kubeconfig server API zonal.
    • CLUSTER_RESOURCE_NAME: nama resource Terraform unik dari cluster, seperti cluster-1. Nama ini digunakan oleh Terraform untuk mengidentifikasi cluster Anda, dan tidak digunakan oleh GDC.
    • CLUSTER_NAME: nama cluster. Nama cluster tidak boleh diakhiri dengan -system. Akhiran -system dicadangkan untuk cluster yang dibuat oleh GDC.
    • POD_CIDR: ukuran rentang jaringan tempat alamat IP virtual pod dialokasikan. Jika tidak ditetapkan, nilai default 21 akan digunakan.
    • SERVICE_CIDR: ukuran rentang jaringan tempat alamat IP virtual layanan dialokasikan. Jika tidak ditetapkan, nilai default 23 akan digunakan.
    • KUBERNETES_VERSION: versi Kubernetes cluster, seperti 1.26.5-gke.2100. Untuk mencantumkan versi Kubernetes yang tersedia untuk dikonfigurasi, lihat Mencantumkan versi Kubernetes yang tersedia untuk cluster.
    • MACHINE_TYPE: jenis mesin untuk worker node dari node pool. Lihat jenis mesin yang tersedia untuk mengetahui apa saja yang dapat dikonfigurasi.
    • NODE_POOL_NAME: nama node pool.
    • NUMBER_OF_WORKER_NODES: jumlah node worker yang akan disediakan di node pool.
    • TAINTS: taint yang akan diterapkan ke node dari node pool ini. Kolom ini bersifat opsional.
    • LABELS: label yang akan diterapkan ke node dari node pool ini. Objek ini berisi daftar key-value pair. Kolom ini bersifat opsional.
    • GPU_PARTITION_SCHEME: skema partisi GPU, jika Anda menjalankan workload GPU. Kolom ini bersifat opsional. Contoh, mixed-2. GPU tidak dipartisi jika kolom ini tidak ditetapkan. Untuk mengetahui informasi selengkapnya tentang profil Multi-Instance GPU (MIG) yang tersedia, lihat Profil MIG yang didukung.

  2. Dalam file konfigurasi Terraform, sisipkan cuplikan kode berikut untuk membuat resource kustom ProjectBinding:

    provider "kubernetes" {
  config_path = "MANAGEMENT_API_SERVER"
}

resource "kubernetes_manifest" "PROJECT_BINDING_RESOURCE_NAME" {
  manifest = {
    "apiVersion" = "resourcemanager.gdc.goog/v1"
    "kind" = "ProjectBinding"
    "metadata" = {
      "name" = "CLUSTER_NAME-PROJECT_NAME"
      "namespace" = "platform"
      "labels" = {
        "resourcemanager.gdc.goog/projectbinding-for-user-project" = "true"
      }
    }
    "spec" = {
      "clusterRef" = {
        "name" = "CLUSTER_NAME"
      }
      "selector" = {
        "nameSelector" = {
          "matchNames" = [
            "PROJECT_NAME",
          ]
        }
      }
    }
  }
}

    Ganti kode berikut:

    • MANAGEMENT_API_SERVER: jalur kubeconfig server API zonal.
    • PROJECT_BINDING_RESOURCE_NAME: nama resource Terraform dari binding project, seperti project-binding-1. Nama ini digunakan oleh Terraform untuk mengidentifikasi binding project Anda, dan tidak digunakan oleh GDC.
    • CLUSTER_NAME: nama cluster.
    • PROJECT_NAME: nama project yang akan diikat. Setiap resource ProjectBinding hanya dapat dipetakan ke satu cluster. Jika sebuah project memerlukan akses ke beberapa cluster, ProjectBinding yang unik harus dibuat untuk setiap cluster.

    Anda harus melampirkan project ke cluster sebelum developer dapat men-deploy workload container ke cluster.

  3. Terapkan resource kustom baru menggunakan Terraform:

    terraform apply

Pembuatan cluster bersama dapat memerlukan waktu hingga 90 menit.

Langkah berikutnya