אבחון של אשכולות GKE

‫Managed Service for Apache Spark מספק פקודה gcloud CLI dataproc clusters diagnose כדי לעזור לכם לפתור בעיות באשכולות ובמשימות של Managed Service for Apache Spark ב-GKE. הפקודה הזו אוספת ומכניסה לארכיון קובצי תצורה, יומנים ופלט שקשורים לאשכול, ואז מעלה את הארכיון לדלי הזמני של Cloud Storage שציינתם כשיצרתם את האשכול של Managed Service for Apache Spark ב-GKE.

אבחון קובץ ארכיון

בטבלאות הבאות מפורטים המדדים ומידע נוסף שכלולים בקובץ הארכיון של הפקודה dataproc clusters diagnose.

פרטי המערכת

פריט מיקום הארכיון
מדדי צמתים של GKE שבהם פועלים פודים וירטואליים של Managed Service for Apache Spark ב-GKE:
  • שימוש במעבד
  • ניצול הזיכרון
/system/NODE_NAME.json
מדדי רשת וסטטוס של מערכת הקבצים של פודים שפועלים:
  • שימוש במעבד
  • ניצול הזיכרון
  • סטטוס הרשת
  • סטטוס מערכת הקבצים
/system/POD_NAME.json

פרטי ההגדרות האישיות

פריט מיקום הארכיון
‫Cluster configmap /conf/configmap
פריסת Kubernetes /conf/deployment
בקרת גישה מבוססת-תפקידים (RBAC)
  • /conf/role
  • /conf/rolebind
  • /conf/serviceaccount

יומנים

פריט מיקום הארכיון
יומן הסוכן /logs/agent.log
יומן מנוע Spark /logs/sparkengine.log
יומני עבודות של מנהל התקנים של Spark שפועל והושלם ב-24 השעות האחרונות /logs/DRIVER_ID

פרטי המשרה וה-Pod

פריט מיקום הארכיון
אובייקט JobAttempt /jobattempts
אובייקט Kubernetes Pod /pods

המאמרים הבאים