מעקב אחרי אשכול Connect

במאמר הזה מוסבר איך לעקוב אחרי אשכול Connect באמצעות צפייה במדדים וביומנים של אשכול Connect והמחברים שלו.

הצגת מדדים של אשכול Connect

כדי לראות את המדדים של אשכול Connect והמחברים שלו, מבצעים את השלבים הבאים.

  1. עוברים לדף שירות מנוהל ל-Apache Kafka > Connect clusters (חיבור אשכולות).

    מעבר אל Connect clusters

  2. לוחצים על השם של אשכול Connect.

  3. לוחצים על הכרטיסייה מעקב. בכרטיסייה Monitoring מוצגים תרשימים של המדדים הבאים:

    • שימוש ב-CPU של העובד. השימוש במעבד של העובדים באשכול Connect.

    • השימוש בזיכרון של העובד. השימוש בזיכרון של העובדים באשכול Connect.

    • קצב הבייטים הנכנסים של המחבר. המספר הממוצע של בייטים שנקראו ממקורות, בכל שנייה.

    • קצב העברת הבייטים היוצאים של המחבר. המספר הממוצע של בייטים שנכתבו או נשלחו למאגרי מידע, בכל שנייה.

  4. אופציונלי: כדי לראות אחד מהמדדים האלה בMetrics Explorer, בוחרים באפשרות More chart options (אפשרויות נוספות לתרשים) בתרשים ולוחצים על View in Metrics Explorer (הצגה ב-Metrics Explorer).

הנתונים על מעבד העובד וזיכרון העובד שימושיים למעקב אחרי ניצול המשאבים הכולל באשכול Connect. יצירת מחברים חדשים מגדילה את השימוש במעבד ובזיכרון.

המדדים של מחבר מוצגים בכרטיסייה הזו באופן מצטבר עבור כל המחברים שפועלים באשכול. אפשר להשתמש במדדים האלה כדי לעקוב אחרי כמות הנתונים שנקראים או נשלחים בכל שנייה.

הצגת מדדים נוספים ב-Metrics Explorer

כדי לראות מדדים נוספים של אשכול Connect, משתמשים ב-Metrics Explorer באופן הבא:

  1. עוברים לדף Metrics explorer ב-Cloud Monitoring >.

    כניסה לדף Metrics Explorer

  2. לוחצים על בחירת מדד.

  3. בקטע Active resources, בוחרים מדד אחד או יותר מהקטגוריות Apache Kafka Connect Cluster ו-Apache Kafka Connect Connector.

צפייה ביומנים של אשכול Connect

אפשר לראות את היומנים של אשכול Connect והמחברים שלו בדף Connect clusters או באמצעות Logs Explorer.

צפייה ביומני האשכול

כדי לראות את היומנים של אשכול Connect, מבצעים את השלבים הבאים:

  1. עוברים לדף שירות מנוהל ל-Apache Kafka > Connect clusters (חיבור אשכולות).

    מעבר אל Connect clusters

  2. לוחצים על השם של אשכול Connect.

  3. לוחצים על יומנים. בכרטיסייה Logs מוצגים יומנים של אשכול Connect שנבחר. היומנים האלה מתעדכנים בזמן אמת.

  4. אופציונלי: כדי לראות יומנים היסטוריים, משתמשים ב-Logs Explorer. בכרטיסייה Logs, לוחצים על View in Logs Explorer. כלי Logs Explorer נפתח עם שאילתה שאוכלסה מראש.

צפייה ביומני המחברים

כדי לראות את היומנים של מחבר:

  1. עוברים לדף שירות מנוהל ל-Apache Kafka > Connect clusters (חיבור אשכולות).

    מעבר אל Connect clusters

  2. לוחצים על השם של אשכול Connect.

  3. לוחצים על משאבים.

  4. לוחצים על השם של המחבר.

  5. לוחצים על יומנים. בכרטיסייה Logs מוצגים יומנים של המחבר. היומנים האלה מתעדכנים בזמן אמת.

    בתצוגה הזו מסוננות רשומות ביומן שמכילות את שם המחבר. יכול להיות שהיא לא תכלול את כל היומנים שקשורים למחבר. כדי לראות את כל היומנים, אפשר לעיין ביומנים של אשכול Connect.

  6. אופציונלי: כדי לראות יומנים היסטוריים, משתמשים ב-Logs Explorer. בכרטיסייה Logs, לוחצים על View in Logs Explorer. כלי Logs Explorer נפתח עם שאילתה שאוכלסה מראש.

צפייה ביומנים באמצעות Logs Explorer

ב-Logs Explorer, אפשר לשלוח שאילתה כדי לחפש יומנים של אשכול Connect באמצעות השאילתה הבאה:

resource.type="managedkafka.googleapis.com/ConnectCluster"
resource.labels.cluster_id="CONNECT_CLUSTER_NAME"
resource.labels.location="LOCATION"

מחליפים את מה שכתוב בשדות הבאים:

  • CONNECT_CLUSTER_NAME: השם של אשכול Connect
  • LOCATION: המיקום של אשכול Connect

יומני אשכול החיבור מכילים את כל היומנים שהופקו על ידי האשכול, כולל רשומות יומן של המחברים.

מידע נוסף על כתיבת שאילתות ב-Logs Explorer מופיע במאמר יצירה ושמירה של שאילתות באמצעות שפת השאילתות של Logging.

המאמרים הבאים