משרות וטריגרים של משרות

משימה היא פעולה ש-Sensitive Data Protection מריץ כדי לסרוק תוכן ולחפש מידע אישי רגיש, או כדי לחשב את הסיכון לשחזור פרטי זיהוי. בכל פעם שאתם מבקשים מ-Sensitive Data Protection לבדוק את הנתונים, נוצר ומופעל משאב של משימה.

נכון לעכשיו, יש שני סוגים של משימות ב-Sensitive Data Protection:

  • משימות בדיקה בודקות אם יש בתוכן מידע רגיש לפי הקריטריונים שהגדרתם, ויוצרות דוחות סיכום של המיקום וסוג המידע הרגיש שקיים.
  • משימות של ניתוח סיכונים מנתחות נתונים שהוסרו מהם פרטי הזיהוי, ומחזירות מדדים לגבי הסבירות שניתן יהיה לשחזר את פרטי הזיהוי של הנתונים.

כדי לתזמן את המועד שבו Sensitive Data Protection יריץ משימות, אתם יכולים ליצור טריגרים של משימות. טריגר של משימה הוא אירוע שמפעיל באופן אוטומטי את היצירה של משימות ב-Sensitive Data Protection, כדי לסרוק מאגרי אחסון ב- Google Cloud , כולל קטגוריות של Cloud Storage, טבלאות ב-BigQuery וסוגים של Datastore.

טריגרים של סריקות מאפשרים לתזמן סריקות על ידי הגדרת מרווחי זמן שבהם כל טריגר מופעל. אפשר להגדיר אותם כך שיחפשו ממצאים חדשים מאז הסריקה האחרונה, כדי לעזור לעקוב אחרי שינויים או תוספות בתוכן, או כדי ליצור דוחות ממצאים עדכניים. טריגרים מתוזמנים פועלים במרווח זמן שאתם מגדירים, מיום אחד ועד 60 ימים.

מתי כדאי להשתמש בטריגרים של משימות

הנה כמה תרחישי שימוש נפוצים:

  • אוטומציה של סריקות תאימות חוזרות: תזמון סריקות בדיקה קבועות בקטגוריות של Cloud Storage ובטבלאות ב-BigQuery כדי לשמור על חשיפה רציפה למידע רגיש שמאוחסן לאחרונה.
  • אופטימיזציה של עלויות הבדיקה באחסון דינמי: מגדירים כללים של טווחי זמן בטריגרים של משימות כדי לסרוק רק תוכן שנוסף או שונה מאז מחזור הסריקה הקודם.
  • מעקב אחרי שינויים מתמשכים בנתונים במסדי נתונים בסביבת הייצור: מעקב אחרי שינויים בחשיפה של מידע רגיש לאורך זמן, על ידי יצירת סיכומים תקופתיים של הממצאים לבדיקת מצב הסיכון.
  • תיאום עם צינורות עיבוד נתונים מבוססי-אירועים: הפעלת משימות ביקורת בתגובה לאירועי העלאה ב-Cloud Storage או לאבני דרך בפייפליין אוטומטי של ETL.

השלבים הבאים

בנושאים הבאים תוכלו לקרוא מידע נוסף על יצירה, עריכה והפעלה של משימות וטריגרים של משימות:

בנוסף, אפשר להיעזר במדריך למתחילים הבא:

האובייקט JobTrigger

טריגר של משימה מיוצג ב-DLP API על ידי האובייקט JobTrigger.

שדות תצורה של טריגרים של משימות

כל JobTrigger מכיל כמה שדות תצורה, כולל:

  • השם והשם המוצג של הטריגר, ותיאור.
  • אוסף של אובייקטים מסוג Trigger, שכל אחד מהם מכיל אובייקט מסוג Schedule שמגדיר את תדירות הסריקה בשניות.
  • אובייקט InspectJobConfig שמכיל את פרטי ההגדרות של המשימה שהופעלה.
  • ערך מסוג Status שמציין אם הטריגר פעיל כרגע.
  • שדות של חותמות זמן שמייצגים את זמני היצירה, העדכון וההפעלה האחרונה.
  • אוסף של אובייקטים מסוג Error, אם נמצאו כאלה כשהטריגר הופעל.

שיטות להפעלת משימות

כל אובייקט JobTrigger כולל גם כמה שיטות מובנות. בעזרת השיטות האלה, אתם יכולים:

זמן האחזור של המשימה

אין יעדים למדידת רמת השירות (SLO) שמובטחים למשימות ולטריגרים של משימות. זמן האחזור מושפע מכמה גורמים, כולל כמות הנתונים לסריקה, מאגר האחסון שנסרק, הסוג והמספר של סוגי המידע שאתם סורקים, האזור שבו המשימה מעובדת ומשאבי המחשוב שזמינים באותו אזור. לכן אי אפשר לקבוע מראש את זמן האחזור של משימות הבדיקה.

כדי לצמצם את זמן האחזור של המשימה, אתם יכולים לנסות את הפעולות הבאות:

  • אם דגימה זמינה למשימה או לטריגר של המשימה, הפעילו אותה.
  • אל תפעילו סוגי מידע שאתם לא צריכים. למרות שסוגי המידע הבאים שימושיים בתרחישים מסוימים, הם יכולים לגרום לבקשות לפעול לאט יותר מבקשות שלא כוללות אותם:

    • PERSON_NAME
    • FEMALE_NAME
    • MALE_NAME
    • FIRST_NAME
    • LAST_NAME
    • DATE_OF_BIRTH
    • LOCATION
    • STREET_ADDRESS
    • ORGANIZATION_NAME
  • תמיד צריך לציין במפורש את סוגי המידע. אל תשתמשו ברשימה ריקה של infoTypes.

  • אם אפשר, השתמשו באזור עיבוד אחר.

אם אתם עדיין נתקלים בבעיות של זמן אחזור במשימות אחרי שניסיתם את השיטות האלה, כדאי להשתמש בבקשות content.inspect או content.deidentify במקום במשימות. השיטות האלה נכללות בהסכם רמת השירות. מידע נוסף זמין במאמר הסכם רמת השירות (SLA) של Sensitive Data Protection.

הגבלת הסריקות לתוכן חדש בלבד

אתם יכולים להגדיר את הטריגר של המשימה כך שיגדיר באופן אוטומטי את טווח הזמן של קבצים שמאוחסנים ב-Cloud Storage או ב-BigQuery. כשמגדירים את האובייקט TimespanConfig למילוי אוטומטי, Sensitive Data Protection סורק רק נתונים שנוספו או שונו מאז שהטריגר הופעל בפעם האחרונה:

...
  timespan_config {
        enable_auto_population_of_timespan_config: true
      }
...

בבדיקה של BigQuery, רק שורות שנוצרו לפני שלוש שעות לפחות נכללות בסריקה. בעיה ידועה שקשורה לפעולה הזו.

הפעלת משימות בזמן העלאת קבצים

בנוסף לתמיכה בטריגרים של משימות, שמובנית ב-Sensitive Data Protection, ב-Google Cloud יש גם מגוון רכיבים אחרים שאפשר להשתמש בהם כדי לשלב או להפעיל משימות של Sensitive Data Protection. לדוגמה, אתם יכולים להשתמש בפונקציות Cloud Run כדי להפעיל סריקה של Sensitive Data Protection בכל פעם שקובץ מועלה ל-Cloud Storage.

במאמר סיווג אוטומטי של נתונים שהועלו ל-Cloud Storage מוסבר איך להגדיר את הפעולה הזו.