משימה היא פעולה ש-Sensitive Data Protection מריץ כדי לסרוק תוכן ולחפש מידע אישי רגיש, או כדי לחשב את הסיכון לשחזור פרטי זיהוי. בכל פעם שאתם מבקשים מ-Sensitive Data Protection לבדוק את הנתונים, נוצר ומופעל משאב של משימה.
נכון לעכשיו, יש שני סוגים של משימות ב-Sensitive Data Protection:
- משימות בדיקה בודקות אם יש בתוכן מידע רגיש לפי הקריטריונים שהגדרתם, ויוצרות דוחות סיכום של המיקום וסוג המידע הרגיש שקיים.
- משימות של ניתוח סיכונים מנתחות נתונים שהוסרו מהם פרטי הזיהוי, ומחזירות מדדים לגבי הסבירות שניתן יהיה לשחזר את פרטי הזיהוי של הנתונים.
כדי לתזמן את המועד שבו Sensitive Data Protection יריץ משימות, אתם יכולים ליצור טריגרים של משימות. טריגר של משימה הוא אירוע שמפעיל באופן אוטומטי את היצירה של משימות ב-Sensitive Data Protection, כדי לסרוק מאגרי אחסון ב- Google Cloud , כולל קטגוריות של Cloud Storage, טבלאות ב-BigQuery וסוגים של Datastore.
טריגרים של סריקות מאפשרים לתזמן סריקות על ידי הגדרת מרווחי זמן שבהם כל טריגר מופעל. אפשר להגדיר אותם כך שיחפשו ממצאים חדשים מאז הסריקה האחרונה, כדי לעזור לעקוב אחרי שינויים או תוספות בתוכן, או כדי ליצור דוחות ממצאים עדכניים. טריגרים מתוזמנים פועלים במרווח זמן שאתם מגדירים, מיום אחד ועד 60 ימים.
מתי כדאי להשתמש בטריגרים של משימות
הנה כמה תרחישי שימוש נפוצים:
- אוטומציה של סריקות תאימות חוזרות: תזמון סריקות בדיקה קבועות בקטגוריות של Cloud Storage ובטבלאות ב-BigQuery כדי לשמור על חשיפה רציפה למידע רגיש שמאוחסן לאחרונה.
- אופטימיזציה של עלויות הבדיקה באחסון דינמי: מגדירים כללים של טווחי זמן בטריגרים של משימות כדי לסרוק רק תוכן שנוסף או שונה מאז מחזור הסריקה הקודם.
- מעקב אחרי שינויים מתמשכים בנתונים במסדי נתונים בסביבת הייצור: מעקב אחרי שינויים בחשיפה של מידע רגיש לאורך זמן, על ידי יצירת סיכומים תקופתיים של הממצאים לבדיקת מצב הסיכון.
- תיאום עם צינורות עיבוד נתונים מבוססי-אירועים: הפעלת משימות ביקורת בתגובה לאירועי העלאה ב-Cloud Storage או לאבני דרך בפייפליין אוטומטי של ETL.
השלבים הבאים
בנושאים הבאים תוכלו לקרוא מידע נוסף על יצירה, עריכה והפעלה של משימות וטריגרים של משימות:
- יצירת משימות בדיקה וטריגרים של משימות ב-Sensitive Data Protection
- מדידת הסיכון לשחזור פרטי זיהוי ולחשיפת מידע (כולל משימות של ניתוח סיכונים)
בנוסף, אפשר להיעזר במדריך למתחילים הבא:
האובייקט JobTrigger
טריגר של משימה מיוצג ב-DLP API על ידי האובייקט JobTrigger.
שדות תצורה של טריגרים של משימות
כל JobTrigger מכיל כמה שדות תצורה, כולל:
- השם והשם המוצג של הטריגר, ותיאור.
- אוסף של אובייקטים מסוג
Trigger, שכל אחד מהם מכיל אובייקט מסוגScheduleשמגדיר את תדירות הסריקה בשניות. - אובייקט
InspectJobConfigשמכיל את פרטי ההגדרות של המשימה שהופעלה. - ערך מסוג
Statusשמציין אם הטריגר פעיל כרגע. - שדות של חותמות זמן שמייצגים את זמני היצירה, העדכון וההפעלה האחרונה.
- אוסף של אובייקטים מסוג
Error, אם נמצאו כאלה כשהטריגר הופעל.
שיטות להפעלת משימות
כל אובייקט JobTrigger כולל גם כמה שיטות מובנות. בעזרת השיטות האלה, אתם יכולים:
- יוצרים טריגר חדש למשימה:
projects.jobTriggers.create - עדכון טריגר קיים של משימה:
projects.jobTriggers.patch - מחיקת טריגר קיים של משימה:
projects.jobTriggers.delete - אחזור של טריגר קיים של משימה, כולל ההגדרות והסטטוס שלו:
projects.jobTriggers.get - מציגים את כל הטריגרים הקיימים של המשימות:
projects.jobTriggers.list
זמן האחזור של המשימה
אין יעדים למדידת רמת השירות (SLO) שמובטחים למשימות ולטריגרים של משימות. זמן האחזור מושפע מכמה גורמים, כולל כמות הנתונים לסריקה, מאגר האחסון שנסרק, הסוג והמספר של סוגי המידע שאתם סורקים, האזור שבו המשימה מעובדת ומשאבי המחשוב שזמינים באותו אזור. לכן אי אפשר לקבוע מראש את זמן האחזור של משימות הבדיקה.
כדי לצמצם את זמן האחזור של המשימה, אתם יכולים לנסות את הפעולות הבאות:
- אם דגימה זמינה למשימה או לטריגר של המשימה, הפעילו אותה.
אל תפעילו סוגי מידע שאתם לא צריכים. למרות שסוגי המידע הבאים שימושיים בתרחישים מסוימים, הם יכולים לגרום לבקשות לפעול לאט יותר מבקשות שלא כוללות אותם:
PERSON_NAMEFEMALE_NAMEMALE_NAMEFIRST_NAMELAST_NAMEDATE_OF_BIRTHLOCATIONSTREET_ADDRESSORGANIZATION_NAME
תמיד צריך לציין במפורש את סוגי המידע. אל תשתמשו ברשימה ריקה של infoTypes.
אם אפשר, השתמשו באזור עיבוד אחר.
אם אתם עדיין נתקלים בבעיות של זמן אחזור במשימות אחרי שניסיתם את השיטות האלה, כדאי להשתמש בבקשות content.inspect או content.deidentify במקום במשימות. השיטות האלה נכללות בהסכם רמת השירות. מידע נוסף זמין במאמר הסכם רמת השירות (SLA) של Sensitive Data Protection.
הגבלת הסריקות לתוכן חדש בלבד
אתם יכולים להגדיר את הטריגר של המשימה כך שיגדיר באופן אוטומטי את טווח הזמן של קבצים שמאוחסנים ב-Cloud Storage או ב-BigQuery. כשמגדירים את האובייקט TimespanConfig למילוי אוטומטי, Sensitive Data Protection סורק רק נתונים שנוספו או שונו מאז שהטריגר הופעל בפעם האחרונה:
...
timespan_config {
enable_auto_population_of_timespan_config: true
}
...
בבדיקה של BigQuery, רק שורות שנוצרו לפני שלוש שעות לפחות נכללות בסריקה. בעיה ידועה שקשורה לפעולה הזו.
הפעלת משימות בזמן העלאת קבצים
בנוסף לתמיכה בטריגרים של משימות, שמובנית ב-Sensitive Data Protection, ב-Google Cloud יש גם מגוון רכיבים אחרים שאפשר להשתמש בהם כדי לשלב או להפעיל משימות של Sensitive Data Protection. לדוגמה, אתם יכולים להשתמש בפונקציות Cloud Run כדי להפעיל סריקה של Sensitive Data Protection בכל פעם שקובץ מועלה ל-Cloud Storage.
במאמר סיווג אוטומטי של נתונים שהועלו ל-Cloud Storage מוסבר איך להגדיר את הפעולה הזו.