מידע על דומיינים של נתונים

תחומי נתונים ב-Knowledge Catalog (לשעבר Dataplex Universal Catalog) מספקים דרך הגיונית לארגן, לנהל, לגלות ולערוך משאבי נתונים בארגון, בהתאם למבנה העסקי ולבעלות שלכם.

יכולות מרכזיות של דומיינים של נתונים

תחומי נתונים מפרידים בין ארגון נתונים לוגי לבין היררכיית המשאבים הבסיסית של תיקיות ופרויקטים. Google Cloud דומיינים של נתונים מספקים את היכולות העיקריות הבאות:

  • הגדרת היררכיה לוגית של ארגון הנתונים בהתאם לתהליכים העסקיים ולקיבוצים לוגיים של נתונים, ללא קשר להיררכיית המשאבים של תיקיות ופרויקטים ב- Google Cloud .
  • משמשת כיחידה לוגית של בעלות עבור צוותים מבוזרים של דומיינים, בנוסף למוצרי נתונים.
  • שליטה ריכוזית על מי שיכול לגלות משאבים ואת המטא-נתונים שלהם בהיקף גדול.
  • לכידת הקשר הנפוץ, כמו הנחיות לשימוש, תקני ניהול, תיאורים ופרטי בעלות.
  • אפשר להשתמש בדומיין נתונים כדי לצמצם את תוצאות החיפוש לדומיין ספציפי. לדוגמה, אפשר לאפשר למשתמשים לחפש רק בדומיין Marketing כדי למצוא מידע רלוונטי מהר יותר.

תרחיש שימוש לדוגמה

נניח שיש לכם רשת קמעונאית גלובלית עם נכסי נתונים שמפוזרים בין מחלקות כמו מכירות, שרשרת אספקה ושיווק. נכסי נתונים דומים מבחינה לוגית, כמו טבלאות או מערכי נתונים שקשורים למכירות, מפוזרים בכמה פרויקטים Google Cloud שונים, ולכן קשה לגלות אותם ולנהל אותם באופן עקבי.

בדוגמאות הבאות אפשר לראות איך משתמשים שונים מקיימים אינטראקציה עם דומיינים של נתונים:

  • מנהל דומיין נתונים

    יוצר היררכיה לוגית, ללא תלות בGoogle Cloud פרויקטים בסיסיים ומקצה ניהול ברמת הדומיין.

    • יוצר דומיינים ברמה העליונה שתואמים למבנה הארגוני (למשל Sales,‏ Supply Chain ו-Marketing) ומגדיר תת-דומיינים (למשל Online Sales ו-Store Transactions מתחת ל-Sales).
    • הקצאת בעלים ייעודיים של נתוני הדומיין לכל דומיין (לדוגמה, הקצאת הליד למכירות כבעלים של הדומיין Sales).

    מידע נוסף על יצירת היררכיה של דומיינים של נתונים ועל הוספת משאבים מופיע במאמרים יצירת דומיינים של נתונים והוספת משאבים לדומיין של נתונים.

  • הבעלים של דומיין הנתונים

    הגדרה של התוכן של דומיינים של נתונים שנמצאים בבעלותם: כולל נכסי נתונים בדומיינים, הגדרה של הקשר ברמת הדומיין וקביעה של מדיניות מטא-נתונים בדומיינים כדי לנהל את יכולת הגילוי של נכסי הנתונים של הדומיין ואת הנראות של ההקשר והמטא-נתונים שלו בקנה מידה גדול. לדוגמה, הבעלים של נתוני הדומיין Sales מבצע את הפעולות הבאות:

    • כולל מערכי נתונים, טבלאות ומוצרי נתונים שמפוזרים בפרויקטים שונים בתחום Sales.
    • הגדרת היבטים ברמת הדומיין, כמו תקנים לשמירת נתונים ומרכזי עלויות. ההגדרה הזו מגדירה מי יכול לגלות את הנכסים של הדומיין ולגשת להקשר ולמטא-נתונים שלהם, על ידי הענקת התפקידים וההרשאות הנדרשים לקבוצה analysts@example.com.

    מידע נוסף על ניהול דומיינים של נתונים זמין במאמר ניהול דומיינים של נתונים.

  • משתמש בדומיין נתונים

    הוא מאפשר לגלות ביעילות נכסי מכירות רלוונטיים ומהימנים בהקשר עסקי, בלי צורך לסנן נתונים ארגוניים לא רלוונטיים. לדוגמה, כדי לקבל נתוני מכירות לקמפיין שיווקי עתידי, המשתמש בדומיין הנתונים מבצע את הפעולות הבאות:

    • המערכת בודקת את ההיררכיה של הדומיין כדי לזהות את הדומיין Sales.
    • החיפוש מוגבל לדומיין כדי למצוא את המקורות הרלוונטיים.
    • בודק את המטא-נתונים של המשאב, הסכימות והנחיות השימוש כדי להעריך את מידת ההתאמה לשימוש.

    למידע נוסף על השימוש בדומיינים של נתונים כדי למצוא נתונים רלוונטיים, אפשר לעיין במאמר בנושא שימוש בדומיינים של נתונים.

נכסים נתמכים

אפשר להשתמש בדומיינים של נתונים עבור הנכסים הבאים:

  • פרויקטים
  • מוצרי נתונים
  • מערכי נתונים ב-BigQuery
  • טבלאות ב-BigQuery
  • מאגרי Dataform
  • מסדי נתונים של Dataproc Metastore
  • טבלאות של Dataproc Metastore
  • מסדי נתונים ב-Spanner
  • טבלאות BigLake
  • מכונות AlloyDB ל-PostgreSQL
  • מערכי נתונים של Gemini Enterprise Agent Platform

דומיינים של נתונים ומוצרי נתונים

תחומי נתונים ומוצרי נתונים הם אבני בניין משלימות שבעזרתן אפשר לגלות את נכסי הנתונים שלכם ולגשת אליהם. דומיין נתונים מספק דרך לוגית לארגון נכסי נתונים על סמך המבנה העסקי. מוצר נתונים הוא חבילה של נכסים קשורים, כמו טבלאות או תצוגות, שנועדה לפתור תרחישי שימוש עסקיים ספציפיים.

מגבלות

מגבלות החיפוש

כשמחפשים משאבים מחוץ להקשר של הדומיין, למשל כשמשתמשים בחיפוש גלובלי, הרשאות הגילוי של הדומיין לא חלות. אתם רואים רק את המשאבים שיש לכם גישה אליהם במערכת הבסיסית, כמו BigQuery.

נניח שמערך נתונים ב-BigQuery נכלל בדומיין נתונים. יש לכם תפקיד Dataplex Data Domain Entry Reader בדומיין, אבל אין לכם הרשאה ישירה לצפייה בקבוצת הנתונים ב-BigQuery:

  • חיפוש בתוך הדומיין: מערך הנתונים מופיע בתוצאות החיפוש כי חלות עליו הרשאות הדומיין.
  • חיפוש מחוץ לדומיין: מערך הנתונים לא מופיע בתוצאות החיפוש. בחיפוש כללי, הרשאות הדומיין לא חלות, ואין לכם גישה ישירה ב-BigQuery.

מגבלות הרשאה

בשלב ההשקה של גרסת טרום-השקה, אין סנכרון רציף של IAM ברקע. אימות ההרשאה של הדומיין מתבצע רק כשנוצרת כריכה. כלומר, אם מבטלים את תפקיד ה-IAM של חשבון המשתמש בדומיין במשאב, המשאב לא מבוטל אוטומטית או מוסר מהדומיין.

המאמרים הבאים