מידע על דומיינים של נתונים

דומיינים של נתונים ב-Knowledge Catalog (לשעבר Dataplex Universal Catalog) מספקים דרך לוגית לארגן, לנהל, לגלות ולתחזק משאבי נתונים בארגון, בהתאם למבנה העסקי ולבעלות.

יכולות מרכזיות של דומיינים של נתונים

דומיינים של נתונים מפרידים בין הארגון הלוגי של הנתונים לבין היררכיית המשאבים הבסיסית של התיקיות והפרויקטים ב- Google Cloud . דומיינים של נתונים מספקים את היכולות המרכזיות הבאות:

  • הגדירו היררכיה לוגית של ארגון הנתונים שתואמת לתהליכים העסקיים ולקבוצות הלוגיות של הנתונים, בנפרד מהיררכיית המשאבים של התיקיות והפרויקטים ב- Google Cloud .
  • לשמש כיחידה הלוגית של בעלות על צוותי דומיינים מבוזרים, כהשלמה למוצרי נתונים.
  • שליטה ריכוזית על מי שיכול לגלות משאבים ואת המטא-נתונים שלהם בהיקף נרחב.
  • לכידת הקשר הנפוץ, כמו הנחיות לשימוש, תקני ניהול, תיאורים ופרטי בעלות.
  • אפשר להשתמש בדומיין נתונים כדי לצמצם את תוצאות החיפוש לדומיין ספציפי. לדוגמה, אפשר לאפשר למשתמשים לחפש רק בדומיין Marketing כדי למצוא מידע רלוונטי יותר במהירות רבה יותר.
  • סוכני AI מעוגנים בהקשר של הדומיין. ה-method‏ lookupContext מחזירה הקשר של תחומי נתונים ומציינת לאילו תחומי נתונים שייך נכס נתונים מסוים. מידע נוסף זמין במאמר אחזור הקשר לדומיינים של נתונים.

תרחיש שימוש לדוגמה

נניח שיש לכם רשת קמעונאית גלובלית עם נכסי נתונים שמפוזרים במחלקות שונות כמו מכירות, שרשרת אספקה ושיווק. נכסי נתונים דומים מבחינה לוגית, כמו טבלאות או מערכי נתונים שקשורים למכירות, מפוזרים בכמה פרויקטים Google Cloud ומקשים על גילוי ועל ניהול עקבי.

הדוגמאות הבאות מראות איך משתמשים שונים יוצרים אינטראקציה עם דומיינים של נתונים:

  • אדמין של דומיין נתונים

    הגדרת היררכיה לוגית, ללא תלות בפרויקטים הבסיסיים שלGoogle Cloud , והקצאת הרשאות ניהול ברמת הדומיין.

    • יוצר דומיינים ברמה העליונה שתואמים למבנה הארגוני (כמו Sales,‏ Supply Chain ו-Marketing) ומגדיר תתי-דומיינים (כמו Online Sales ו-Store Transactions ב-Sales).
    • מקצה בעלים ייעודיים לכל דומיין נתונים (לדוגמה, הקצאת ראש צוות המכירות כבעלים של הדומיין Sales).

    מידע נוסף על יצירת היררכיה של דומיינים של נתונים והכללת משאבים זמין במאמרים יצירת דומיינים של נתונים והכללת משאבים בדומיין של נתונים.

  • בעלי דומיין הנתונים

    מגדיר את התוכן של דומיינים של נתונים שבבעלותו: כולל נכסי נתונים בדומיינים, מגדיר הקשר ברמת הדומיין וקובע כללי מדיניות של מטא-נתונים בדומיינים כדי לנהל בקנה מידה נרחב את יכולת הגילוי של נכסי הנתונים של הדומיין ואת החשיפה של ההקשר והמטא-נתונים שלו. לדוגמה, בעלי הנתונים של דומיין המכירות מבצעים את הפעולות הבאות:

    • כולל מערכי נתונים, טבלאות ומוצרי נתונים שמפוזרים בפרויקטים שונים בדומיין Sales.
    • הגדרת היבטים ברמת הדומיין, כמו תקנים לשמירת נתונים ומרכזי עלויות. הגדרת המשתמשים שיכולים לגלות את הנכסים של הדומיין ולגשת להקשר ולמטא-נתונים שלהם, על ידי הקצאת התפקידים וההרשאות הנדרשים לקבוצה analysts@example.com.

    איך מנהלים דומיינים של נתונים

  • משתמש בדומיין נתונים

    הוא מוצא ביעילות נכסי מכירות רלוונטיים ומהימנים בהקשר עסקי, בלי לעבור על נתונים לא קשורים של הארגון. לדוגמה, כדי לקבל נתוני מכירות לקמפיין שיווקי קרוב, המשתמש בדומיין הנתונים מבצע את הפעולות הבאות:

    • בודק את היררכיית הדומיינים כדי לזהות את הדומיין של Sales.
    • החיפוש מוגבל לדומיין כדי למצוא את המשאבים הרלוונטיים.
    • בודק את המטא-נתונים, הסכימות וההנחיות לשימוש במשאב כדי להעריך את ההתאמה לשימוש.

    למידע נוסף על השימוש בדומיינים של נתונים כדי למצוא נתונים רלוונטיים, ראו שימוש בדומיינים של נתונים.

נכסים נתמכים

אפשר להשתמש בדומיינים של נתונים עבור הנכסים הבאים:

  • פרויקטים
  • מוצרי נתונים
  • מערכי נתונים ב-BigQuery
  • טבלאות ב-BigQuery
  • מאגרים ב-Dataform
  • מסדי נתונים של Dataproc Metastore
  • טבלאות Dataproc Metastore
  • מסדי נתונים ב-Spanner
  • טבלאות BigLake
  • מכונות AlloyDB ל-PostgreSQL
  • מערכי נתונים של Gemini Enterprise Agent Platform

תחומי נתונים ומוצרי נתונים

דומיינים של נתונים ומוצרי נתונים הם אבני בניין משלימות שבהן אתם יכולים להשתמש כדי לגלות את נכסי הנתונים שלכם ולגשת אליהם. תחום נתונים מספק דרך לוגית לארגן נכסי נתונים על סמך המבנה העסקי. מוצר נתונים הוא חבילה של נכסים קשורים, כמו טבלאות או תצוגות, שנועדה לפתור תרחישי שימוש עסקיים ספציפיים.

מגבלות

מגבלות החיפוש

כשמחפשים משאבים מחוץ להקשר של הדומיין, למשל כשמשתמשים בחיפוש גלובלי, הרשאות החשיפה של הדומיין לא חלות. אתם רואים רק את המשאבים שיש לכם גישה אליהם במערכת הבסיסית, כמו BigQuery.

נניח שמערך נתונים ב-BigQuery נכלל בדומיין נתונים. יש לכם את התפקיד Dataplex Data Domain Entry Reader בדומיין, אבל אין לכם הרשאה ישירה לצפות בקבוצת הנתונים ב-BigQuery:

  • חיפוש בתוך הדומיין: מערך הנתונים מופיע בתוצאות החיפוש כי חלות עליו הרשאות הדומיין.
  • חיפוש מחוץ לדומיין: מערך הנתונים לא מופיע בתוצאות החיפוש. בחיפוש כללי, הרשאות הדומיין לא חלות, ואין לכם גישה ישירה ב-BigQuery.

מגבלות הרשאה

בשלב של גרסת טרום-השקה, אין סנכרון רציף של IAM ברקע. הרשאת הדומיין מאומתת רק כשנוצר קישור. כלומר, אם תבטלו את תפקיד ה-IAM של חשבון המשתמש בדומיין במשאב מסוים, המשאב הזה לא יוסר אוטומטית מהדומיין.

המאמרים הבאים