ניהול מטא-נתונים של מאגרי Dataform באמצעות Knowledge Catalog

במאמר הזה מוסבר איך משתמשים ב-Knowledge Catalog כדי להציג מטא-נתונים של מאגרי Dataform ולהוסיף להם הערות עם היבטים.

ב-Knowledge Catalog אפשר לאחסן ולנהל את המטא-נתונים. מאגרי Dataform זמינים ב-Knowledge Catalog כברירת מחדל, ללא צורך בהגדרה נוספת. מערכת Knowledge Catalog מאחזרת באופן אוטומטי את המטא-נתונים הבאים ממאגרי Dataform:

• שם נכס הנתונים
• נכס הורה של נתוני
• מיקום נכס הנתונים
• סוג נכס הנתונים
• פרויקט Google Cloud מתאים
• מקור מאגר של צד שלישי
• חשבון שירות

לפני שמתחילים

1. בדף לבחירת הפרויקט במסוף Google Cloud , בוחרים פרויקט ב- Google Cloud או יוצרים אותו.

   תפקידים שנדרשים כדי לבחור או ליצור פרויקט

   • Select a project: כדי לבחור פרויקט לא צריך תפקיד IAM ספציפי – אפשר לבחור כל פרויקט שקיבלתם בו תפקיד.
   • יצירת פרויקט: כדי ליצור פרויקט, צריך את התפקיד Project Creator (יצירת פרויקטים) (roles/resourcemanager.projectCreator), שכולל את ההרשאה resourcemanager.projects.create. איך מקצים תפקידים
   הערה: אם אתם לא מתכננים לשמור את המשאבים שתיצרו בתהליך הזה, תוכלו ליצור פרויקט חדש במקום לבחור באחד מהפרויקטים הקיימים. בסיום התהליך תוכלו למחוק את הפרויקט ולהסיר את כל המשאבים שמשויכים אליו.

   כניסה לדף לבחירת הפרויקט

2. מפעילים את Dataplex API.

   תפקידים שנדרשים להפעלת ממשקי API

   כדי להפעיל ממשקי API, נדרשת ההרשאה serviceusage.services.enable. אם יצרתם את הפרויקט, סביר להניח שכבר יש לכם את ההרשאה הזו דרך התפקיד 'בעלים' (roles/owner). אחרת, תוכלו לקבל את ההרשאה הזו דרך התפקיד 'אדמין בממשק 'שימוש בשירות'' (roles/serviceusage.serviceUsageAdmin). איך מקצים תפקידים

   להפעלת ה-API

3. מוודאים שיש לכם את ההרשאות הנדרשות לניהול זהויות והרשאות גישה (IAM).

התפקידים הנדרשים

כדי לנהל מאגרי Dataform ב-Knowledge Catalog, אתם צריכים את התפקידים המוגדרים מראש ב-Dataform שנותנים לכם גישה למשאבי Dataform, וגם את התפקידים הנדרשים ב-Knowledge Catalog.

ניהול מטא-נתונים ב-Knowledge Catalog

‫Knowledge Catalog מתעד מאגרי Dataform כרשומות עם ערכי הרשומות הבאים:

קבוצת רשומות של מערכת

קבוצת הכניסה למערכת למאגרי Dataform היא @dataform. כדי לראות את הפרטים של רשומות במאגר ב-Knowledge Catalog, צריך לראות את dataformקבוצת רשומות המערכת. הוראות להצגת רשימה של כל הרשומות בקבוצת רשומות מופיעות במאמר הצגת פרטים של קבוצת רשומות במסמכי התיעוד של Knowledge Catalog.

סוג רשומה של מערכת

סוג הרשומה במערכת למאגרי Dataform הוא dataform-repository. כדי לראות את הפרטים של מאגרי Dataform, צריך להציג את dataform-repository סוג רשומת המערכת. הוראות להצגת פרטים של סוג רשומה נבחר מופיעות במאמר הצגת פרטים של סוג רשומה במסמכי Knowledge Catalog. הוראות להצגת פרטים של רשומה נבחרת מופיעות במאמר הצגת פרטים של רשומה במסמכי Knowledge Catalog.

חיפוש נכסים

הוראות לחיפוש נכסי נתונים ב-Knowledge Catalog מופיעות במאמר חיפוש נכסי נתונים ב-Knowledge Catalog במסמכי התיעוד של Knowledge Catalog.

הוספת הערות למאגרים

כדי לספק הקשר נוסף למאגרי Dataform ב-Knowledge Catalog, אתם יכולים להוסיף היבטים להערות של רשומות Dataform.

סוג ההיבט של המערכת למאגרי Dataform הוא dataform-repository.

הוראות להוספת הערות עם היבטים לרשומות מופיעות במאמר ניהול היבטים והעשרת מטא-נתונים במסמכי Knowledge Catalog.

מגבלות

אפשר לנהל מאגרי Dataform ב-Knowledge Catalog, אבל יש כמה מגבלות:

• אי אפשר לראות או לנהל נכסים ברמת הקובץ ב-Dataform ב-Knowledge Catalog, למשל טבלאות או תצוגות.

מיקומים

אתם יכולים להשתמש ב-Knowledge Catalog כדי לנהל מאגרי Dataform מכל המיקומים של Dataform.

מכסות

ניהול מאגרי Dataform ב-Knowledge Catalog כפוף למכסות ולמגבלות של Knowledge Catalog.

תמחור

השימוש במאגרי Dataform ב-Knowledge Catalog כפוף למחירון של Knowledge Catalog.

המאמרים הבאים

• מידע נוסף על Knowledge Catalog זמין במאמר סקירה כללית על Knowledge Catalog במסמכי התיעוד של Knowledge Catalog.