הפעלת Knowledge Catalog

ב-Knowledge Catalog (לשעבר Dataplex Universal Catalog) אתם יכולים להטמיע באופן אוטומטי מטא-נתונים עדכניים ממקורות נתונים נתמכים Google Cloud ולנהל אותם. כדי להשתמש ב-Knowledge Catalog בפרויקט ב- Google Cloud , צריך להפעיל את Dataplex API,‏ Dataproc API ו-Dataproc Metastore API.

לפני שמתחילים

הפעלת Knowledge Catalog

אתם יכולים להשתמש בפרויקט קיים עם Knowledge Catalog או ליצור פרויקט חדש. מומלץ ליצור פרויקט חדש. אם אתם משתמשים בפרויקט חדש ב- Google Cloud או בפרויקט שבו BigQuery API מופעל, Dataplex API מופעל כברירת מחדל. עם זאת, עדיין צריך להפעיל את Dataproc API ואת Dataproc Metastore API.

כדי להפריד בין המשאבים שנוצרו על ידי ה-lake בפרויקט, צריך ליצור פרויקט לכל מופע של lake.

כדי ליצור פרויקט ולהפעיל את Knowledge Catalog:

  1. במסוף Google Cloud , בוחרים או יוצרים פרויקט.
  2. מוודאים שהחיוב מופעל בפרויקט.

  3. מפעילים את Dataplex, את Managed Service for Apache Spark ואת Dataproc Metastore API, אם הם עדיין לא מופעלים.

    התפקידים שנדרשים כדי להפעיל ממשקי API

    כדי להפעיל ממשקי API, צריך את ההרשאה serviceusage.services.enable. אם יצרתם את הפרויקט, סביר להניח שכבר יש לכם את ההרשאה הזו דרך התפקיד "בעלים" (roles/owner). אחרת, תוכלו לקבל את ההרשאה הזו דרך התפקיד "אדמין בממשק 'שימוש בשירות'" (roles/serviceusage.serviceUsageAdmin). איך מקצים תפקידים

    הפעלת ממשקי ה-API

השבתת Knowledge Catalog

אם אתם משתמשים ב-Knowledge Catalog בפרויקט שמשתמש גם ב-BigQuery, חשוב שתהיו מודעים להשפעות על ההתנהגות של BigQuery כשמשביתים את Knowledge Catalog.

כדי להימנע מחיובים נוספים, לפני שמשביתים את Knowledge Catalog צריך לבצע את הפעולות הבאות:

  1. במסוף Google Cloud , מוחקים כל מכונה של אגם בפרויקט. כדי למחוק אגם, קודם צריך למחוק את הנכסים והאזורים הנפרדים. מידע נוסף זמין במאמר projects.locations.lakes.delete.

  2. במסוף Google Cloud , מוחקים את כל קבוצות הרשומות בהתאמה אישית בפרויקט. כשמוחקים קבוצת רשומות, כל הרשומות ששייכות לקבוצה נמחקות. מידע נוסף זמין במאמר מחיקה של קבוצת רשומות.

  3. בוחרים את הפרויקט שבו רוצים להשבית את Dataplex API.

  4. נכנסים לדף Enabled APIs & services.

    כניסה אל Enabled APIs & services

  5. לוחצים על Cloud Dataplex API.

  6. לוחצים על השבתת ה-API. מאשרים כשמוצגת בקשה.

  7. אם הפעלתם גם את Data Lineage API, חזרו על השלבים כדי להשבית אותו. השבתת Dataplex API לא משביתה את Data Lineage API ולא מפסיקה את החיובים על Premium Processing. מידע נוסף זמין במאמר השבתת שושלת נתונים.

המאמרים הבאים