מעקב אחר מידע על שושלת נתונים במערכת חיצונית

בעזרת שושלת נתונים ב-Knowledge Catalog (לשעבר Dataplex Universal Catalog) אתם יכולים לתעד באופן ידני את פרטי השושלת של מערכות שלא נתמכות במעקב אוטומטי אחרי שושלת נתונים, כמו מסדי נתונים חיצוניים או מקומיים. אתם יכולים להשתמש ב-Data Lineage API כדי לתעד תהליכים, הרצות ואירועים בהתאמה אישית שמתעדים את תנועת הנתונים, וכך לשמור על תצוגה מלאה מקצה לקצה של הנתונים.

תיעוד אירועים מותאמים אישית

כדי לעקוב אחרי תנועת הנתונים כשמבצעים שילוב עם מסדי נתונים חיצוניים או מקומיים, צריך ליצור את המשאבים הבאים לפי הסדר:

  1. יוצרים תהליך באמצעות ה-method‏ processes.create.
  2. יוצרים הרצה באמצעות ה-method‏ processes.runs.create.
  3. יוצרים אירוע שושלת נתונים באמצעות ה-method‏ processes.runs.lineageEvents.create.