מושגים מרכזיים
בדף הזה מוסברים המושגים המרכזיים שחשוב להכיר כדי להבין את הרכיבים של Manufacturing Data Engine (MDE).
נתוני ייצור
ארכיטקטורת MDE נועדה לעבד שני סוגים של נתוני ייצור:
- נתוני ייצור: קריאות חיישנים או אירועים שנאספו מרצפת הייצור או נגזרו מנתונים מרצפת הייצור.
- הקשר לגבי עובדות (מטא-נתונים): המקור, האופן שבו הן תועדו, הסוג, האופי (המדידות שהן מייצגות), הנכסים שאליהם הן מתייחסות וההקשר שלהן.
MDE נועד לשמש כמאגר נתונים של נתוני ייצור עובדתיים והקשריים, ולתעד את הקשרים ביניהם. המטרה העיקרית של MDE היא לספק הטמעת נתונים מהירה, גישה יעילה לנתונים ולאפשר תרחישי שימוש עם ערך מוסף.
נתוני ייצור ומטא-נתונים מאוחסנים ונשלחים למאגרי נתונים שונים שעברו אופטימיזציה לתרחישי שימוש ספציפיים.
כדי לספק גמישות בארגון ובאחסון נתונים, MDE מגדיר מודל שמאפשר להגדיר ולהרחיב סכימות לוגיות תוך שמירה על יציבות של סכימות נתונים פיזיות.
הדיאגרמה הזו מציגה את זרימת ההודעות ברמה גבוהה, כפי שהיא מעובדת על ידי MDE:
הודעת המקור
כל הודעה שמתפרסמת בנושא input-messages Pub/Sub, שהוא נקודת הכניסה לנתונים ב-MDE.
סיווג הודעת המקור
קבוצה של הודעות מקור שחולקות מבנה או סמנטיקה משותפים. מידע נוסף זמין במאמר בנושא Source Message Class.
מנתח
ישות הגדרה שממירה הודעות של מחלקת הודעות מקור ספציפית לרשומות של סוג ספציפי באמצעות סקריפט Whistle. מנתח יכול ליצור רשומות עם תגים שונים, אבל לכל הרשומות צריך להיות אותו סוג. מידע נוסף זמין במאמר בנושא Parser.
ארכיטיפ
בסיס לסוג שמגדיר שדות והתנהגויות ספציפיים. יש שישה ארכיטיפים שמחולקים לשלוש קבוצות של ארכיטיפים:
- מספרי (רגיל ומקובץ לאשכולות)
- בנפרד (רגיל ומקובץ לאשכולות)
- רציף (רגיל ומקובץ)
מפתח טבעי
מפתח שמזהה באופן ייחודי ישות מחוץ ל-MDE.
תג
ישות, כמו חיישן, מכשיר או מכונה, שפולטת זרם של הודעות מקור. הישות מזוהה באמצעות שם תג שמשמש גם כמפתח טבעי בדליים של מטא-נתונים של תגים בענן התגים. אפשר לצרף הגדרות של תצורות לתגים בהקשר של גרסאות סוג. מידע נוסף זמין במאמר בנושא תג.
סוג
ישות הגדרה שמתארת קבוצה משותפת של רשומות. כל סוג משויך לארכיטיפ אחד בלבד. סוג יכול להיות משויך לקטגוריות של מטא-נתונים, יכול להכיל סכימה של שדה נתונים ולספק מפרטי אחסון. מידע נוסף זמין במאמר בנושא סוג.
שדה נתונים
שדה ברשומה. האובייקט שנכתב בשדה יכול להיות מוגבל על ידי סכימה בסוגים של ארכיטיפ בדיד ורציף.
קטגוריית מטא-נתונים
ישות הגדרה שמייצגת קבוצה קשורה של מידע הקשרי על עובדה שקשורה לייצור (למשל, קריאת חיישן) שמשויכת להודעת מקור. קטגוריות של מטא-נתונים מוגדרות כמאפיינים בדומיין של Analytics. קטגוריות מכילות סכימות שמגדירות את המבנה של מופעי מטא-נתונים שנכללים בהן. השינויים במופעים של מטא-נתונים בתוך קטגוריה מתבצעים בגרסאות. מידע נוסף זמין במאמר בנושא מאגרי מטא-נתונים.
מופע של מטא-נתונים
רשומה בקטגוריית מטא-נתונים שמתארת ישות עם מפתח טבעי נתון. מידע נוסף מופיע במאמר מופעים של מטא-נתונים.
מופע של מטא-נתונים של Proto
מופע של מטא-נתונים שנבנה בניתוח.
טבלת רשומות
טבלה ב-BigQuery שמקושרת לסוג. כל סוג משויך לטבלת רשומות אחת.
הקלטה
רשומה מעובדת אחת. גם שורה בטבלת רשומות. לכל הרשומות יש אותו סוג.
רשומת Proto
רשומת מבשר שנבנית ומופקת על ידי מנתח.
מטא-נתונים מוטמעים
שדה שבו מאוחסנים מטא-נתונים שמשתנים במהירות ברשומה. מידע נוסף זמין במאמר בנושא מטא-נתונים מוטמעים.
הפניה למטא-נתונים בענן
שדה ברשומה שבו מאוחסנים מזהים של מופעי מטא-נתונים לכל קטגוריה (מפתחות זרים).
מטא-נתונים מגובשים
שדה ברשומה שבו מאוחסנים מופעים של מטא-נתונים שמופיעים בהפניה למטא-נתונים בענן.