הסבר על ציון המהימנות של ההתאמה

ציון המהימנות של ההתאמה (או האשכול) הוא מדד לרמת המהימנות של שיוך ישות לאשכול. לאחר מכן תוכלו לסנן את התחזיות שהמודל לא בטוח לגביהן ולקבל החלטות על סמך התוצאות הנותרות, שהמודל בטוח לגביהן.

איך נוצר ציון מהימנות

האשכולות שנוצרים הם קבוצות נפרדות: כל ישות משויכת לאשכול אחד בלבד. ציון המובהקות מתאר את רמת המובהקות שלפיה צומת שייך לאשכול שהוקצה לו, והערך שלו הוא בין 0 ל-1.

• ‫1.0 = בטוחים מאוד שהישות שייכת לאשכול שהוקצה לה

• ‫0.0 = רמת ודאות נמוכה מאוד שהישויות שייכות לאשכול שהוקצה להן

יש מושג של דמיון או מרחק בין כל זוג ישויות. המרחק בין זוגות ישויות באותו אשכול לרוב קטן יותר מהמרחק בין זוגות ישויות באשכולות שונים. ככל שהישות רחוקה יותר מחברים אחרים באותו אשכול, ערך מהימנות נמוך יותר.

גם קלאסטרים אחרים משפיעים על ציון מהימנות. אם יש אשכולות אחרים שקרובים לישות, רמת הביטחון שלה יורדת בהתאם למרחקים מהאשכולות האלה.

צפיפות האשכול קשורה למרחקים בין כל זוג ישויות באשכול, ויש לה גם השפעה על ערך הביטחון: עבור כל ישות במרחק קבוע מהאשכול, ערך הביטחון גבוה אם צפיפות האשכול נמוכה, וערך הביטחון נמוך אם צפיפות האשכול גבוהה.

כדי שפייפליין ההתאמה יתאים למיליוני או מיליארדי ישויות, חישוב ציון רמת הסמך מתבסס על שיטות דגימה אקראיות כדי להגביל את מורכבות החישוב. לכן, ציוני המהימנות מחולקים לרווחים בגודל 0.1. לכן, אנחנו ממליצים לא להסתמך על ערכי הביטחון המדויקים כדי לקבל החלטות לגבי בדיקה או התערבות אנושית.

מקרא של דיאגרמה

ההסברים הבאים יעזרו לכם להבין את הדיאגרמות.

תיאור	דיאגרמה
ישות
אוסף של ישויות. אשכול ישויות שמיוצג על ידי עיגול. גודל העיגול מייצג את פיזור האשכול.
אשכולים של ישויות מרובות. מקודד בצבע: לישות ולמקטור שהוקצה לה יש אותו צבע.
במקרים מסוימים אנחנו מתמקדים בישות אחת ובקשר שלה לאשכולות אחרים. כל שאר הישויות מוסתרות מהתצוגה. d_a: המרחק מהישות למרכז המסה של אשכול A d_b: המרחק מהישות למרכז המסה של אשכול B c: ציון מהימנות האשכול של הישות

דוגמאות להמחשה

הדיאגרמות הבאות הן דוגמאות שיעזרו לכם להמחיש את הרעיון הכללי של קביעת ציוני מהימנות.

מצב	דיאגרמה
הישות מוקצית לאשכול א'. אם A הוא האשכול היחיד במרחב ההטמעה כולו, ציון הביטחון יהיה תמיד 1, בלי קשר למרחק ביניהם.
‫A ו-B הם אשכולות עם אותה מידת פיזור, והמרכזים שלהם נמצאים במרחק שווה מהישות. לשני האשכולות יש השפעה זהה על הישות, ולכן ציון הסמך הוא 0.5.
הנוכחות של אשכולות אחרים בקרבת מקום תשפיע על הישות ותפחית את ציון רמת הסמך. אם יש שלושה אשכולות של פיזור זהה, והישות נמצאת במרחק שווה מכל שלושת האשכולות, ציון מהימנות הוא 0.33.
‫A ו-B הם אשכולות עם אותה מידת פיזור, אבל הישות קרובה יותר ל-A מאשר ל-B. ל-A יש השפעה גדולה יותר על הישות. מכיוון שהישות משויכת גם ל-A, ציון המובהקות יהיה גדול מ-0.5.
‫A ו-B הם אשכולות עם אותה מידת פיזור, אבל הישות קרובה יותר ל-B מאשר ל-A. כך ההשפעה של A על הישות פוחתת. ציון המובהקות יהיה נמוך מ-0.5.
הפיזור של A גדול יותר מזה של B, אבל המרחק של המרכזים שלהם מהישות זהה. ל-A יש השפעה גדולה יותר על הישות. מכיוון שהישות משויכת גם ל-A, ציון המובהקות יהיה גדול מ-0.5.