המסמך הזה הוא מדריך למושגי היסוד של שימוש ב-Document AI. חשוב לקרוא את הדף הזה לפני שממשיכים לתיעוד אחר או למדריכים להתחלה מהירה.
אוטומציה של תהליכי עבודה לעיבוד מסמכים
עסקים בכל העולם מסתמכים מאוד על מסמכים כדי לאחסן ולהעביר מידע. לרוב צריך להפוך את המידע הזה לדיגיטלי כדי שיהיה שימושי. עם זאת, בדרך כלל התהליך הזה מתבצע באופן ידני וגוזל זמן רב.
לדוגמה:
- דיגיטציה של ספרים לקוראי ספרים דיגיטליים.
- עיבוד טפסים רפואיים במרפאות.
- ניתוח קבלות וחשבוניות כדי לאמת את דוחות ההוצאות.
- אימות זהות על סמך תעודות מזהות.
- חילוץ פרטי הכנסה מטפסי מס לצורך אישור הלוואות.
- הסבר על חוזים עם תנאים חשובים להסכמים עסקיים.
כל אחד מתהליכי העבודה האלה כולל קבלת טקסט גולמי ממסמכים, ואז חילוץ טקסט ספציפי שמתאים לנתונים הנדרשים (השדות או הישויות). עם זאת, לכל סוג מסמך יש מבנה ופריסה שונים, ודפוס השדות משתנה בהתאם לתרחיש השימוש הספציפי.
רכיבים של Document AI
Document AI היא פלטפורמה לעיבוד והבנה של מסמכים שמקבלת נתונים לא מובנים ממסמכים ומשנה אותם לנתונים מובנים (שדות ספציפיים שמתאימים למסד נתונים), וכך מקלה על ההבנה, הניתוח והשימוש בהם.
Document AI מבוסס על מוצרים ב-Vertex AI עם AI גנרטיבי, כדי לעזור לכם ליצור אפליקציות לעיבוד מסמכים מבוססות-ענן, מקצה לקצה וניתנות להתאמה לעומס (scaling), בלי שתצטרכו מומחיות מיוחדת בלמידת מכונה.
באמצעות Document AI, אתם יכולים:
- הפיכת מסמכים לדיגיטליים באמצעות OCR כדי לקבל טקסט, פריסה ותוספים שונים כמו זיהוי איכות התמונה (לצורך קריאות) ויישור (אוטומטי לחלוטין).
- חילוץ טקסט ומידע על פריסת המסמך מקבצים, ונרמול ישויות.
- זיהוי של זוגות מפתח/ערך (kvp) בטפסים מובנים ובטבלאות רגילות. לדוגמה:
Name: Jill Smithהוא זוג מפתח/ערך. - סיווג של סוגי מסמכים כדי להפעיל תהליכים במורד הזרם, כמו חילוץ ואחסון.
- פיצול וסיווג מסמכים לפי סוג. לדוגמה, קובץ PDF עם כמה מסמכים אמיתיים.
- הכנת מערכי נתונים לשימוש בשיפור דיוק המודל ובהערכות של מודלים באמצעות תכונות של תיוג אוטומטי, ניהול סכימות וניהול מערכי נתונים, כמו בדיקת מסמכים ותחזיות.
- שילוב עם מוצרים כמו Cloud Storage, BigQuery ו-Agent Search, כדי לאחסן, לחפש, לארגן, לנהל ולנתח מסמכים ומטא-נתונים.
בתרשים הזה מוצגים כל השלבים העיקריים של עיבוד מסמכים שנתמכים על ידי Document AI, ואיך הם יכולים להתחבר זה לזה.
מעבד מידע
מעבד Document AI נמצא בין קובץ המסמך לבין מודל למידת מכונה שמבצע פעולות של עיבוד והבנה של מסמכים. אפשר להשתמש בהם כדי לסווג, לפצל, לנתח או לפרסר מסמך.
בכל Google Cloud פרויקט צריך ליצור מופעי מעבד משלו.
מעבדים נכללים באחת מהקטגוריות הבאות:
- דיגיטציה: OCR.
- חילוץ: חילוץ מותאם אישית, מנתח טפסים, מנתח פריסות ומנתחים שאומנו מראש.
- סיווג: מסווג תוכן מותאם אישית ומפצל מותאם אישית.
מידע על כל סוגי המעבדים הזמינים ב-Document AI מופיע ברשימה המלאה של המעבדים והפרטים.
באיזה מעבד כדאי להשתמש?
כדי להחליט באיזה סוג מעבד להשתמש עבור אפליקציה ספציפית, הנה כמה הנחיות כלליות:
| קטגוריה | תרחיש לדוגמה | סוג מעבד |
|---|---|---|
| דיגיטציה | לחלץ טקסט ומידע על הפריסה ממסמכים. | Enterprise Document OCR |
| לנתח את איכות התמונה הסרוקה (קריאות) של מסמך. | Enterprise Document OCR עם ניתוח איכות התמונה מופעל | |
| לחלץ ישויות ממסמך מותאם אישית שלא עומד בקריטריונים של מעבד מותאם אישית. | ||
| חילוץ | חילוץ טבלאות או זוגות של מפתח/ערך מטופס מובנה במסמך. | מנתח טפסים |
| חילוץ רכיבים כמו טקסט, טבלאות ורשימות במסמך והחזרת נתחים מודעים להקשר. | Layout Parser | |
| חילוץ ישויות ממסמך מותאם אישית שעומד בקריטריונים של מעבד מותאם אישית. | יצירת כלי לחילוץ נתונים בהתאמה אישית | |
| חילוץ ישויות מסוג מסמך ייעודי. | מעבד שאומן מראש (אימון נוסף לשיפור האיכות). | |
| סיווג | לסווג מסמכים. | יצירת מסווג בהתאמה אישית |
| פיצול מסמכים. | יצירת מפצל מותאם אישית |
התרשים הזה עוזר לקבוע איזה מעבד מתאים לכל תרחיש שימוש.
שימוש במעבדים של Document AI
אלה השלבים העיקריים לשימוש ב-Document AI כדי להתחיל לעבד מסמכים:
בוחרים מעבד שמתאים לתרחיש השימוש.
- מידע מלא על כל מעבד זמין ברשימה המלאה של המעבדים והפרטים.
יוצרים מעבד באמצעות Google Cloud המסוף או Document AI API.
Document AI יוצר נקודת קצה של תחזית שאליה אפשר לשלוח את המסמכים.
הוראות מפורטות זמינות במאמר יצירת מעבד.
מאמנים מעבד עם נתוני אימון ובדיקה מאפס, או מאמנים גרסה חדשה (מאומנת מראש) של מעבד על בסיס גרסה קיימת.
- הוראות מפורטות מופיעות במאמר בנושא מעבד אימונים.
שולחים את המסמכים לעיבוד.
Document AI מעבד את המסמכים ומחזיר אובייקט אחד או יותר מסוג
Document, שמכילים את המידע המובנה שחולץ.הוראות מפורטות זמינות במאמרים שליחת בקשת עיבוד וטיפול בתגובת העיבוד.