מחיקת נתונים בכמות גדולה

כדי למחוק נתונים ממסד הנתונים, משתמשים בשירות המנוהל למחיקה בכמות גדולה. התכונה הזו תומכת במחיקה של קבוצת אוספים אחת או יותר.

בדף הזה מוסבר איך למחוק מסמכים בכמות גדולה באמצעות שירות מחיקה בכמות גדולה מנוהל. שירות המחיקה בכמות גדולה המנוהל של Firestore זמין דרך כלי שורת הפקודה gcloud ודרך API בארכיטקטורת REST של Firestore.

לפני שמתחילים

כדי להשתמש בשירות המנוהל למחיקה בכמות גדולה, צריך לבצע את המשימות הבאות:

  1. כדי למחוק מסמכים בכמות גדולה, צריך להפעיל חיוב בפרויקט Google Cloud . רק Google Cloud בפרויקטים שמופעל בהם חיוב אפשר להשתמש בפונקציית המחיקה בכמות גדולה.

  2. מוודאים שלחשבון יש את ההרשאות הנדרשות ל-Firestore. אם אתם הבעלים של הפרויקט, לחשבון שלכם יש את ההרשאות הנדרשות. אחרת, התפקידים הבאים מעניקים את ההרשאות הנדרשות לפעולות מחיקה בכמות גדולה:

    • תפקידים ב-Firestore: ‫Owner,‏ Cloud Datastore Owner או Cloud Datastore Bulk Admin

הגדרה של gcloud לפרויקט

אפשר להפעיל פעולות של מחיקה בכמות גדולה דרך Google Cloud המסוף או כלי שורת הפקודה gcloud. כדי להשתמש ב-gcloud, צריך להגדיר את כלי שורת הפקודה ולהתחבר לפרויקט באחת מהדרכים הבאות:

מחיקת נתונים בכמות גדולה

פעולת מחיקה בכמות גדולה קודם מוצאת את כל המסמכים הרלוונטיים במסד הנתונים ואז מוחקת אותם בקבוצות. עדיין אפשר לשלוח שאילתות או לקרוא את המסמכים האלה, אבל התוצאות עשויות להשתנות בהתאם להתקדמות. מחיקה בכמות גדולה לא מוחקת מסמכים שנוספו או שונו אחרי שהפעולה התחילה.

מחיקה בכמות גדולה של קבוצות אוספים ספציפיות

gcloud

כדי למחוק קבוצות ספציפיות של אוספים בכמות גדולה, משתמשים בדגל --collection-ids. הפעולה מוחקת רק את קבוצות הקולקציות עם המזהים שצוינו. 

gcloud firestore bulk-delete \
--collection-ids=[COLLECTION_GROUP_ID_1_OR_KIND_1],[COLLECTION_GROUP_ID_2_OR_KIND_2],[SUBCOLLECTION_GROUP_ID_1_OR_KIND_3] \
--database=[DATABASE]

ניהול פעולות של מחיקה בכמות גדולה

אחרי שמתחילים פעולת מחיקה בכמות גדולה, Firestore מקצה לפעולה שם ייחודי. אפשר להשתמש בשם הפעולה כדי למחוק או לבטל את הפעולה, או כדי לבדוק את הסטטוס שלה.

שמות הפעולות מתחילים בקידומת projects/[PROJECT_ID]/databases/[DATABASE_ID]/operations/, לדוגמה:

projects/my-project/databases/(default)/operations/ASA1MTAwNDQxNAgadGx1YWZlZAcSeWx0aGdpbi1zYm9qLW5pbWRhEgopEg

עם זאת, אפשר להשמיט את התחילית כשמציינים שם פעולה עבור הפקודות describe, cancel ו-delete.

הצגת כל פעולות המחיקה בכמות גדולה

gcloud

משתמשים בפקודה operations list כדי לראות את כל הפעולות שפועלות ואת הפעולות שהושלמו לאחרונה, כולל פעולות של מחיקה בכמות גדולה:

gcloud firestore operations list

בדיקת סטטוס הפעולה

gcloud

משתמשים בפקודה operations describe כדי להציג את הסטטוס של פעולת מחיקה בכמות גדולה.

gcloud firestore operations describe [OPERATION_NAME]

הערכת משך הזמן עד לסיום

בקשה לקבלת הסטטוס של פעולה ממושכת מחזירה את המדדים workEstimated ו-workCompleted. כל אחד מהמדדים האלה מוחזר גם כמספר בייטים וגם כמספר מסמכים:

  • ‫workEstimated מציג את המספר הכולל המשוער של בייטים ומסמכים שפעולה תעבד. יכול להיות ש-Firestore ישמיט את המדד הזה אם הוא לא יכול לבצע הערכה.

  • workCompleted מציג את מספר הבייטים והמסמכים שנמחקו עד עכשיו. אחרי שהפעולה מסתיימת, הערך שמוצג הוא המספר הכולל של הבייטים והמסמכים שעברו עיבוד בפועל, ויכול להיות שהוא גדול מהערך של workEstimated.

כדי לקבל הערכה גסה של ההתקדמות, מחלקים את workCompleted ב-workEstimated. יכול להיות שההערכה הזו לא מדויקת, כי היא מבוססת על נתונים שנאספו באיחור.

ביטול פעולה

gcloud

משתמשים בפקודה operations cancel כדי לעצור פעולה בתהליך:

gcloud firestore operations cancel [OPERATION_NAME]

ביטול של פעולה שפועלת לא מבטל את הפעולה. ביטול של פעולת מחיקה בכמות גדולה לא משחזר את המסמכים שנמחקו.

מחיקת פעולה

משתמשים בפקודה gcloud firestore operations delete כדי להסיר פעולה שהושלמה מהרשימה של הפעולות האחרונות. כדי לבטל פעולה שפועלת, משתמשים בפעולת הביטול הקודמת.

gcloud firestore operations delete [OPERATION_NAME]

חיוב ותמחור של פעולות מחיקה בכמות גדולה

כדי להשתמש בשירות המנוהל למחיקה בכמות גדולה, צריך להפעיל חיוב עבור הפרויקט Google Cloud .

על פעולות מחיקה בכמות גדולה נגבה תשלום על קריאות ומחיקות של מסמכים לפי התעריפים שמפורטים בתמחור של Firestore. בפעולות מחיקה בכמות גדולה, המערכת קוראת רשומה אחת באינדקס לכל מסמך שנמצא, ומבצעת פעולת מחיקה אחת לכל מסמך שנמחק. אתם מחויבים בפעולת קריאה אחת על קריאה של עד 1,000 רשומות אינדקס. לדוגמה, על פעולת מחיקה בכמות גדולה שבה נמחקו 1,500 מסמכים, תחויבו על 2 קריאות של מסמכים ועל 1,500 מחיקות של מסמכים.

חשוב לזכור שחיובים ב-Firestore מתבססים על העבודה בפועל. אם הפעולה בוטלה או נכשלה בגלל טעות של המשתמש, תחויבו על ההתקדמות שהושגה. ב-Firestore לא נחייב קריאות או מחיקות של מסמכים שלא נמחקים בסופו של דבר, כמו מסמכים שמשתנים אחרי שתהליך המחיקה מתחיל. העלות תשויך ליום שבו הפעולה תושלם.

פעולות של מחיקה בכמות גדולה לא מפעילות את ההתראות על Google Cloud התקציב עד שהן מסתיימות. באופן דומה, פעולות קריאה ומחיקה שמתבצעות במהלך פעולת מחיקה בכמות גדולה מתווספות לשימוש בחבילה החינמית אחרי שהפעולה מסתיימת. פעולות של מחיקה בכמות גדולה לא משפיעות על השימוש שמוצג בקטע השימוש במסוף.

צפייה בעלויות של מחיקה בכמות גדולה

פעולות של מחיקה בכמות גדולה מקבלות את התווית goog-firestoremanaged:bulkdelete. בדף דוחות חיוב ב-Cloud, אפשר להשתמש בתווית הזו כדי לראות את העלויות שקשורות לפעולות של מחיקה בכמות גדולה.

שיטות מומלצות

לא מומלץ לדלג על נתונים שנמחקו, כי זה עלול להאט את השאילתות.