בדף הזה מוסבר איך להשתמש ברפליקציה בין מרכזי נתונים, על ידי יצירה של אשכולות משניים של מסדי נתונים ב-Kubernetes ועבודה איתם.
לסקירה כללית של המושגים שקשורים לשכפול בין מרכזי נתונים, קראו את המאמר מידע על שכפול בין מרכזי נתונים.
לפני שמתחילים
- מוודאים שיש חיבור אמין לרשת עם זמן אחזור קצר בין מרכזי הנתונים הראשי והמשני, כי זה חיוני כדי שהשכפול בין מרכזי הנתונים יפעל ביעילות.
- מתקינים את הגרסה העדכנית של אופרטור AlloyDB Omni כדי לפרוס את AlloyDB Omni באשכול Kubernetes במרכז הנתונים הראשי ובאשכול Kubernetes במרכז הנתונים המשני. אפשר לשכפל בין מרכזי נתונים באופרטור AlloyDB Omni מגרסה 1.5.0 ואילך.
- יוצרים אשכול של מסדי נתונים ב-AlloyDB Omni באשכול Kubernetes במרכז הנתונים הראשי.
- חשוב לוודא שבשרתים של מסד הנתונים הראשי והמשני באשכול מסד הנתונים הראשי יש מספיק מקום ליומן כתיבה מראש (WAL) שיכול להכיל את קובצי ה-WAL שנדרשים לשכפול לאשכול המשני. נתונים שלא שוכפלו עדיין לאשכול המשני מאוחסנים באשכול הראשי כקובצי WAL. בהתאם למהירות החיבור בין האשכול הראשי לאשכול המשני, יכול להיות שתצטרכו מקום נוסף בכונן למטרה הזו.
- חשוב לזכור את המידע הבא על מסדי נתונים משניים לזמינות גבוהה (גרסת טרום-השקה (Preview)): אם גרסת אופרטור AlloyDB Omni וגרסת הסוכן של מישור הבקרה הן 1.7.0 ואילך, אשכול מסד הנתונים המשני יכול לתמוך בגיבויים לזמינות גבוהה (HA).
בניגוד לשרתי הגיבוי של HA באשכול מסד הנתונים הראשי, שרתי הגיבוי של HA באשכול מסד הנתונים המשני הם אסינכרוניים עד שאשכול מסד הנתונים המשני מקודם למסד נתונים ראשי. מערכות HA במצב המתנה הופכות באופן אוטומטי לסינכרוניות או לא-סינכרוניות אם התפקיד של אשכול מסד הנתונים משתנה במהלך מעבר.
יצירת אשכול משני של מסדי נתונים
כדי ליצור אשכול משני של מסדי נתונים ב-AlloyDB Omni ולהפעיל רפליקציה מאשכול מסדי הנתונים הראשי:
מוודאים שהקישוריות החיצונית מופעלת באשכול מסד הנתונים הראשי של AlloyDB Omni. אם הקישוריות החיצונית לא מופעלת, מוסיפים את הקטע הבא לקטע spec במניפסט של אשכול מסד הנתונים:
... spec: ... allowExternalIncomingTraffic: true
כדי להשתמש בשכפול בין מרכזי נתונים עם אשכול של מסד נתונים ראשי שמופעלת בו זמינות גבוהה (HA), צריך לוודא שהשדה
replayReplicationSlotsOnStandbysמופעל באשכול של מסד הנתונים הראשי:... spec: ... availability: ... replayReplicationSlotsOnStandbys: true
הפעלת השדה הזה, יחד עם
logReplicationSlotsשמוסבר בשלב הבא, מסנכרנת את משבצת הרפליקציה שמשמשת את אשכול מסד הנתונים המשני לכל הגיבויים של הזמינות הגבוהה. ההגדרה הזו עוזרת למכונה הראשית החדשה של הזמינות הגבוהה לשמור את כל קובצי הכתיבה מראש ביומן (WAL) שאשכול מסד הנתונים המשני עדיין לא השתמש בהם אחרי יתירות כשל או החלפה, וכך אשכול מסד הנתונים המשני יכול להמשיך את הרפליקציה בלי הפרעה.כדי להפעיל את הרפליקציה באשכול מסד הנתונים הראשי, צריך להחיל מניפסט שדומה לזה שבהמשך על אשכול Kubernetes במרכז הנתונים הראשי:
apiVersion: v1 kind: Secret metadata: name: ha-rep-pw-DB_CLUSTER_NAME namespace: DB_CLUSTER_NAMESPACE type: Opaque data: rep-user-pw: "ENCODED_PASSWORD" --- apiVersion: alloydbomni.dbadmin.goog/v1 kind: Replication metadata: name: REPLICATION_NAME namespace: DB_CLUSTER_NAMESPACE spec: dbcluster: name: DB_CLUSTER_NAME upstream: password: name: ha-rep-pw-DB_CLUSTER_NAME logReplicationSlot: true
מחליפים את מה שכתוב בשדות הבאים:
-
DB_CLUSTER_NAME: השם של אשכול מסד הנתונים, לדוגמהdbc-1. -
ENCODED_PASSWORD: הסיסמה של משתמש מסד הנתונים שתשמש לרפליקציה ממסדי נתונים משניים, מקודדת כמחרוזת base64 – לדוגמה,Q2hhbmdlTWUxMjM= for ChangeMe123. ערך ברירת המחדל הואalloydbreplica. -
REPLICATION_NAME: שם הרפליקציה, לדוגמהreplication-1. -
LOG_REPLICATION_SLOT: רישום נתונים של משבצות שכפול ביומן לקובצי WAL. כדי להפעיל את האפשרות הזו, צריך להגדיר את הערך שלה כ-true. ערך ברירת המחדל הואfalse.
מומלץ להפעיל את האפשרות
logReplicationSlotעם אשכול מסד נתונים ראשי שמופעלת בו זמינות גבוהה (HA), כדי לוודא שהרפליקציה תמשיך לפעול אחרי יתירות כשל או מעבר.מחכים עד שסטטוס הרפליקציה יהיה מוכן.
-
כדי לקבל את פרטי החיבור במעלה הזרם שמשמשים להגדרת הרפליקציה באשכול מסד הנתונים המשני, מריצים את הפקודה הבאה:
kubectl get replication REPLICATION_NAME kubectl get replication REPLICATION_NAME -o json | jq .status.upstream
הפלט לדוגמה אמור להיראות כך:
{ "host": "35.230.32.36", "password": { "name": "ha-rep-pw-dbc-1" }, "port": 5432, "replicationSlotName": "dbc_1_replication_1", "username": "alloydbreplica" }- שימו לב לפלט, כי תצטרכו אותו כדי להפעיל את הרפליקציה באשכול מסד הנתונים המשני בשלב הבא.
- יוצרים אשכול AlloyDB Omni באשכול Kubernetes במרכז הנתונים המשני, באמצעות הגדרה שזהה לאשכול מסד הנתונים הראשי.
- מוודאים שהקישוריות החיצונית מופעלת באשכול מסד הנתונים המשני של AlloyDB Omni
אם הקישוריות החיצונית לא מופעלת, מוסיפים את הקטע הבא למפרט של המניפסט:
... spec: ... allowExternalIncomingTraffic: true
- כדי להפעיל רפליקציה באשכול מסד הנתונים המשני, צריך להחיל מניפסט שדומה לזה שבהמשך על אשכול Kubernetes במרכז הנתונים המשני:
apiVersion: v1 kind: Secret metadata: name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME namespace: SECONDARY_DB_CLUSTER_NAMESPACE type: Opaque data: rep-user-pw: "ENCODED_PASSWORD" --- apiVersion: alloydbomni.dbadmin.goog/v1 kind: Replication metadata: name: SECONDARY_REPLICATION_NAME namespace: SECONDARY_DB_CLUSTER_NAMESPACE spec: dbcluster: name: SECONDARY_DB_CLUSTER_NAME downstream: host: PRIMARY_HOST port: PRIMARY_PORT username: alloydbreplica password: name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME replicationSlotName: PRIMARY_REPLICATION_SLOT control: setup
מחליפים את מה שכתוב בשדות הבאים:
-
SECONDARY_DB_CLUSTER_NAME: השם של אשכול מסד הנתונים המשני, לדוגמהdbc-2. -
ENCODED_PASSWORD: הסיסמה של משתמש מסד הנתונים שמשמשת לשכפול מאשכול מסד הנתונים הראשי, מקודדת כמחרוזת base64 – לדוגמה,Q2hhbmdlTWUxMjM= for ChangeMe123. ערך ברירת המחדל הואalloydbreplica. -
SECONDARY_REPLICATION_NAME: שם הרפליקציה, לדוגמה `replication-2`. -
PRIMARY_HOST: נקודת הקצה של החיבור של אשכול מסד הנתונים הראשי מהפלט בשלב 4, שאליה מסד הנתונים המשני יכול לגשת לצורך רפליקציה. PRIMARY_PORT: יציאת החיבור של אשכול מסד הנתונים הראשי מהפלט בשלב 4, שאליה מסד הנתונים המשני יכול לגשת לצורך שכפול.-
PRIMARY_REPLICATION_SLOT: השם של משבצת הרפליקציה באשכול מסד הנתונים הראשי מהפלט בשלב 4, שבו מסד הנתונים המשני יכול להשתמש לרפליקציה.
-
הצגת הרפליקציה באשכול מסד הנתונים המשני
כדי לראות מידע מפורט על אשכול מסדי נתונים משני של AlloyDB Omni ועל סטטוס הרפליקציה שלו, מריצים את הפקודות הבאות:
kubectl get dbcluster SECONDARY_DB_CLUSTER_NAME kubectl get replication SECONDARY_REPLICATION_NAME
אחרי שמגדירים בהצלחה את אשכול מסד הנתונים המשני, ומוגדרת בו רפליקציה בסטרימינג מאשכול מסד הנתונים הראשי, סטטוס הרפליקציה הוא "מוכן" ו"תקין".
קידום אשכול משני של מסד נתונים
כשמקַדמים אשכול של מסד נתונים משני, קודם צריך לוודא שהאשכול של מסד הנתונים המשני החיל את כל העסקאות שהתקבלו מהאשכול של מסד הנתונים הראשי.
- מוודאים שסטטוס הרפליקציה של אשכול מסד הנתונים המשני הוא גם מוכן וגם תקין:
kubectl get replication SECONDARY_REPLICATION_NAME
- מפסיקים את כל פעולות הכתיבה באשכול מסד הנתונים הראשי. מבצעים נקודת ביקורת באשכול מסד הנתונים הראשי, ואז מריצים את השאילתה הבאה באשכול מסד הנתונים הראשי כדי לבדוק את זמן האחזור של הרפליקציה של מסד הנתונים המשני. מוודאים שהתוצאה מראה השהיה מינימלית.
-
מבצעים נקודת ביקורת כדי לרוקן את הזיכרון לדיסק.
psql -h PRIMARY_HOST -U postgres -d postgres -c 'CHECKPOINT;'
- בודקים את השהיית הרפליקציה. ערך השהיה של
0הוא אופטימלי. אם העיכוב גדול מ-0, עדיין אפשר לקדם את אשכול מסד הנתונים המשני. עם זאת, יש סיכון לאובדן עסקאות אחרונות שכבר בוצעו באשכול מסד הנתונים הראשי.
psql -h PRIMARY_HOST -U postgres -d postgres -c 'SELECT application_name, pg_wal_lsn_diff(pg_current_wal_lsn(), replay_lsn) AS replay_lag FROM pg_stat_replication;'
-
מבצעים נקודת ביקורת כדי לרוקן את הזיכרון לדיסק.
-
כדי לקדם אשכול של מסד נתונים משני לאשכול של מסד נתונים ראשי, מעדכנים את השדה
controlבמניפסט הרפליקציה של האשכול של מסד הנתונים המשני לערךpromote. לאחר מכן, מחילים את מניפסט הרפליקציה המעודכן על אשכול Kubernetes במרכז הנתונים המשני.apiVersion: v1 kind: Secret metadata: name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME namespace: SECONDARY_DB_CLUSTER_NAMESPACE type: Opaque data: rep-user-pw: "ENCODED_PASSWORD" --- apiVersion: alloydbomni.dbadmin.goog/v1 kind: Replication metadata: name: SECONDARY_REPLICATION_NAME namespace: SECONDARY_DB_CLUSTER_NAMESPACE spec: dbcluster: name: SECONDARY_DB_CLUSTER_NAME downstream: host: PRIMARY_HOST port: PRIMARY_PORT username: alloydbreplica password: name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME replicationSlotName: PRIMARY_REPLICATION_SLOT control: promote
ביצוע מעבר
לפני שמבצעים את המעבר, צריך לוודא שאשכולות מסדי הנתונים הראשיים והמשניים בשני מרכזי הנתונים מחוברים לאינטרנט ובמצב תקין.
כדי לשמור על עקביות הנתונים בין אשכולות מסדי הנתונים הראשיים והמשניים ולבצע מעבר, פועלים לפי השלבים הבאים:
- מוודאים שסטטוס הרפליקציה של אשכול מסד הנתונים המשני הוא גם מוכן וגם תקין:
kubectl get replication SECONDARY_REPLICATION_NAME
- מפסיקים את כל פעולות הכתיבה באשכול מסד הנתונים הראשי, ואז מבצעים את הפעולות הבאות באשכול מסד הנתונים הראשי:
-
מבצעים נקודת ביקורת כדי לרוקן את הזיכרון לדיסק:
psql -h PRIMARY_HOST -U postgres -d postgres -c 'CHECKPOINT;'
-
בודקים את השהיית הרפליקציה של אשכול מסד הנתונים המשני ומוודאים שהתוצאה מראה ערך השהיה של
0:psql -h PRIMARY_HOST -U postgres -d postgres -c 'SELECT application_name, pg_wal_lsn_diff(pg_current_wal_lsn(), replay_lsn) AS replay_lag FROM pg_stat_replication;'
-
מבצעים נקודת ביקורת כדי לרוקן את הזיכרון לדיסק:
-
כדי לקדם את אשכול מסד הנתונים המשני לאשכול מסד נתונים ראשי ולהמיר את אשכול מסד הנתונים הראשי הקודם לאשכול מסד נתונים משני, מבצעים את השלבים הבאים:
-
כדי להמיר את אשכול מסד הנתונים המשני של AlloyDB Omni לאשכול מסד נתונים ראשי, מעדכנים את מניפסט הרפליקציה שלו באשכול Kubernetes במרכז הנתונים המשני באופן הבא:
apiVersion: v1 kind: Secret metadata: name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME namespace: SECONDARY_DB_CLUSTER_NAMESPACE type: Opaque data: rep-user-pw: "ENCODED_PASSWORD" --- apiVersion: alloydbomni.dbadmin.goog/v1 kind: Replication metadata: name: SECONDARY_REPLICATION_NAME namespace: SECONDARY_DB_CLUSTER_NAMESPACE spec: dbcluster: name: SECONDARY_DB_CLUSTER_NAME upstream: password: name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME
מחליפים את
SECONDARY_DB_CLUSTER_NAMEבשם של אשכול מסד הנתונים המשני, לדוגמהdbc-2.מחכים עד שסטטוס הרפליקציה יהיה מוכן.
כדי לקבל את פרטי החיבור במעלה הזרם לרפליקציה, מריצים את הפקודה הבאה:
kubectl get replication SECONDARY_REPLICATION_NAME kubectl get replication SECONDARY_REPLICATION_NAME -o json | jq .status.upstream
הפלט לדוגמה אמור להיראות כך:
{ "host": "34.23.207.137", "password": { "name": "ha-rep-pw-dbc-2" }, "port": 5432, "replicationSlotName": "dbc_2_replication_2", "username": "alloydbreplica" }-
כדי להמיר את אשכול מסד הנתונים הראשי של AlloyDB Omni לאשכול מסד נתונים משני, צריך לעדכן את מניפסט הרפליקציה שלו באשכול Kubernetes במרכז הנתונים הראשי:
apiVersion: v1 kind: Secret metadata: name: ha-rep-pw-DB_CLUSTER_NAME namespace: DB_CLUSTER_NAMESPACE type: Opaque data: rep-user-pw: "ENCODED_PASSWORD" --- apiVersion: alloydbomni.dbadmin.goog/v1 kind: Replication metadata: name: REPLICATION_NAME namespace: DB_CLUSTER_NAMESPACE spec: dbcluster: name: DB_CLUSTER_NAME downstream: host: SECONDARY_HOST port: SECONDARY_PORT username: alloydbreplica password: name: ha-rep-pw-DB_CLUSTER_NAME replicationSlotName: SECONDARY_REPLICATION_SLOT control: rewind
מחכים עד שסטטוס הרפליקציה יהיה מוכן ותקין.
מאמתים את סטטוס הרפליקציה:
kubectl get replication REPLICATION_NAME
-
ביצוע התאוששות מאסון (DR) לא מתוכנן
אם מרכז הנתונים הראשי או אשכול מסד הנתונים הראשי לא זמינים באופן בלתי צפוי, אתם יכולים לבצע מעבר לא מתוכנן להתאוששות מאסון. כדי לעשות את זה, מקדמים את אשכול מסד הנתונים המשני, ואז מגדירים מחדש את אשכול מסד הנתונים הראשי הקודם אחרי שהוא חוזר למצב אונליין:
- העברת אשכול מסד הנתונים המשני של AlloyDB Omni לאשכול מסד נתונים ראשי. מעדכנים את מניפסט הרפליקציה של אשכול מסד הנתונים המשני באשכול Kubernetes במרכז הנתונים המשני, כפי שמתואר בשלב 3א בקטע ביצוע מעבר.
- אחרי שמרכז הנתונים הראשי המקורי יהיה זמין, המירו את אשכול מסד הנתונים הראשי הקודם לאשכול מסד נתונים משני שמשכפל מהראשי החדש. מבצעים את שלבים 3b, 3c ו-3d בקטע ביצוע מעבר, עם שינוי בשלב 3c. בשלב 3ג, מגדירים את
control: setupבמקוםcontrol: rewindכדי להפעיל מחדש את האשכול מהמאסטר החדש. אל תשתמשו ב-control: rewindכי יכול להיות שאשכול מסד הנתונים הראשי הקודם מכיל שינויים שלא סונכרנו לפני יתירות הכשל.