הגדרת מסד נתונים של Amazon Aurora PostgreSQL

בדף הזה מוסבר איך להגדיר לכידת נתונים משתנים (CDC) כדי להזרים נתונים ממסד נתונים של Amazon Aurora PostgreSQL אל יעד נתמך, כמו BigQuery או Cloud Storage.

יצירת קבוצת פרמטרים

  1. מפעילים את מרכז הבקרה של Amazon RDS.
  2. בחלונית הניווט, לוחצים על קבוצות פרמטרים ואז על יצירת קבוצת פרמטרים. יופיע הדף Create Parameter Group.
  3. משתמשים בטבלה הבאה כדי למלא את השדות בדף הזה, ואז לוחצים על יצירה:
    שדהתיאור
    קבוצת פרמטרים משפחתיתבוחרים את הקבוצה המשפחתית שתואמת למסד הנתונים שלכם.
    סוגבוחרים באפשרות DB Cluster Parameter Group (קבוצת פרמטרים של אשכול מסד נתונים).
    שם הקבוצהנותנים שם לקבוצת הפרמטרים.
    תיאורמזינים תיאור לקבוצת הפרמטרים.
  4. מסמנים את התיבה שמשמאל לקבוצת הפרמטרים החדשה שיצרתם, ואז בקטע פעולות בקבוצת פרמטרים לוחצים על עריכה.
  5. משנים את הערך של הפרמטר rds.logical_replication ל-1.
  6. לוחצים על שמירת השינויים.

הקצאת קבוצת הפרמטרים למופע של מסד הנתונים

  1. מפעילים את מרכז הבקרה של Amazon RDS.
  2. בחלונית הניווט, לוחצים על מסדי נתונים ובוחרים את מופע מסד הנתונים.
  3. בתפריט פעולות על המופע, בוחרים באפשרות שינוי. מופיעה תיבת הדו-שיח Modify DB Instance.
  4. בקטע Additional configuration (הגדרה נוספת), בוחרים את קבוצת הפרמטרים של אשכול מסד הנתונים שיצרתם.
  5. מגדירים את תקופת השמירה של הגיבוי ל-7 ימים.
  6. לוחצים על Continue.
  7. בחלונית Scheduling of modifications, בוחרים באפשרות Apply immediately.

מבצעים אתחול מחדש של מופע מסד הנתונים

  1. מפעילים את מרכז הבקרה של Amazon RDS.
  2. בחלונית הניווט, לוחצים על מסדי נתונים ובוחרים את מופע מסד הנתונים.
  3. בתפריט הנפתח פעולות, בוחרים באפשרות הפעלה מחדש ואז לוחצים על אישור.

יצירה של אתר חדשות ושל משבצת שכפול

  1. יוצרים פרסום לשינויים בטבלאות שרוצים לשכפל. מומלץ ליצור פרסום רק לטבלאות שרוצים לשכפל. כך Datastream יכול לקרוא רק את הנתונים הרלוונטיים, והעומס על מסד הנתונים ועל Datastream קטן יותר:

    CREATE PUBLICATION PUBLICATION_NAME
FOR TABLE SCHEMA1.TABLE1, SCHEMA2.TABLE2;

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫PUBLICATION_NAME: שם הפרסום. תצטרכו לספק את השם הזה כשתיצרו מקור נתונים באשף ליצירת מקורות נתונים ב-Datastream.
    • ‫SCHEMA: השם של הסכימה שמכילה את הטבלה.
    • ‫TABLE: השם של הטבלה שרוצים לשכפל.

    אפשר גם ליצור פרסום לכל הטבלאות במסד הנתונים. שימו לב: הגישה הזו מגדילה את העומס גם על מסד הנתונים של המקור וגם על Datastream:

    CREATE PUBLICATION PUBLICATION_NAME FOR ALL TABLES;

  2. יוצרים משבצת שכפול באמצעות הפקודה הבאה של PostgreSQL: 

    SELECT PG_CREATE_LOGICAL_REPLICATION_SLOT('REPLICATION_SLOT_NAME', 'pgoutput');

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫REPLICATION_SLOT_NAME: השם של משבצת השכפול. תצטרכו לספק את השם הזה כשתיצרו מקור נתונים באשף ליצירת מקורות נתונים ב-Datastream.

יצירת משתמש Datastream

  1. כדי ליצור משתמש Datastream, מזינים את פקודת PostgreSQL הבאה: 

    CREATE USER USER_NAME WITH ENCRYPTED PASSWORD 'USER_PASSWORD';

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫USER_NAME: השם של משתמש Datastream שרוצים ליצור.
    • ‫USER_PASSWORD: הסיסמה של משתמש Datastream שרוצים ליצור.

  2. מעניקים למשתמש שיצרתם את ההרשאות הבאות: 

    GRANT RDS_REPLICATION TO USER_NAME;
GRANT SELECT ON ALL TABLES IN SCHEMA SCHEMA_NAME TO USER_NAME;
GRANT USAGE ON SCHEMA SCHEMA_NAME TO USER_NAME;
ALTER DEFAULT PRIVILEGES IN SCHEMA SCHEMA_NAME
  GRANT SELECT ON TABLES TO USER_NAME;

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫SCHEMA_NAME: השם של הסכימה שרוצים לתת לה את ההרשאות.
    • ‫USER_NAME: המשתמש שרוצים להעניק לו את ההרשאות.

המאמרים הבאים