הגדרת מסד נתונים של Amazon Aurora MySQL ל-CDC

בדף הזה מוסבר איך להגדיר לכידת נתונים של שינויים (CDC) כדי להזרים נתונים ממסד נתונים של Amazon Aurora MySQL אל יעד נתמך, כמו BigQuery או Cloud Storage.

לפני שמגדירים CDC למסד הנתונים של Amazon Aurora MySQL, מוודאים שיש לכם אשכול Aurora קיים ושהתחברתם לנקודת הקצה של Writer בשרת מסד הנתונים הראשי.

יצירת קבוצת פרמטרים

1. מפעילים את מרכז הבקרה של Amazon RDS.

2. בחלונית הניווט הנפתחת, לוחצים על קבוצות פרמטרים.

3. לוחצים על יצירת קבוצת פרמטרים. יופיע הדף Create Parameter Group.

4. כדי למלא את השדות בדף הזה, אפשר להיעזר בטבלה הבאה:

   שדה	תיאור
   קבוצת פרמטרים משפחתית	בוחרים את הקבוצה המשפחתית שתואמת למסד הנתונים שלכם.
   סוג	בוחרים באפשרות DB Cluster Parameter Group (קבוצת פרמטרים של אשכול מסד נתונים).
   שם הקבוצה	נותנים שם לקבוצת הפרמטרים.
   תיאור	מזינים תיאור לקבוצת הפרמטרים.

5. לוחצים על יצירה.

6. מסמנים את התיבה שמשמאל לקבוצת הפרמטרים החדשה שיצרתם.

7. בקטע פעולות של קבוצת פרמטרים, לוחצים על עריכה.

8. מגדירים את ערכי הפרמטרים הבאים:

   • לרפליקציה מבוססת GTID:

     פרמטר	ערך
     binlog_format	ROW
     log_bin_use_v1_row_events	1
     read_only	0
     net_read_timeout	3600
     net_write_timeout	3600
     wait_timeout	86400
     expire-logs-days	7
     binlog_row_image	FULL
     max_allowed_packet	1G (ערך מומלץ)
     log-replica-updates	1
     enforce-gtid-consistency	ON
     gtid_mode	ON אפשר להגדיר את הפרמטר הזה לערך ON רק אחרי שמגדירים את הפרמטר enforce-gtid-consistency לערך ON. באופן כללי, gtid_mode יכול לקבל את הערכים הבאים: OFF OFF_PERMISSIVE ON_PERMISSIVE ON אפשר לשנות את הערכים של הפרמטר gtid_mode רק בשלב אחד בכל פעם. לדוגמה, אם המצב הנוכחי מוגדר ל-OFF, צריך לבצע את הפעולות הבאות: משנים את ההגדרה ל-OFF_PERMISSIVE. משנים את ההגדרה ל-ON_PERMISSIVE. משנים את ההגדרה ל-ON. מידע נוסף זמין במאמרי העזרה בנושא MySQL.

   • לרפליקציה מבוססת binlog:

     פרמטר	ערך
     binlog_format	ROW

9. לוחצים על שמירת השינויים.

הקצאת קבוצת הפרמטרים למופע של מסד הנתונים

1. מפעילים את מרכז הבקרה של Amazon RDS.

2. במגירת הניווט, לוחצים על מסדי נתונים ואז בוחרים את מופע מסד הנתונים.

3. בתפריט פעולות על המופע, בוחרים באפשרות שינוי. מופיעה תיבת הדו-שיח Modify DB Instance.

4. בקטע הגדרה נוספת, בוחרים את קבוצת הפרמטרים של אשכול מסד הנתונים שיצרתם.

5. מגדירים את תקופת השמירה של הגיבוי ל-7 ימים.

6. לוחצים על Continue.

7. בחלונית Scheduling of Modifications, בוחרים באפשרות Apply immediately.

הגדרת תקופת השמירה של יומן בינארי

1. מזינים את פקודת MySQL הבאה:

   call mysql.rds_set_configuration('binlog retention hours', 168);

   אתם מזינים את הפקודה הזו כי אתם רוצים לוודא שהשכפול יתבצע בצורה תקינה. לשם כך, אתם מגדירים את המערכת לשמירת יומני בינארי למשך 7 ימים לפחות (או 168 שעות).

2. מפעילים מחדש את שרת MySQL כדי שהשינויים שביצעתם ייכנסו לתוקף.

יצירת משתמש Datastream

1. יוצרים משתמש Datastream:

   CREATE USER 'datastream'@'%' IDENTIFIED BY 'YOUR_PASSWORD';

2. מעניקים להם את ההרשאות הבאות:

   GRANT REPLICATION SLAVE, SELECT, REPLICATION CLIENT ON *.* TO 'datastream'@'%';
   GRANT EXECUTE ON PROCEDURE mysql.rds_show_configuration TO 'datastream'@'%';
   FLUSH PRIVILEGES;

המאמרים הבאים

• מידע נוסף על האופן שבו Datastream עובד עם מקורות MySQL