איסוף יומני DNS פסיביים
במאמר הזה מוסבר איך להטמיע יומני DNS פסיביים ב-Google Security Operations באמצעות Google Cloud Storage V2.
Passive DNS הוא מקור נתונים של מודיעין DNS שמתעד רשומות היסטוריות של פענוח DNS לצורך ניתוח איומים וחקירת דומיינים. בדרך כלל הנתונים נאספים ונשמרים כקבצים, לכן צריך להעלות את הקבצים האלה לקטגוריה של Google Cloud Storage (GCS), ואז להגדיר פיד של Google SecOps כדי להטמיע אותם.
לפני שמתחילים
חשוב לוודא שיש לכם את הדברים הבאים:
- מופע של Google SecOps.
- פרויקט ב-Google Cloud שבו פועל Cloud Storage API.
- הרשאות ליצירה ולניהול של קטגוריות ב-GCS.
- הרשאות לניהול מדיניות IAM בקטגוריות של GCS.
- גישה לקובצי נתונים של DNS פסיבי (לדוגמה, DNSDB, Farsight או ספק DNS פסיבי אחר).
- נתוני DNS פסיביים שיוצאו בפורמט נתמך (לדוגמה, JSON או CSV).
יצירת קטגוריה של Google Cloud Storage
- נכנסים למסוף Google Cloud.
- בוחרים את הפרויקט או יוצרים פרויקט חדש.
- בתפריט הניווט, נכנסים ל-Cloud Storage > Buckets.
- לוחצים על Create bucket.
ממלאים את פרטי ההגדרה הבאים:
הגדרה ערך Name your bucket מזינים שם ייחודי ברמה גלובלית (לדוגמה, passive-dns-logs)סוג המיקום בוחרים לפי הצרכים (אזור, שני אזורים, מספר אזורים) Location בוחרים את המיקום הכי קרוב למכונת Google SecOps (לדוגמה, us-central1)סוג אחסון (storage class) רגיל (מומלץ ליומנים שהגישה אליהם תכופה) בקרת גישה אחידה (מומלץ) כלי הגנה אופציונלי: הפעלת ניהול גרסאות של אובייקטים או מדיניות שמירת נתונים לוחצים על יצירה.
הגדרת ייצוא אוטומטי של נתוני DNS פסיביים ל-GCS
נתוני DNS פסיביים זמינים בדרך כלל כקבצים שמיוצאים מספק של מודיעין DNS (לדוגמה, Farsight DNSDB, DomainTools או Cisco Umbrella Investigate). כדי שהנתונים ב-GCS יהיו עדכניים, צריך להגדיר צינור עיבוד נתונים אוטומטי לייצוא באמצעות אחת מהגישות הבאות.
אפשרות 1: Cloud Scheduler עם Cloud Build (מומלץ)
משתמשים ב-Cloud Build שמופעל על ידי Cloud Scheduler כדי להריץ משימה בקונטיינר שמאחזרת נתוני DNS פסיביים מהספק וכותבת אותם ב-GCS.
יוצרים חשבון שירות למשימת הייצוא:
- במסוף GCP, נכנסים לדף IAM & Admin > Service Accounts.
- לוחצים על Create Service Account.
- מזינים את פרטי ההגדרה הבאים:
- Service account name: מזינים
passive-dns-export-sa - Service account description: מזינים
Service account for automated Passive DNS data export to GCS
- Service account name: מזינים
- לוחצים על יצירה והמשך.
- מוסיפים את התפקידים הבאים:
- אדמין של אובייקטים באחסון (כדי לכתוב קבצים ב-GCS)
- עריכה ב-Cloud Build (כדי להריץ משימות של Cloud Build)
- לוחצים על סיום.
יוצרים קובץ תצורת build של Cloud (
cloudbuild.yaml):steps: - name: 'gcr.io/cloud-builders/gcloud' entrypoint: 'bash' args: - '-c' - | apt-get update && apt-get install -y curl jq # Fetch Passive DNS data from your provider # Replace with the actual API call for your provider # Example for Farsight DNSDB: TIMESTAMP=$(date -u +%Y%m%d_%H%M%S) curl -s -H "X-API-Key: $${PDNS_API_KEY}" \ "https://api.dnsdb.info/dnsdb/v2/lookup/rrset/name/*.example.com" \ -o /workspace/passive_dns_$${TIMESTAMP}.json # Upload to GCS gcloud storage cp /workspace/passive_dns_$${TIMESTAMP}.json \ gs://${_BUCKET_NAME}/passive-dns/ substitutions: _BUCKET_NAME: 'passive-dns-logs'שומרים את מפתח ה-API כסוד ב-Secret Manager:
- במסוף GCP, נכנסים לדף Security > Secret Manager.
- לוחצים על Create Secret.
- מזינים את
pdns-api-keyבתור שם הסוד. - מזינים את מפתח ה-API של ספק ה-DNS הפסיבי בתור הערך הסודי.
- לוחצים על יצירה.
יוצרים משימה של Cloud Scheduler כדי להפעיל את ה-build:
- במסוף GCP, נכנסים ל-Cloud Scheduler.
- לוחצים על Create Job.
ממלאים את פרטי ההגדרה הבאים:
הגדרה ערך שם passive-dns-export-dailyאזור בוחרים את אותו אזור שבו נמצא הקטגוריה ב-GCS תדירות 0 3 * * *(כל יום בשעה 03:00 לפי שעון UTC)אזור זמן UTC (מומלץ) סוג היעד HTTP כתובת URL https://cloudbuild.googleapis.com/v1/projects/YOUR_PROJECT_ID/buildsשיטת HTTP POST כותרת אימות הוספת טוקן OAuth חשבון שירות passive-dns-export-sa@YOUR_PROJECT_ID.iam.gserviceaccount.comלוחצים על יצירה.
אפשרות 2: Storage Transfer Service (למאגרי נתונים מקומיים)
אם נתוני ה-DNS הפסיבי מאוחסנים במערכת קבצים מקומית, צריך להשתמש ב-Storage Transfer Service עם סוכן העברה.
- במסוף GCP, נכנסים ל-Storage Transfer Service.
- לוחצים על Transfer.
- בוחרים באפשרות POSIX filesystem כמקור.
- פועלים לפי ההוראות להתקנת סוכן Storage Transfer במכונה עם גישה לקובצי הנתונים של ה-DNS הפסיבי.
מגדירים את משימת ההעברה:
הגדרה ערך ספריית קובצי המקור הנתיב לספרייה שמכילה קובצי נתונים של DNS פסיבי קטגוריית היעד passive-dns-logsנתיב היעד passive-dns/תזמון להגדיר לוח זמנים חוזר (לדוגמה, יומי) לוחצים על יצירה.
אחזור של חשבון השירות של Google SecOps
- עוברים אל הגדרות > ניהול נתונים > פידים. אם אתם משתמשים בפלטפורמה של SIEM בלבד, עוברים אל הגדרות > פידים.
- לוחצים על הוספת פיד חדש.
- לוחצים על הגדרת פיד יחיד.
- בשדה שם הפיד, מזינים שם לפיד (לדוגמה,
Passive DNS Logs). - בוחרים באפשרות Google Cloud Storage V2 בתור סוג המקור.
- בוחרים באפשרות Passive DNS בתור Log type.
- לוחצים על Get Service Account (קבלת חשבון שירות).
תוצג כתובת אימייל ייחודית של חשבון שירות, לדוגמה:
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comמעתיקים את כתובת האימייל הזו כדי להשתמש בה בשלב הבא.
מתן הרשאות IAM לחשבון השירות של Google SecOps
לחשבון השירות של Google SecOps צריך להיות התפקיד צפייה באובייקט אחסון בקטגוריה של GCS.
- נכנסים לדף Cloud Storage > Buckets.
- לוחצים על שם הקטגוריה (לדוגמה,
passive-dns-logs). - עוברים לכרטיסייה Permissions.
- לוחצים על הענקת גישה.
- מזינים את פרטי ההגדרה הבאים:
- הוספת חשבונות משתמשים: מדביקים את כתובת האימייל של חשבון השירות של Google SecOps (לדוגמה,
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com). - הקצאת תפקידים: בוחרים באפשרות צפייה באובייקטים באחסון.
- הוספת חשבונות משתמשים: מדביקים את כתובת האימייל של חשבון השירות של Google SecOps (לדוגמה,
לוחצים על Save.
הגדרת הפיד של Google SecOps
- עוברים אל הגדרות > ניהול נתונים > פידים. אם אתם משתמשים בפלטפורמה של SIEM בלבד, עוברים אל הגדרות > פידים.
- לוחצים על הוספת פיד חדש.
- לוחצים על הגדרת פיד יחיד.
- בשדה שם הפיד, מזינים שם לפיד (לדוגמה,
Passive DNS Logs). - בוחרים באפשרות Google Cloud Storage V2 בתור סוג המקור.
- בוחרים באפשרות Passive DNS בתור Log type.
- לוחצים על הבא.
מציינים ערכים לפרמטרים הבאים של הקלט:
כתובת ה-URL של קטגוריית האחסון: מזינים את ה-URI של קטגוריית ה-GCS:
gs://passive-dns-logs/passive-dns/- מחליפים את
passive-dns-logsבשם של קטגוריית GCS. - מחליפים את
passive-dnsבנתיב הקידומת שהגדרתם.
- מחליפים את
אפשרות מחיקת המקור: בוחרים את אפשרות המחיקה המועדפת:
- Never: אף פעם לא למחוק קבצים אחרי העברות (מומלץ לבדיקה).
- מחיקת קבצים שהועברו: מחיקת קבצים אחרי שהם הועברו בהצלחה.
מחיקת קבצים שהועברו וספריות ריקות: מחיקת קבצים וספריות ריקות אחרי שההעברה מסתיימת.
גיל הקובץ המקסימלי: כולל קבצים ששונו במספר הימים האחרונים (ברירת המחדל היא 180 ימים).
מרחב השמות של הנכס: מרחב השמות של הנכס.
תוויות הטמעה: התווית שתתווסף לאירועים מהפיד הזה.
לוחצים על הבא.
בודקים את הגדרות הפיד החדש במסך סיום ולוחצים על שליחה.
טבלת מיפוי UDM
| שדה ביומן | מיפוי UDM | Logic (פונקציה לוגית) |
|---|---|---|
| שם המארח | intermediary.hostname | הערך הועתק ישירות |
| timestamp_s | metadata.event_timestamp | מנותח כחותמת זמן של UNIX |
| metadata.event_type | צריך להגדיר את הערך "NETWORK_DNS" | |
| network.application_protocol | מגדירים את האפשרות "DNS" | |
| תשובה | network.dns.answers.data | הערך מהתשובה אחרי הסרת הנקודה בסוף |
| ttl | network.dns.answers.ttl | ההמרה למספר שלם |
| מחלקה | network.dns.questions.class | ממופה לערך מספרי (1 ל-IN, 3 ל-CH, 4 ל-HS) |
| שאילתה | network.dns.questions.name | ערך מהשאילתה אחרי הסרת הנקודה בסוף |
| סוג | network.dns.questions.type | ממופה מסוג (באותיות רישיות) לערך מספרי באמצעות מיפוי מסוג DNS |
| לקוח | principal.ip | הערך הועתק ישירות |
| שרת | target.ip | הערך הועתק ישירות |
| metadata.product_name | הגדרה ל-"DNS פסיבי" |
הבעיה עדיין לא נפתרה? קבלת תשובות מחברי הקהילה וממומחי Google SecOps.