איסוף יומני DNS פסיביים

נתמך ב:

במאמר הזה מוסבר איך להטמיע יומני DNS פסיביים ב-Google Security Operations באמצעות Google Cloud Storage V2.

‫Passive DNS הוא מקור נתונים של מודיעין DNS שמתעד רשומות היסטוריות של פענוח DNS לצורך ניתוח איומים וחקירת דומיינים. בדרך כלל הנתונים נאספים ונשמרים כקבצים, לכן צריך להעלות את הקבצים האלה לקטגוריה של Google Cloud Storage‏ (GCS), ואז להגדיר פיד של Google SecOps כדי להטמיע אותם.

לפני שמתחילים

חשוב לוודא שיש לכם את הדברים הבאים:

  • מופע של Google SecOps.
  • פרויקט ב-Google Cloud שבו פועל Cloud Storage API.
  • הרשאות ליצירה ולניהול של קטגוריות ב-GCS.
  • הרשאות לניהול מדיניות IAM בקטגוריות של GCS.
  • גישה לקובצי נתונים של DNS פסיבי (לדוגמה, DNSDB,‏ Farsight או ספק DNS פסיבי אחר).
  • נתוני DNS פסיביים שיוצאו בפורמט נתמך (לדוגמה, JSON או CSV).

יצירת קטגוריה של Google Cloud Storage

  1. נכנסים למסוף Google Cloud.
  2. בוחרים את הפרויקט או יוצרים פרויקט חדש.
  3. בתפריט הניווט, נכנסים ל-Cloud Storage > Buckets.
  4. לוחצים על Create bucket.
  5. ממלאים את פרטי ההגדרה הבאים:

    הגדרה ערך
    Name your bucket מזינים שם ייחודי ברמה גלובלית (לדוגמה, passive-dns-logs)
    סוג המיקום בוחרים לפי הצרכים (אזור, שני אזורים, מספר אזורים)
    Location בוחרים את המיקום הכי קרוב למכונת Google SecOps (לדוגמה, us-central1)
    סוג אחסון (storage class) רגיל (מומלץ ליומנים שהגישה אליהם תכופה)
    בקרת גישה אחידה (מומלץ)
    כלי הגנה אופציונלי: הפעלת ניהול גרסאות של אובייקטים או מדיניות שמירת נתונים
  6. לוחצים על יצירה.

הגדרת ייצוא אוטומטי של נתוני DNS פסיביים ל-GCS

נתוני DNS פסיביים זמינים בדרך כלל כקבצים שמיוצאים מספק של מודיעין DNS (לדוגמה, Farsight DNSDB,‏ DomainTools או Cisco Umbrella Investigate). כדי שהנתונים ב-GCS יהיו עדכניים, צריך להגדיר צינור עיבוד נתונים אוטומטי לייצוא באמצעות אחת מהגישות הבאות.

משתמשים ב-Cloud Build שמופעל על ידי Cloud Scheduler כדי להריץ משימה בקונטיינר שמאחזרת נתוני DNS פסיביים מהספק וכותבת אותם ב-GCS.

  1. יוצרים חשבון שירות למשימת הייצוא:

    1. במסוף GCP, נכנסים לדף IAM & Admin > Service Accounts.
    2. לוחצים על Create Service Account.
    3. מזינים את פרטי ההגדרה הבאים:
      • Service account name: מזינים passive-dns-export-sa
      • Service account description: מזינים Service account for automated Passive DNS data export to GCS
    4. לוחצים על יצירה והמשך.
    5. מוסיפים את התפקידים הבאים:
      • אדמין של אובייקטים באחסון (כדי לכתוב קבצים ב-GCS)
      • עריכה ב-Cloud Build (כדי להריץ משימות של Cloud Build)
    6. לוחצים על סיום.
  2. יוצרים קובץ תצורת build של Cloud‏ (cloudbuild.yaml):

    steps:
      - name: 'gcr.io/cloud-builders/gcloud'
        entrypoint: 'bash'
        args:
          - '-c'
          - |
            apt-get update && apt-get install -y curl jq
            # Fetch Passive DNS data from your provider
            # Replace with the actual API call for your provider
            # Example for Farsight DNSDB:
            TIMESTAMP=$(date -u +%Y%m%d_%H%M%S)
            curl -s -H "X-API-Key: $${PDNS_API_KEY}" \
              "https://api.dnsdb.info/dnsdb/v2/lookup/rrset/name/*.example.com" \
              -o /workspace/passive_dns_$${TIMESTAMP}.json
            # Upload to GCS
            gcloud storage cp /workspace/passive_dns_$${TIMESTAMP}.json \
              gs://${_BUCKET_NAME}/passive-dns/
    substitutions:
      _BUCKET_NAME: 'passive-dns-logs'
    
  3. שומרים את מפתח ה-API כסוד ב-Secret Manager:

    1. במסוף GCP, נכנסים לדף Security > Secret Manager.
    2. לוחצים על Create Secret.
    3. מזינים את pdns-api-key בתור שם הסוד.
    4. מזינים את מפתח ה-API של ספק ה-DNS הפסיבי בתור הערך הסודי.
    5. לוחצים על יצירה.
  4. יוצרים משימה של Cloud Scheduler כדי להפעיל את ה-build:

    1. במסוף GCP, נכנסים ל-Cloud Scheduler.
    2. לוחצים על Create Job.
    3. ממלאים את פרטי ההגדרה הבאים:

      הגדרה ערך
      שם passive-dns-export-daily
      אזור בוחרים את אותו אזור שבו נמצא הקטגוריה ב-GCS
      תדירות ‫0 3 * * * (כל יום בשעה 03:00 לפי שעון UTC)
      אזור זמן ‫UTC (מומלץ)
      סוג היעד HTTP
      כתובת URL https://cloudbuild.googleapis.com/v1/projects/YOUR_PROJECT_ID/builds
      שיטת HTTP POST
      כותרת אימות הוספת טוקן OAuth
      חשבון שירות passive-dns-export-sa@YOUR_PROJECT_ID.iam.gserviceaccount.com
    4. לוחצים על יצירה.

אפשרות 2: Storage Transfer Service (למאגרי נתונים מקומיים)

אם נתוני ה-DNS הפסיבי מאוחסנים במערכת קבצים מקומית, צריך להשתמש ב-Storage Transfer Service עם סוכן העברה.

  1. במסוף GCP, נכנסים ל-Storage Transfer Service.
  2. לוחצים על Transfer.
  3. בוחרים באפשרות POSIX filesystem כמקור.
  4. פועלים לפי ההוראות להתקנת סוכן Storage Transfer במכונה עם גישה לקובצי הנתונים של ה-DNS הפסיבי.
  5. מגדירים את משימת ההעברה:

    הגדרה ערך
    ספריית קובצי המקור הנתיב לספרייה שמכילה קובצי נתונים של DNS פסיבי
    קטגוריית היעד passive-dns-logs
    נתיב היעד passive-dns/
    תזמון להגדיר לוח זמנים חוזר (לדוגמה, יומי)
  6. לוחצים על יצירה.

אחזור של חשבון השירות של Google SecOps

  1. עוברים אל הגדרות > ניהול נתונים > פידים. אם אתם משתמשים בפלטפורמה של SIEM בלבד, עוברים אל הגדרות > פידים.
  2. לוחצים על הוספת פיד חדש.
  3. לוחצים על הגדרת פיד יחיד.
  4. בשדה שם הפיד, מזינים שם לפיד (לדוגמה, Passive DNS Logs).
  5. בוחרים באפשרות Google Cloud Storage V2 בתור סוג המקור.
  6. בוחרים באפשרות Passive DNS בתור Log type.
  7. לוחצים על Get Service Account (קבלת חשבון שירות).
  8. תוצג כתובת אימייל ייחודית של חשבון שירות, לדוגמה:

    chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com
    
  9. מעתיקים את כתובת האימייל הזו כדי להשתמש בה בשלב הבא.

מתן הרשאות IAM לחשבון השירות של Google SecOps

לחשבון השירות של Google SecOps צריך להיות התפקיד צפייה באובייקט אחסון בקטגוריה של GCS.

  1. נכנסים לדף Cloud Storage > Buckets.
  2. לוחצים על שם הקטגוריה (לדוגמה, passive-dns-logs).
  3. עוברים לכרטיסייה Permissions.
  4. לוחצים על הענקת גישה.
  5. מזינים את פרטי ההגדרה הבאים:
    • הוספת חשבונות משתמשים: מדביקים את כתובת האימייל של חשבון השירות של Google SecOps (לדוגמה, chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com).
    • הקצאת תפקידים: בוחרים באפשרות צפייה באובייקטים באחסון.
  6. לוחצים על Save.

הגדרת הפיד של Google SecOps

  1. עוברים אל הגדרות > ניהול נתונים > פידים. אם אתם משתמשים בפלטפורמה של SIEM בלבד, עוברים אל הגדרות > פידים.
  2. לוחצים על הוספת פיד חדש.
  3. לוחצים על הגדרת פיד יחיד.
  4. בשדה שם הפיד, מזינים שם לפיד (לדוגמה, Passive DNS Logs).
  5. בוחרים באפשרות Google Cloud Storage V2 בתור סוג המקור.
  6. בוחרים באפשרות Passive DNS בתור Log type.
  7. לוחצים על הבא.
  8. מציינים ערכים לפרמטרים הבאים של הקלט:

    • כתובת ה-URL של קטגוריית האחסון: מזינים את ה-URI של קטגוריית ה-GCS:

      gs://passive-dns-logs/passive-dns/
      
      • מחליפים את passive-dns-logs בשם של קטגוריית GCS.
      • מחליפים את passive-dns בנתיב הקידומת שהגדרתם.
    • אפשרות מחיקת המקור: בוחרים את אפשרות המחיקה המועדפת:

      • Never: אף פעם לא למחוק קבצים אחרי העברות (מומלץ לבדיקה).
      • מחיקת קבצים שהועברו: מחיקת קבצים אחרי שהם הועברו בהצלחה.
      • מחיקת קבצים שהועברו וספריות ריקות: מחיקת קבצים וספריות ריקות אחרי שההעברה מסתיימת.

    • גיל הקובץ המקסימלי: כולל קבצים ששונו במספר הימים האחרונים (ברירת המחדל היא 180 ימים).

    • מרחב השמות של הנכס: מרחב השמות של הנכס.

    • תוויות הטמעה: התווית שתתווסף לאירועים מהפיד הזה.

  9. לוחצים על הבא.

  10. בודקים את הגדרות הפיד החדש במסך סיום ולוחצים על שליחה.

טבלת מיפוי UDM

שדה ביומן מיפוי UDM Logic (פונקציה לוגית)
שם המארח intermediary.hostname הערך הועתק ישירות
timestamp_s metadata.event_timestamp מנותח כחותמת זמן של UNIX
metadata.event_type צריך להגדיר את הערך "NETWORK_DNS"
network.application_protocol מגדירים את האפשרות "DNS"
תשובה network.dns.answers.data הערך מהתשובה אחרי הסרת הנקודה בסוף
ttl network.dns.answers.ttl ההמרה למספר שלם
מחלקה network.dns.questions.class ממופה לערך מספרי (1 ל-IN, ‏ 3 ל-CH, ‏ 4 ל-HS)
שאילתה network.dns.questions.name ערך מהשאילתה אחרי הסרת הנקודה בסוף
סוג network.dns.questions.type ממופה מסוג (באותיות רישיות) לערך מספרי באמצעות מיפוי מסוג DNS
לקוח principal.ip הערך הועתק ישירות
שרת target.ip הערך הועתק ישירות
metadata.product_name הגדרה ל-"DNS פסיבי"

הבעיה עדיין לא נפתרה? קבלת תשובות מחברי הקהילה וממומחי Google SecOps.