Snipe-IT 로그 수집

다음에서 지원:

이 문서에서는 Google Cloud Storage를 사용하여 Snipe-IT 로그를 Google Security Operations에 수집하는 방법을 설명합니다. Snipe-IT는 하드웨어, 소프트웨어 라이선스, 액세서리, 소모품, 기타 IT 자산을 수명 주기 전반에 걸쳐 추적하는 오픈소스 IT 자산 관리 시스템입니다.

시작하기 전에

다음 기본 요건이 충족되었는지 확인합니다.

  • Google SecOps 인스턴스
  • Cloud Storage API가 사용 설정된 GCP 프로젝트
  • GCS 버킷을 만들고 관리할 수 있는 권한
  • GCS 버킷의 IAM 정책을 관리할 수 있는 권한
  • Cloud Run 함수, Pub/Sub 주제, Cloud Scheduler 작업을 만들 수 있는 권한
  • Snipe-IT 테넌트에 대한 액세스 권한

Snipe-IT 기본 요건 (API 토큰 및 기본 URL) 수집

  1. Snipe-IT에 로그인합니다.
  2. 사용자 메뉴 (오른쪽 상단 아바타)를 열고 API 키 관리를 클릭합니다.
  3. Create New Token(새 토큰 만들기)을 클릭합니다.
    • 이름/라벨: 설명이 포함된 라벨 (예: Google SecOps export)을 입력합니다.
  4. 생성을 클릭합니다.
  5. API 토큰을 복사합니다 (한 번만 표시됨). 안전하게 보관하세요.
  6. API 기준 URL을 확인합니다(일반적으로 https://<your-domain>/api/v1).
    • 예: https://snipeit.example.com/api/v1

Google Cloud Storage 버킷 만들기

  1. Google Cloud 콘솔로 이동합니다.
  2. 프로젝트를 선택하거나 새 프로젝트를 만듭니다.
  3. 탐색 메뉴에서 Cloud Storage> 버킷으로 이동합니다.
  4. 버킷 만들기를 클릭합니다.

  5. 다음 구성 세부정보를 제공합니다.

    설정 값
    버킷 이름 지정 전역적으로 고유한 이름 (예: snipe-it-logs)을 입력합니다.
    위치 유형 필요에 따라 선택 (리전, 이중 리전, 멀티 리전)
    위치 위치를 선택합니다 (예: us-central1).
    스토리지 클래스 Standard (자주 액세스하는 로그에 권장)
    액세스 제어 균일 (권장)
    보호 조치 선택사항: 객체 버전 관리 또는 보관 정책 사용 설정

  6. 만들기를 클릭합니다.

Cloud Run 함수의 서비스 계정 만들기

Cloud Run 함수에는 GCS 버킷에 쓸 수 있는 권한이 있는 서비스 계정이 필요합니다.

서비스 계정 만들기

  1. GCP 콘솔에서 IAM 및 관리자 > 서비스 계정으로 이동합니다.
  2. 서비스 계정 만들기를 클릭합니다.
  3. 다음 구성 세부정보를 제공합니다.
    • 서비스 계정 이름: snipeit-assets-to-gcs-sa을 입력합니다.
    • 서비스 계정 설명: Service account for Cloud Run function to collect Snipe-IT logs을 입력합니다.
  4. 만들고 계속하기를 클릭합니다.
  5. 이 서비스 계정에 프로젝트에 대한 액세스 권한 부여 섹션에서 다음 단계를 따르세요.
    1. 역할 선택을 클릭합니다.
    2. 스토리지 객체 관리자를 검색하여 선택합니다.
    3. + 다른 역할 추가를 클릭합니다.
    4. Cloud Run 호출자를 검색하여 선택합니다.
    5. + 다른 역할 추가를 클릭합니다.
    6. Cloud Functions 호출자를 검색하여 선택합니다.
  6. 계속을 클릭합니다.
  7. 완료를 클릭합니다.

이러한 역할은 다음 작업에 필요합니다.

  • 스토리지 객체 관리자: GCS 버킷에 로그를 쓰고 상태 파일을 관리합니다.
  • Cloud Run 호출자: Pub/Sub가 함수를 호출하도록 허용
  • Cloud Functions 호출자: 함수 호출 허용

GCS 버킷에 대한 IAM 권한 부여

GCS 버킷에 대한 쓰기 권한을 서비스 계정에 부여합니다.

  1. Cloud Storage> 버킷으로 이동합니다.
  2. 버킷 이름을 클릭합니다.
  3. 권한 탭으로 이동합니다.
  4. 액세스 권한 부여를 클릭합니다.
  5. 다음 구성 세부정보를 제공합니다.
    • 주 구성원 추가: 서비스 계정 이메일 (예: snipeit-assets-to-gcs-sa@PROJECT_ID.iam.gserviceaccount.com)을 입력합니다.
    • 역할 할당: 스토리지 객체 관리자를 선택합니다.
  6. 저장을 클릭합니다.

Pub/Sub 주제 만들기

Cloud Scheduler가 게시하고 Cloud Run 함수가 구독할 Pub/Sub 주제를 만듭니다.

  1. GCP Console에서 Pub/Sub > 주제로 이동합니다.
  2. 주제 만들기를 클릭합니다.
  3. 다음 구성 세부정보를 제공합니다.
    • 주제 ID: snipeit-assets-trigger를 입력합니다.
    • 다른 설정은 기본값으로 둡니다.
  4. 만들기를 클릭합니다.

로그를 수집하는 Cloud Run 함수 만들기

Cloud Run 함수는 Cloud Scheduler의 Pub/Sub 메시지에 의해 트리거되어 Snipe-IT API에서 하드웨어 애셋을 가져오고 이를 GCS에 씁니다.

  1. GCP 콘솔에서 Cloud Run으로 이동합니다.
  2. 서비스 만들기를 클릭합니다.
  3. 함수를 선택합니다 (인라인 편집기를 사용하여 함수 만들기).

  4. 구성 섹션에서 다음 구성 세부정보를 입력합니다.

    설정 값
    서비스 이름 snipeit-assets-to-gcs
    리전 GCS 버킷과 일치하는 리전을 선택합니다 (예: us-central1).
    런타임 Python 3.12 이상 선택

  5. 트리거 (선택사항) 섹션에서 다음을 수행합니다.

    1. + 트리거 추가를 클릭합니다.
    2. Cloud Pub/Sub를 선택합니다.
    3. Cloud Pub/Sub 주제 선택에서 주제 (snipeit-assets-trigger)를 선택합니다.
    4. 저장을 클릭합니다.

  6. 인증 섹션에서 다음을 구성합니다.

    1. 인증 필요를 선택합니다.
    2. ID 및 액세스 관리 (IAM)를 확인합니다.

  7. 아래로 스크롤하고 컨테이너, 네트워킹, 보안을 펼칩니다.

  8. 보안 탭으로 이동합니다.

    • 서비스 계정: 서비스 계정 (snipeit-assets-to-gcs-sa)을 선택합니다.

  9. 컨테이너 탭으로 이동합니다.

    1. 변수 및 보안 비밀을 클릭합니다.
    2. 각 환경 변수에 대해 + 변수 추가를 클릭합니다.
    변수 이름 예시 값
    GCS_BUCKET snipe-it-logs
    GCS_PREFIX snipeit/assets
    SNIPE_BASE_URL https://snipeit.example.com/api/v1
    SNIPE_API_TOKEN your-api-token
    PAGE_SIZE 500
    MAX_PAGES 200

  10. 변수 및 보안 비밀 탭에서 요청까지 아래로 스크롤합니다.

    • 요청 제한 시간: 600초 (10분)를 입력합니다.

  11. 컨테이너의 설정 탭으로 이동합니다.

    • 리소스 섹션에서 다음을 수행합니다.
      • 메모리: 512MiB 이상을 선택합니다.
      • CPU: 1을 선택합니다.
    • 완료를 클릭합니다.

  12. 실행 환경으로 스크롤합니다.

    • 기본을 선택합니다 (권장).

  13. 버전 확장 섹션에서 다음을 수행합니다.

    • 최소 인스턴스 수: 0를 입력합니다.
    • 최대 인스턴스 수: 100을 입력합니다 (또는 예상 부하에 따라 조정).

  14. 만들기를 클릭합니다.

  15. 서비스가 생성될 때까지 기다립니다 (1~2분).

  16. 서비스가 생성되면 인라인 코드 편집기가 자동으로 열립니다.

함수 코드 추가

  1. 함수 진입점에 main을 입력합니다.

  2. 인라인 코드 편집기에서 다음 두 파일을 만듭니다.

    • 첫 번째 파일: main.py:

          import functions_framework
    from google.cloud import storage
    import json
    import os
    import urllib3
    from datetime import datetime, timezone
    import urllib.parse

    # Initialize HTTP client
    http = urllib3.PoolManager()

    # Initialize Storage client
    storage_client = storage.Client()

    @functions_framework.cloud_event
    def main(cloud_event):
        """
        Cloud Run function triggered by Pub/Sub to fetch hardware assets from Snipe-IT API and write to GCS.

        Args:
            cloud_event: CloudEvent object containing Pub/Sub message
        """

        # Get environment variables
        bucket_name = os.environ.get('GCS_BUCKET')
        prefix = os.environ.get('GCS_PREFIX', 'snipeit/assets')
        base_url = os.environ.get('SNIPE_BASE_URL', '').rstrip('/')
        token = os.environ.get('SNIPE_API_TOKEN')
        page_size = int(os.environ.get('PAGE_SIZE', '500'))
        max_pages = int(os.environ.get('MAX_PAGES', '200'))

        if not all([bucket_name, base_url, token]):
            print('Error: Missing required environment variables')
            return

        try:
            # Get GCS bucket
            bucket = storage_client.bucket(bucket_name)

            # Fetch and write pages
            ts = datetime.now(timezone.utc)
            offset = 0
            page = 0
            total = 0

            headers = {
                'Authorization': f'Bearer {token}',
                'Accept': 'application/json',
                'Content-Type': 'application/json'
            }

            while page < max_pages:
                # Fetch page from Snipe-IT API
                params = {
                    'limit': page_size,
                    'offset': offset,
                    'sort': 'id',
                    'order': 'asc'
                }
                qs = urllib.parse.urlencode(params)
                url = f"{base_url}/hardware?{qs}"

                print(f'Fetching page {page} from {url}')

                response = http.request('GET', url, headers=headers, timeout=60.0)

                if response.status != 200:
                    print(f'Error: API returned status {response.status}')
                    break

                data = json.loads(response.data.decode('utf-8'))

                # Get rows from response (Snipe-IT uses 'rows' field)
                rows = data.get('rows', [])
                total_available = data.get('total', 0)

                # Write page to GCS
                blob_name = f"{prefix}/{ts.strftime('%Y/%m/%d')}/snipeit-hardware-{page:05d}.json"
                blob = bucket.blob(blob_name)
                body = json.dumps(data, separators=(',', ':')).encode('utf-8')
                blob.upload_from_string(body, content_type='application/json')

                print(f'Wrote page {page} with {len(rows)} rows to {blob_name}')

                total += len(rows)

                # Check if we've reached the end
                # Snipe-IT returns empty rows array when no more data
                if len(rows) == 0:
                    print(f'No more results (empty rows array)')
                    break

                # Also check if we've fetched all available records
                if offset + len(rows) >= total_available:
                    print(f'Reached end of data (offset {offset + len(rows)} >= total {total_available})')
                    break

                page += 1
                offset += page_size

            print(f'Successfully processed {page + 1} pages with {total} total objects')

        except Exception as e:
            print(f'Error processing logs: {str(e)}')
            raise
    ```

    • 두 번째 파일: requirements.txt:

      functions-framework==3.*
google-cloud-storage==2.*
urllib3>=2.0.0

  3. 배포를 클릭하여 함수를 저장하고 배포합니다.

  4. 배포가 완료될 때까지 기다립니다 (2~3분).

Cloud Scheduler 작업 만들기

Cloud Scheduler는 일정 간격으로 Pub/Sub 주제에 메시지를 게시하여 Cloud Run 함수를 트리거합니다.

  1. GCP Console에서 Cloud Scheduler로 이동합니다.
  2. 작업 만들기를 클릭합니다.

  3. 다음 구성 세부정보를 제공합니다.

    설정 값
    이름 snipeit-assets-to-gcs-hourly
    리전 Cloud Run 함수와 동일한 리전 선택
    주파수 0 * * * * (매시간 정각)
    시간대 시간대 선택 (UTC 권장)
    타겟 유형 Pub/Sub
    주제 주제 선택 (snipeit-assets-trigger)
    메일 본문 {} (빈 JSON 객체)

  4. 만들기를 클릭합니다.

일정 빈도 옵션

  • 로그 볼륨 및 지연 시간 요구사항에 따라 빈도를 선택합니다.

    빈도 크론 표현식 사용 사례
    5분마다 */5 * * * * 대용량, 저지연
    15분마다 */15 * * * * 검색량 보통
    1시간마다 0 * * * * 표준 (권장)
    6시간마다 0 */6 * * * 양이 적은 일괄 처리
    매일 0 0 * * * 이전 데이터 수집

스케줄러 작업 테스트

  1. Cloud Scheduler 콘솔에서 작업을 찾습니다.
  2. 강제 실행을 클릭하여 수동으로 트리거합니다.
  3. 몇 초간 기다린 후 Cloud Run > 서비스 > snipeit-assets-to-gcs > 로그로 이동합니다.
  4. 함수가 성공적으로 실행되었는지 확인합니다.
  5. GCS 버킷을 확인하여 로그가 작성되었는지 확인합니다.

Google SecOps 서비스 계정 가져오기

Google SecOps는 고유한 서비스 계정을 사용하여 GCS 버킷에서 데이터를 읽습니다. 이 서비스 계정에 버킷 액세스 권한을 부여해야 합니다.

서비스 계정 이메일 가져오기

  1. SIEM 설정> 피드로 이동합니다.
  2. 새 피드 추가를 클릭합니다.
  3. 단일 피드 구성을 클릭합니다.
  4. 피드 이름 필드에 피드 이름을 입력합니다(예: Snipe-IT logs).
  5. 소스 유형으로 Google Cloud Storage V2를 선택합니다.
  6. 로그 유형으로 Snipe-IT를 선택합니다.

  7. 서비스 계정 가져오기를 클릭합니다. 고유한 서비스 계정 이메일이 표시됩니다. 예를 들면 다음과 같습니다.

    chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com

  8. 다음 단계에서 사용할 수 있도록 이 이메일 주소를 복사합니다.

Google SecOps 서비스 계정에 IAM 권한 부여

Google SecOps 서비스 계정에는 GCS 버킷에 대한 스토리지 객체 뷰어 역할이 필요합니다.

  1. Cloud Storage> 버킷으로 이동합니다.
  2. 버킷 이름을 클릭합니다.
  3. 권한 탭으로 이동합니다.
  4. 액세스 권한 부여를 클릭합니다.
  5. 다음 구성 세부정보를 제공합니다.
    • 주 구성원 추가: Google SecOps 서비스 계정 이메일을 붙여넣습니다.
    • 역할 할당: 스토리지 객체 뷰어를 선택합니다.

  6. 저장을 클릭합니다.

Snipe-IT 로그를 수집하도록 Google SecOps에서 피드 구성

  1. SIEM 설정> 피드로 이동합니다.
  2. 새 피드 추가를 클릭합니다.
  3. 단일 피드 구성을 클릭합니다.
  4. 피드 이름 필드에 피드 이름을 입력합니다(예: Snipe-IT logs).
  5. 소스 유형으로 Google Cloud Storage V2를 선택합니다.
  6. 로그 유형으로 Snipe-IT를 선택합니다.
  7. 다음을 클릭합니다.

  8. 다음 입력 매개변수의 값을 지정합니다.

    • 스토리지 버킷 URL: 다음 접두사 경로를 사용하여 GCS 버킷 URI를 입력합니다.

      gs://snipe-it-logs/snipeit/assets/

      • 다음과 같이 바꿉니다.

        • snipe-it-logs: GCS 버킷 이름입니다.
        • snipeit/assets: 로그가 저장되는 접두사/폴더 경로입니다.

    • 소스 삭제 옵션: 환경설정에 따라 삭제 옵션을 선택합니다.

      • 삭제 안함: 전송 후 파일을 삭제하지 않습니다 (테스트에 권장).
      • 전송된 파일 삭제: 전송이 완료되면 파일을 삭제합니다.

      • 전송된 파일 및 빈 디렉터리 삭제: 전송이 완료되면 파일과 빈 디렉터리를 삭제합니다.

    • 최대 파일 기간: 지난 일수 동안 수정된 파일을 포함합니다. 기본값은 180일입니다.

    • 애셋 네임스페이스: 애셋 네임스페이스입니다.

    • 수집 라벨: 이 피드의 이벤트에 적용할 라벨입니다.

  9. 다음을 클릭합니다.

  10. 확정 화면에서 새 피드 구성을 검토한 다음 제출을 클릭합니다.

UDM 매핑 테이블

로그 필드 UDM 매핑 논리
created_at.datetime entity.asset.attribute.creation_time UNIX_MS로 파싱됨
age entity.asset.attribute.labels.value 직접 매핑됨
alt_barcode entity.asset.attribute.labels.value 직접 매핑됨
asset_eol_date entity.asset.attribute.labels.value 직접 매핑됨
asset_tag entity.asset.attribute.labels.value 직접 매핑됨
asset_type_value entity.asset.attribute.labels.value 직접 매핑됨
assets_classification_value entity.asset.attribute.labels.value 직접 매핑됨
category.id entity.asset.attribute.labels.value 직접 매핑됨
custom_fields.RAM.value entity.asset.attribute.labels.value 직접 매핑됨
custom_fields.SSD.value entity.asset.attribute.labels.value 직접 매핑됨
last_update_time.formatted entity.asset.attribute.labels.value 직접 매핑됨
manufacturer.id entity.asset.attribute.labels.value 직접 매핑됨
model_id entity.asset.attribute.labels.value 직접 매핑됨
model_number entity.asset.attribute.labels.value 직접 매핑됨
updated_at.datetime entity.asset.attribute.last_update_time UNIX_MS로 파싱됨
category.name entity.asset.category 직접 매핑됨
custom_fields.Processor.value entity.asset.hardware.cpu_model 직접 매핑됨
manufacturer.name entity.asset.hardware.manufacturer 직접 매핑됨
model.name entity.asset.hardware.model 직접 매핑됨
serial entity.asset.hardware.serial_number 직접 매핑됨
name entity.asset.hostname 직접 매핑됨
location.name entity.asset.location.name 직접 매핑됨
id entity.asset.product_object_id 직접 매핑됨
custom_fields.Owner.value entity.labels.value 직접 매핑됨
deleted_at entity.labels.value 직접 매핑됨
eol entity.labels.value 직접 매핑됨
expected_checkin entity.labels.value 직접 매핑됨
image entity.labels.value 직접 매핑됨
last_audit_date entity.labels.value 직접 매핑됨
next_audit_date.date entity.labels.value 직접 매핑됨
notes entity.labels.value 직접 매핑됨
order_number entity.labels.value 직접 매핑됨
purchase_cost entity.labels.value 직접 매핑됨
purchase_date.date entity.labels.value 직접 매핑됨
purchase_date.formatted entity.labels.value 직접 매핑됨
qr entity.labels.value 직접 매핑됨
requestable entity.labels.value 직접 매핑됨
requests_counter entity.labels.value 직접 매핑됨
rtd_location.id entity.labels.value 직접 매핑됨
status_label.id entity.labels.value 직접 매핑됨
status_label.status_meta entity.labels.value 직접 매핑됨
status_label.status_type entity.labels.value 직접 매핑됨
supplier.id entity.labels.value 직접 매핑됨
supplier.name entity.labels.value 직접 매핑됨
updated_at.formatted entity.labels.value 직접 매핑됨
warranty_expires.date entity.labels.value 직접 매핑됨
warranty_expires.formatted entity.labels.value 직접 매핑됨
warranty_months entity.labels.value 직접 매핑됨
assigned_to.username entity.user.attribute.labels.value 직접 매핑됨
available_actions.checkin entity.user.attribute.labels.value 직접 매핑됨
available_actions.checkout entity.user.attribute.labels.value 직접 매핑됨
available_actions.clone entity.user.attribute.labels.value 직접 매핑됨
available_actions.delete entity.user.attribute.labels.value 직접 매핑됨
available_actions.restore entity.user.attribute.labels.value 직접 매핑됨
available_actions.update entity.user.attribute.labels.value 직접 매핑됨
checkin_counter entity.user.attribute.labels.value 직접 매핑됨
checkout_counter entity.user.attribute.labels.value 직접 매핑됨
company.id entity.user.attribute.labels.value 직접 매핑됨
created_by.id entity.user.attribute.labels.value 직접 매핑됨
created_by.name entity.user.attribute.labels.value 직접 매핑됨
last_checkin.datetime entity.user.attribute.labels.value 직접 매핑됨
last_checkin.formatted entity.user.attribute.labels.value 직접 매핑됨
last_checkout.formatted entity.user.attribute.labels.value 직접 매핑됨
assigned_to.type entity.user.attribute.roles.name 직접 매핑됨
company.name entity.user.company_name 직접 매핑됨
assigned_to_email entity.user.email_addresses 병합됨
assigned_to.employee_number entity.user.employee_id 직접 매핑됨
assigned_to.first_name entity.user.first_name 직접 매핑됨
last_checkout.datetime entity.user.last_login_time UNIX_MS로 파싱됨
assigned_to.last_name entity.user.last_name 직접 매핑됨
assigned_to.name entity.user.user_display_name 직접 매핑됨
assigned_to.id entity.user.userid 직접 매핑됨
has_asset metadata.entity_type 매핑됨: true → ASSET
has_user metadata.entity_type 매핑됨: true → USER
has_asset metadata.product_name 매핑됨: true → CMDB
has_user metadata.product_name 매핑됨: true → CMDB
has_asset metadata.vendor_name 매핑됨: true → Snipe-IT
has_user metadata.vendor_name 매핑됨: true → Snipe-IT
해당 사항 없음 entity.asset.attribute.labels.key 상수: model_id
해당 사항 없음 entity.asset.platform_software.platform 상수: WINDOWS
해당 사항 없음 entity.labels.key 상수: purchase_date
해당 사항 없음 entity.user.attribute.labels.key 상수: checkout
해당 사항 없음 metadata.entity_type 상수: ASSET
해당 사항 없음 metadata.product_name 상수: CMDB
해당 사항 없음 metadata.vendor_name 상수: Snipe-IT

변경 로그

이 파서의 변경 로그 보기

도움이 더 필요하신가요? 커뮤니티 회원 및 Google SecOps 전문가에게 문의하여 답변을 받으세요.