Tenable CSPM のログを収集する
このドキュメントでは、Google Cloud Storage V2 を使用して Tenable CSPM ログを Google Security Operations に取り込む方法について説明します。
Tenable CSPM(クラウド セキュリティ ポスチャー管理)は、クラウド環境全体で構成ミス検出とコンプライアンス モニタリングを行うクラウド セキュリティ プラットフォームです。Cloud Run 関数は、スケジュールに従って Tenable CSPM API をポーリングし、検出結果を NDJSON 形式で GCS バケットに書き込みます。Google SecOps は、GCS V2 フィードを介して検出結果を取り込みます。
始める前に
次の前提条件を満たしていることを確認します。
- Google SecOps インスタンス
- Cloud Storage API が有効になっている GCP プロジェクト
- GCS バケットを作成および管理する権限
- GCS バケットの IAM ポリシーを管理する権限
- Cloud Run サービス、Pub/Sub トピック、Cloud Scheduler ジョブを作成する権限
- 管理者権限を持つ Tenable Cloud Security コンソールへの特権アクセス
Google Cloud Storage バケットを作成する
- Google Cloud コンソールに移動します。
- プロジェクトを選択するか、新しいプロジェクトを作成します。
- ナビゲーション メニューで、[Cloud Storage > バケット] に移動します。
- [バケットを作成] をクリックします。
次の構成情報を提供してください。
設定 値 バケットに名前を付ける グローバルに一意の名前( tenable-cspm-logsなど)を入力します。ロケーション タイプ ニーズに応じて選択します(リージョン、デュアルリージョン、マルチリージョン)。 ロケーション 場所を選択します(例: us-central1)。ストレージ クラス Standard(アクセス頻度の高いログにおすすめ) アクセス制御 均一(推奨) 保護ツール 省略可: オブジェクトのバージョニングまたは保持ポリシーを有効にする [作成] をクリックします。
Tenable CSPM API 認証情報を収集する
API キーを生成する
- 管理者として Tenable Cloud Security コンソールにログインします。
- [設定] > [API キー] に移動します。
- [生成] をクリックして、新しい API キーペアを作成します。
- 次の詳細をコピーして安全な場所に保存します。
- Access Key: 認証用の API アクセスキー。
- Secret Key: 認証用の API 秘密鍵。
権限を確認する
アカウントに必要な権限があることを確認するには:
- Tenable Cloud Security コンソールにログインします。
- [検出結果] または [コンプライアンス > レポート] に移動します。
- 検出結果のデータが表示される場合は、必要な権限が付与されています。
- このオプションが表示されない場合は、Tenable 管理者に連絡して管理者権限を付与してもらってください。
テスト API へのアクセス
統合に進む前に、認証情報をテストします。
# Replace with your actual credentials ACCESS_KEY="your-access-key" SECRET_KEY="your-secret-key" # Test API access curl -v -H "X-ApiKeys: accessKey=${ACCESS_KEY};secretKey=${SECRET_KEY}" \ "https://cloud.tenable.com/cspm/v1/findings?limit=1"
Cloud Run functions のサービス アカウントを作成する
Cloud Run functions には、GCS バケットへの書き込み権限があり、Pub/Sub によって呼び出されるサービス アカウントが必要です。
サービス アカウントの作成
- GCP コンソールで、[IAM と管理>サービス アカウント] に移動します。
- [サービス アカウントを作成] をクリックします。
- 次の構成情報を指定します。
- サービス アカウント名: 「
tenable-cspm-collector-sa」と入力します。 - サービス アカウントの説明: 「
Service account for Cloud Run function to collect Tenable CSPM logs」と入力します。
- サービス アカウント名: 「
- [作成して続行] をクリックします。
- [このサービス アカウントにプロジェクトへのアクセスを許可する] セクションで、次のロールを追加します。
- [ロールを選択] をクリックします。
- [ストレージ オブジェクト管理者] を検索して選択します。
- [+ 別のロールを追加] をクリックします。
- [Cloud Run 起動元] を検索して選択します。
- [+ 別のロールを追加] をクリックします。
- [Cloud Functions 起動元] を検索して選択します。
- [続行] をクリックします。
- [完了] をクリックします。
これらのロールは、次の操作に必要です。
- Storage オブジェクト管理者: ログを GCS バケットに書き込み、状態ファイルを管理する
- Cloud Run 起動元: Pub/Sub が関数を呼び出すことを許可します。
- Cloud Functions 起動元: 関数の呼び出しを許可する
GCS バケットに対する IAM 権限を付与する
GCS バケットに対する書き込み権限をサービス アカウントに付与します。
- [Cloud Storage] > [バケット] に移動します。
- バケット名(
tenable-cspm-logsなど)をクリックします。 - [権限] タブに移動します。
- [アクセス権を付与] をクリックします。
- 次の構成情報を指定します。
- プリンシパルを追加: サービス アカウントのメールアドレス(例:
tenable-cspm-collector-sa@your-project.iam.gserviceaccount.com)を入力します。 - ロールを割り当てる: [ストレージ オブジェクト管理者] を選択します。
- プリンシパルを追加: サービス アカウントのメールアドレス(例:
- [保存] をクリックします。
Pub/Sub トピックの作成
Cloud Scheduler がパブリッシュし、Cloud Run 関数がサブスクライブする Pub/Sub トピックを作成します。
- GCP Console で、[Pub/Sub> トピック] に移動します。
- [トピックを作成] をクリックします。
- 次の構成情報を指定します。
- トピック ID: 「
tenable-cspm-trigger」と入力します。 - その他の設定はデフォルトのままにします。
- トピック ID: 「
- [作成] をクリックします。
ログを収集する Cloud Run 関数を作成する
Cloud Run 関数は、Cloud Scheduler からの Pub/Sub メッセージによってトリガーされ、Tenable CSPM API から検出結果を取得して GCS に書き込みます。
- GCP Console で、[Cloud Run] に移動します。
- [サービスを作成] をクリックします。
- [関数] を選択します(インライン エディタを使用して関数を作成します)。
[構成] セクションで、次の構成の詳細を指定します。
設定 値 サービス名 tenable-cspm-collectorリージョン GCS バケットと一致するリージョンを選択します(例: us-central1)。ランタイム [Python 3.12] 以降を選択します。 [トリガー(省略可)] セクションで、次の操作を行います。
- [+ トリガーを追加] をクリックします。
- [Cloud Pub/Sub] を選択します。
- [Cloud Pub/Sub トピックを選択してください] で、トピック
tenable-cspm-triggerを選択します。 - [保存] をクリックします。
[認証] セクションで、次の操作を行います。
- [認証が必要] を選択します。
- Identity and Access Management(IAM)を確認します。
下にスクロールして、[コンテナ、ネットワーキング、セキュリティ] を開きます。
[セキュリティ] タブに移動します。
- サービス アカウント: サービス アカウント
tenable-cspm-collector-saを選択します。
- サービス アカウント: サービス アカウント
[コンテナ] タブに移動します。
- [変数とシークレット] をクリックします。
- 環境変数ごとに [+ 変数を追加] をクリックします。
変数名 値の例 説明 GCS_BUCKETtenable-cspm-logsGCS バケット名 GCS_PREFIXtenable-cspmログファイルの接頭辞 STATE_KEYtenable-cspm/state.json状態ファイルのパス TENABLE_ACCESS_KEYyour-access-keyTenable API アクセスキー TENABLE_SECRET_KEYyour-secret-keyTenable API 秘密鍵 MAX_RECORDS10000実行あたりの最大レコード数 PAGE_SIZE10001 ページあたりのレコード数 LOOKBACK_HOURS24初期ルックバック期間 [変数とシークレット] タブで [リクエスト] まで下にスクロールします。
- リクエストのタイムアウト:
600秒(10 分)を入力します。
- リクエストのタイムアウト:
[コンテナ] の [設定] タブに移動します。
- [リソース] セクションで次の操作を行います。
- メモリ: 512 MiB 以上を選択します。
- CPU: [1] を選択します。
- [完了] をクリックします。
- [リソース] セクションで次の操作を行います。
[実行環境] まで下にスクロールします。
- [デフォルト](推奨)を選択します。
[リビジョン スケーリング] セクションで、次の操作を行います。
- [インスタンスの最小数] に「
0」と入力します。 - インスタンスの最大数:
100と入力します(または、想定される負荷に基づいて調整します)。
- [インスタンスの最小数] に「
[作成] をクリックします。
サービスが作成されるまで待ちます(1 ~ 2 分)。
サービスを作成すると、インライン コードエディタが自動的に開きます。
関数コードを追加する
- [関数のエントリ ポイント] に「main」と入力します。
インライン コードエディタで、次の 2 つのファイルを作成します。
- 最初のファイル main.py:
import functions_framework from google.cloud import storage import json import os import urllib3 from datetime import datetime, timezone, timedelta import time # Initialize HTTP client with timeouts http = urllib3.PoolManager( timeout=urllib3.Timeout(connect=5.0, read=30.0), retries=False, ) # Initialize Storage client storage_client = storage.Client() # Environment variables GCS_BUCKET = os.environ.get('GCS_BUCKET') GCS_PREFIX = os.environ.get('GCS_PREFIX', 'tenable-cspm') STATE_KEY = os.environ.get('STATE_KEY', 'tenable-cspm/state.json') ACCESS_KEY = os.environ.get('TENABLE_ACCESS_KEY') SECRET_KEY = os.environ.get('TENABLE_SECRET_KEY') MAX_RECORDS = int(os.environ.get('MAX_RECORDS', '10000')) PAGE_SIZE = int(os.environ.get('PAGE_SIZE', '1000')) LOOKBACK_HOURS = int(os.environ.get('LOOKBACK_HOURS', '24')) API_BASE = 'https://cloud.tenable.com' def parse_datetime(value: str) -> datetime: """Parse ISO datetime string to datetime object.""" if value.endswith("Z"): value = value[:-1] + "+00:00" return datetime.fromisoformat(value) @functions_framework.cloud_event def main(cloud_event): """ Cloud Run function triggered by Pub/Sub to fetch Tenable CSPM findings and write to GCS. Args: cloud_event: CloudEvent object containing Pub/Sub message """ if not all([GCS_BUCKET, ACCESS_KEY, SECRET_KEY]): print('Error: Missing required environment variables') return try: bucket = storage_client.bucket(GCS_BUCKET) # Load state state = load_state(bucket, STATE_KEY) # Determine time window now = datetime.now(timezone.utc) last_time = None if isinstance(state, dict) and state.get("last_event_time"): try: last_time = parse_datetime(state["last_event_time"]) last_time = last_time - timedelta(minutes=2) except Exception as e: print(f"Warning: Could not parse last_event_time: {e}") if last_time is None: last_time = now - timedelta(hours=LOOKBACK_HOURS) print(f"Fetching findings from {last_time.isoformat()} to {now.isoformat()}") # Fetch findings records, newest_event_time = fetch_findings( start_time=last_time, end_time=now, page_size=PAGE_SIZE, max_records=MAX_RECORDS, ) if not records: print("No new findings found.") save_state(bucket, STATE_KEY, now.isoformat()) return # Write to GCS as NDJSON timestamp = now.strftime('%Y%m%d_%H%M%S') object_key = f"{GCS_PREFIX}/findings_{timestamp}.ndjson" blob = bucket.blob(object_key) ndjson = '\n'.join([json.dumps(record, ensure_ascii=False) for record in records]) + '\n' blob.upload_from_string(ndjson, content_type='application/x-ndjson') print(f"Wrote {len(records)} records to gs://{GCS_BUCKET}/{object_key}") # Update state with newest event time if newest_event_time: save_state(bucket, STATE_KEY, newest_event_time) else: save_state(bucket, STATE_KEY, now.isoformat()) print(f"Successfully processed {len(records)} records") except Exception as e: print(f'Error processing findings: {str(e)}') raise def load_state(bucket, key): """Load state from GCS.""" try: blob = bucket.blob(key) if blob.exists(): state_data = blob.download_as_text() return json.loads(state_data) except Exception as e: print(f"Warning: Could not load state: {e}") return {} def save_state(bucket, key, last_event_time_iso: str): """Save the last event timestamp to GCS state file.""" try: state = {'last_event_time': last_event_time_iso} blob = bucket.blob(key) blob.upload_from_string( json.dumps(state, indent=2), content_type='application/json' ) print(f"Saved state: last_event_time={last_event_time_iso}") except Exception as e: print(f"Warning: Could not save state: {e}") def fetch_findings(start_time: datetime, end_time: datetime, page_size: int, max_records: int): """ Fetch findings from Tenable CSPM API with pagination and rate limiting. Args: start_time: Start time for findings query end_time: End time for findings query page_size: Number of records per page max_records: Maximum total records to fetch Returns: Tuple of (records list, newest_event_time ISO string) """ endpoint = f"{API_BASE}/cspm/v1/findings" headers = { 'X-ApiKeys': f'accessKey={ACCESS_KEY};secretKey={SECRET_KEY}', 'Accept': 'application/json', 'User-Agent': 'GoogleSecOps-TenableCSPMCollector/1.0' } records = [] newest_time = None page_num = 0 backoff = 1.0 offset = 0 while True: page_num += 1 if len(records) >= max_records: print(f"Reached max_records limit ({max_records})") break current_limit = min(page_size, max_records - len(records)) url = f"{endpoint}?limit={current_limit}&offset={offset}" try: response = http.request('GET', url, headers=headers) # Handle rate limiting with exponential backoff if response.status == 429: retry_after = int(response.headers.get('Retry-After', str(int(backoff)))) print(f"Rate limited (429). Retrying after {retry_after}s...") time.sleep(retry_after) backoff = min(backoff * 2, 30.0) continue backoff = 1.0 if response.status != 200: print(f"HTTP Error: {response.status}") response_text = response.data.decode('utf-8') print(f"Response body: {response_text}") return [], None data = json.loads(response.data.decode('utf-8')) page_results = data if isinstance(data, list) else data.get('findings', data.get('data', [])) if not page_results: print(f"No more results (empty page)") break # Filter by time window filtered = [] for finding in page_results: status_time = finding.get('statusUpdateTime') or finding.get('createdAt') or finding.get('updatedAt') if status_time: try: finding_dt = parse_datetime(status_time) if finding_dt >= start_time and finding_dt <= end_time: filtered.append(finding) except Exception: filtered.append(finding) else: filtered.append(finding) print(f"Page {page_num}: Retrieved {len(page_results)} findings, {len(filtered)} in time window") records.extend(filtered) # Track newest event time for finding in filtered: try: event_time = finding.get('statusUpdateTime') or finding.get('createdAt') or finding.get('updatedAt') if event_time: if newest_time is None or parse_datetime(event_time) > parse_datetime(newest_time): newest_time = event_time except Exception as e: print(f"Warning: Could not parse event time: {e}") # Check for more results if len(page_results) < page_size: print(f"Reached last page (size={len(page_results)} < limit={page_size})") break offset += len(page_results) except Exception as e: print(f"Error fetching findings: {e}") return [], None print(f"Retrieved {len(records)} total findings from {page_num} pages") return records, newest_time- 2 つ目のファイル: requirements.txt:
functions-framework==3.* google-cloud-storage==2.* urllib3>=2.0.0[デプロイ] をクリックして、関数を保存してデプロイします。
デプロイが完了するまで待ちます(2 ~ 3 分)。
Cloud Scheduler ジョブの作成
Cloud Scheduler は、定期的に Pub/Sub トピックにメッセージをパブリッシュし、Cloud Run functions の関数をトリガーします。
- GCP Console で、[Cloud Scheduler] に移動します。
- [ジョブを作成] をクリックします。
次の構成情報を提供してください。
設定 値 名前 tenable-cspm-collector-hourlyリージョン Cloud Run functions と同じリージョンを選択する 周波数 0 * * * *(1 時間ごと、毎正時)タイムゾーン タイムゾーンを選択(UTC を推奨) ターゲット タイプ Pub/Sub トピック トピック「 tenable-cspm-trigger」を選択しますメッセージ本文 {}(空の JSON オブジェクト)[作成] をクリックします。
スケジュールの頻度オプション
ログの量とレイテンシの要件に基づいて頻度を選択します。
| 頻度 | CRON 式 | ユースケース |
|---|---|---|
| 5 分おき | */5 * * * * |
大容量、低レイテンシ |
| 15 分ごと | */15 * * * * |
検索量が普通 |
| 1 時間ごと | 0 * * * * |
標準(推奨) |
| 6 時間ごと | 0 */6 * * * |
少量、バッチ処理 |
| 毎日 | 0 0 * * * |
過去のデータの収集 |
統合をテストする
- Cloud Scheduler コンソールで、ジョブ(
tenable-cspm-collector-hourly)を見つけます。 - [強制実行] をクリックして、手動でトリガーします。
- 数秒待ってから、[Cloud Run> サービス> tenable-cspm-collector > ログ] に移動します。
関数が正常に実行されたことを確認します。以下のものを探します。
Fetching findings from YYYY-MM-DDTHH:MM:SS+00:00 to YYYY-MM-DDTHH:MM:SS+00:00 Page 1: Retrieved X findings, Y in time window Wrote X records to gs://tenable-cspm-logs/tenable-cspm/findings_YYYYMMDD_HHMMSS.ndjson Successfully processed X recordsGCS バケット(
tenable-cspm-logs)をチェックして、検出結果が書き込まれたことを確認します。
ログにエラーが表示された場合:
- HTTP 401: 環境変数の API キーを確認する
- HTTP 403: Tenable Cloud Security コンソールでアカウントに管理者権限があることを確認する
- HTTP 429: レート制限 - 関数はバックオフで自動的に再試行されます
- 環境変数が不足している: 必要な変数がすべて設定されていることを確認します。
Tenable CSPM のログを取り込むように Google SecOps でフィードを構成する
- [SIEM 設定] > [フィード] に移動します。
- [Add New Feed] をクリックします。
- [単一フィードを設定] をクリックします。
- [フィード名] フィールドに、フィードの名前を入力します(例:
Tenable CSPM Logs)。 - [ソースタイプ] として [Google Cloud Storage V2] を選択します。
- [ログタイプ] として [Tenable CSPM] を選択します。
[サービス アカウントを取得する] をクリックします。一意のサービス アカウントのメールアドレスが表示されます(例:)。
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comこのメールアドレスをコピーします。次のステップでこれを使用します。
[次へ] をクリックします。
次の入力パラメータの値を指定します。
ストレージ バケットの URL: 接頭辞パスを含む GCS バケット URI を入力します。
gs://tenable-cspm-logs/tenable-cspm/- 次のように置き換えます。
tenable-cspm-logs: GCS バケット名。tenable-cspm/: ログが保存される接頭辞/フォルダパス。
- 次のように置き換えます。
Source deletion option: 必要に応じて削除オプションを選択します。
- なし: 転送後にファイルを削除しません(テストにおすすめ)。
- 転送されたファイルを削除する: 転送が完了した後にファイルを削除します。
転送されたファイルと空のディレクトリを削除する: 転送が完了した後にファイルと空のディレクトリを削除します。
ファイルの最大経過日数: 過去の日数以内に変更されたファイルを含めます(デフォルトは 180 日)。
アセットの名前空間: アセットの名前空間。
Ingestion labels: このフィードのイベントに適用されるラベル。
[次へ] をクリックします。
[Finalize] 画面で新しいフィードの設定を確認し、[送信] をクリックします。
Google SecOps サービス アカウントに IAM 権限を付与する
Google SecOps サービス アカウントには、GCS バケットに対する Storage オブジェクト閲覧者のロールが必要です。
- [Cloud Storage] > [バケット] に移動します。
- バケット名(
tenable-cspm-logs)をクリックします。 - [権限] タブに移動します。
- [アクセス権を付与] をクリックします。
- 次の構成情報を指定します。
- プリンシパルを追加: Google SecOps サービス アカウントのメールアドレスを貼り付けます。
- ロールを割り当てる: [Storage オブジェクト閲覧者] を選択します。
[保存] をクリックします。
UDM マッピング テーブル
| ログフィールド | UDM マッピング | ロジック |
|---|---|---|
| statusUpdateTime、starred、remediation.console.steps、compliances、labels、serviceNowIncidentUrls、ticketLinks、findingType、identityProviderAccount、status、subStatus、title、type、sentBy | additional.fields | statusUpdateTime、starred、remediation.console.steps、compliances 配列の各項目、labels 配列の各項目、serviceNowIncidentUrls 配列の各項目、ticketLinks 配列の各項目、findingType、identityProviderAccount、status、subStatus、title、type、principal_user が空でない場合は sentBy の Key-Value ラベルと統合されます。 |
| 説明 | metadata.description | 値を直接コピーする |
| has_user、has_target_resource | metadata.event_type | has_user と has_target_resource が true の場合は「USER_RESOURCE_ACCESS」、それ以外の場合は「GENERIC_EVENT」に設定 |
| id | metadata.product_log_id | 値を直接コピーする |
| metadata.product_name | 「Tenable CSPM」に設定 | |
| metadata.vendor_name | 「Tenable CSPM」に設定 | |
| リンク | network.http.referral_url | 値を直接コピーする |
| ソース | principal.resource.attribute.labels | ソースの Key-Value ラベルと統合 |
| resourceOwnerPrincipals.0.principal.mail | principal.user.email_addresses | 値を直接コピーする |
| description、sentBy | principal.user.userid | 空でない場合は grok を使用して説明から抽出された principal_user の値、空の場合は sentBy |
| category | security_result.category_details | 値を直接コピーする |
| policyName | security_result.rule_name | 値を直接コピーする |
| 重要度 | security_result.severity | 重大度が「Low」の場合は LOW、「Medium」の場合は MEDIUM、「High」の場合は HIGH、「Critical」の場合は CRITICAL に設定します。 |
| cloudProvider | target.cloud.environment | cloudProvider == 「Azure」の場合は MICROSOFT_AZURE、cloudProvider == 「AWS」の場合は AMAZON_WEB_SERVICES に設定します。 |
| accountName、accountPath、resourceEnvironment、resourceOwner、resources | target.resource.attribute.labels | accountName、accountPath、resourceEnvironment 配列の各項目、resourceOwner 配列の各項目、resources 配列の各項目の Key-Value ラベルと統合されます |
| accountId | target.resource.id | 値を直接コピーする |
変更ログ
さらにサポートが必要な場合 コミュニティ メンバーや Google SecOps のプロフェッショナルから回答を得ることができます。