Apache ログを収集する

パーサーのバージョン: 20.0

以下でサポートされています。

このドキュメントでは、Bindplane エージェントを使用して Apache ログを Google Security Operations に取り込む方法について説明します。

Apache HTTP Server は、HTTP リクエストを処理し、アクセスログとエラーログを生成するオープンソースのウェブサーバーです。パーサーは、標準の結合/共通ログ形式と JSON 形式のログの両方を処理し、HTTP リクエストの詳細、レスポンス コード、クライアント情報を抽出します。

始める前に

次の前提条件を満たしていることを確認してください。

  • Google SecOps インスタンス
  • Windows Server 2016 以降、または systemd を使用する Linux ホスト
  • Bindplane エージェントと Apache サーバー間のネットワーク接続
  • プロキシの背後で実行している場合は、Bindplane エージェントの要件に従ってファイアウォール ポートが開いていることを確認します。
  • Apache サーバーへの特権アクセス(root または sudo)

Bindplane エージェントの Google SecOps 認証情報を取得する

Bindplane エージェントを Google SecOps に対して認証するには、次のいずれかの方法を選択します。

  • 新しいデプロイ: Chronicle API(オプション 1)を使用します。
  • 以前のデプロイ: 2027 年 7 月 20 日に Ingestion API が廃止されるまで、取り込み認証ファイル(オプション 2)を引き続き使用します。
  1. Google Cloud コンソールにログインし、Google SecOps インスタンスにリンクされている Google Cloud プロジェクトを選択します。
  2. [IAM と管理] > [サービス アカウント] に移動します。
  3. [サービス アカウントを作成] をクリックします。
  4. 次の構成情報を指定します。
    • サービス アカウント名: アカウントの名前を入力します(例: bindplane-ingest)。
    • サービス アカウントの説明: 説明を入力します(例: Bindplane agent log ingestion)。
  5. [作成して続行] をクリックします。
  6. [このサービス アカウントにプロジェクトへのアクセスを許可する] セクションで、[ロールを選択] をクリックし、[Chronicle 編集者] を選択します。
  7. [続行] をクリックして [完了] をクリックします。
  8. 作成したサービス アカウントをクリックし、[キー] タブに移動します。
  9. [鍵を追加] > [新しい鍵を作成] の順にクリックします。
  10. [JSON] を選択し、[作成] をクリックします。鍵ファイルがパソコンにダウンロードされます。
  11. 鍵ファイルを Bindplane コレクタ ディレクトリ(Linux の場合は /opt/observiq-otel-collector/ingestion-auth.json、Windows の場合は C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json)に ingestion-auth.json として保存するか、config.yaml の creds_file_path を保存先のパスと一致するように更新します。
  12. [IAM と管理] > [設定] に移動し、[プロジェクト番号] をコピーします。エクスポーターの構成に必要になります。

オプション 2: 取り込み認証ファイルをダウンロードする(レガシー)

  1. Google SecOps コンソールにログインします。
  2. [SIEM 設定] > [収集エージェント] に移動します。
  3. 取り込み認証ファイルをダウンロードします。
  4. Bindplane エージェントがインストールされるシステムにファイルを安全に保存します。

Google SecOps のお客様 ID を取得する

  1. Google SecOps コンソールにログインします。
  2. [SIEM 設定] > [プロファイル] に移動します。
  3. [組織の詳細情報] セクションから [お客様 ID] をコピーして保存します。

Bindplane エージェントをインストールする

次の手順に沿って、Windows または Linux オペレーティング システムに Bindplane エージェントをインストールします。

Windows へのインストール

  1. 管理者としてコマンド プロンプトまたは PowerShell を開きます。
  2. 次のコマンドを実行します。

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
    
  3. インストールが完了するまで待ちます。

  4. 次のコマンドを実行して、インストールの内容を確認します。

    sc query observiq-otel-collector
    

    サービスが RUNNING と表示されます。

Linux のインストール

  1. root 権限または sudo 権限でターミナルを開きます。
  2. 次のコマンドを実行します。

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
    
  3. インストールが完了するまで待ちます。

  4. 次のコマンドを実行して、インストールの内容を確認します。

    sudo systemctl status observiq-otel-collector
    

    サービスは active (running) と表示されます。

その他のインストール リソース

その他のインストール オプションとトラブルシューティングについては、Bindplane エージェントのインストール ガイドをご覧ください。

Syslog を取り込んで Google SecOps に送信するように Bindplane エージェントを構成する

構成ファイルを探します。

  • Linux:

    sudo nano /opt/observiq-otel-collector/config.yaml
    
  • Windows:

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
    

構成ファイルを編集します。

  • config.yaml の内容全体を次の構成に置き換えます。

    receivers:
        udplog:
            listen_address: "0.0.0.0:514"
    
    exporters:
        chronicle/apache:
            protocol: https
            # Region of your instance, for example us, europe, asia-southeast1
            location: <LOCATION>
            # Project number of the Google Cloud project linked to the instance
            project: '<PROJECT_NUMBER>'
            compression: gzip
            creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
            customer_id: '<customer_id>'
            endpoint: chronicle.googleapis.com
            log_type: APACHE
            raw_log_field: body
    
    service:
        pipelines:
            logs/apache_to_chronicle:
                receivers:
                    - udplog
                exporters:
                    - chronicle/apache
    

構成パラメータ

各プレースホルダを次のように置き換えます。

  • レシーバーの構成:

    • listen_address: リッスンする IP アドレスとポート:
      • 0.0.0.0: すべてのインターフェースでリッスンします(推奨)。
      • ポート 514 は標準の syslog ポートです(Linux で root が必要です。root 以外のユーザーは 1514 を使用します)。
  • エクスポータの構成:

    • creds_file_path: サービス アカウントの JSON キーファイルのフルパス(オプション 1):
      • Linux: /opt/observiq-otel-collector/ingestion-auth.json
      • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • customer_id: Google SecOps コンソールからコピーしたお客様 ID
    • location: <LOCATION> を Google SecOps インスタンスのリージョン(us、europe、asia-southeast1 など)に置き換えます。エクスポートでは、この値が chronicle.googleapis.com の前に付加されます。完全なリストについては、リージョン エンドポイントをご覧ください。
    • project: <PROJECT_NUMBER> を [IAM と管理] > [設定] のプロジェクト番号に置き換えます。
    • endpoint: chronicle.googleapis.com に設定したままにします。

以前の取り込み API エクスポータ

  • オプション 2 の取り込み認証ファイルを使用する場合は、exporters ブロックを次のように置き換えます。creds_file_path を取り込み認証ファイルのパスに設定します。インスタンスが米国以外にある場合は、malachiteingestion-pa.googleapis.com をリージョン エンドポイント(europe-malachiteingestion-pa.googleapis.com など)に置き換えます。

    exporters:
        chronicle/apache:
            compression: gzip
            creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
            customer_id: '<customer_id>'
            endpoint: malachiteingestion-pa.googleapis.com
            log_type: APACHE
            raw_log_field: body
    

構成ファイルを保存する

  • 編集が完了したら、ファイルを保存します。
    • Linux: Ctrl+O、Enter、Ctrl+X の順に押します。
    • Windows の場合: [ファイル] > [保存] をクリックします。

Bindplane エージェントを再起動して変更を適用する

  • Linux で Bindplane エージェントを再起動するには、次のコマンドを実行します。

    sudo systemctl restart observiq-otel-collector
    
    1. サービスが実行されていることを確認します。

      sudo systemctl status observiq-otel-collector
      
    2. ログでエラーを確認します。

      sudo journalctl -u observiq-otel-collector -f
      
  • Windows で Bindplane エージェントを再起動するには、次のいずれかのオプションを選択します。

    • 管理者としてコマンド プロンプトまたは PowerShell を開きます。

      net stop observiq-otel-collector && net start observiq-otel-collector
      
    • サービス コンソール:

      1. Win+R を押し、「services.msc」と入力して Enter キーを押します。
      2. observIQ OpenTelemetry Collector を見つけます。
      3. 右クリックして [再起動] を選択します。
      4. サービスが実行されていることを確認します。

        sc query observiq-otel-collector
        
      5. ログでエラーを確認します。

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
        

Apache で syslog を構成する

  1. SSH を使用して、Apache をホストしているサーバーにログインします。
  2. /etc/rsyslog.d/ に 02-apache2.conf という名前のファイルを作成します。

    vim /etc/rsyslog.d/02-apache2.conf
    
  3. ファイルに次のコードを追加します。

    module(load="imfile" PollingInterval="10" statefile.directory="/var/spool/rsyslog")
    
    input(type="imfile"
        File="/var/log/apache2/access.log"
        Tag="http_access"
        Severity="info"
        Facility="local6")
    
    Local6.info @<BINDPLANE_IP>:<BINDPLANE_PORT>
    
    module(load="imfile" PollingInterval="10" statefile.directory="/var/spool/rsyslog")
    
    input(type="imfile"
        File="/var/log/apache2/error.log"
        Tag="http_error"
        Severity="error"
        Facility="local7")
    
    Local7.error @<BINDPLANE_IP>:<BINDPLANE_PORT>
    
    • <BINDPLANE_IP> と <BINDPLANE_PORT> は、Bindplane エージェント用に構成された IP アドレスとポートに置き換えます。
    • TCP プロトコルを使用している場合は、ホスト行に @ を追加します(例: @@<BINDPLANE_IP>:<BINDPLANE_PORT>)。
  4. rsyslog サービスを再起動します。

    sudo service rsyslog restart
    

UDM マッピング テーブル

ログフィールド UDM マッピング ロジック
bytes network.received_bytes クライアントから受信したバイト数。
bytes network.sent_bytes クライアントに送信されたバイト数。
bytes_out network.sent_bytes クライアントに送信されたバイト数。
bytes_received network.received_bytes クライアントから受信したバイト数。
Content network.http.method 「Content」フィールドから抽出された HTTP メソッド。
Content target.url 「Content」フィールドから抽出されたターゲット URL。
cookie additional.fields.value.string_value 「cookie」フィールドの値。
dest_ip target.ip ターゲットの IP アドレス。
dest_name target.hostname ターゲットのホスト名。
dest_port target.port ターゲットのポート。
description metadata.description イベントの説明。
duration_microseconds additional.fields.value.string_value 「duration_microseconds」フィールドの値。
file_full_path target.file.full_path ターゲット ファイルのフルパス。
hostname target.hostname ターゲットのホスト名。
http_content_type additional.fields.value.string_value 「http_content_type」フィールドの値。
http_host principal.hostname プリンシパルのホスト名。
http_method network.http.method HTTP メソッド。
http_referrer network.http.referral_url HTTP リファラー URL。
http_user_agent network.http.user_agent HTTP ユーザー エージェント。
ID metadata.id イベントの ID。
insertId metadata.product_log_id プロダクトログ ID。
ip principal.ip プリンシパルの IP アドレス。
jsonPayload.cIP target.ip ターゲットの IP アドレス。
jsonPayload.cPort target.port ターゲットのポート。
jsonPayload.csBytes network.sent_bytes クライアントに送信されたバイト数。
jsonPayload.csMethod network.http.method HTTP メソッド。
jsonPayload.csMimeType target.file.mime_type ターゲット ファイルの MIME タイプ。
jsonPayload.csReferer network.http.referral_url HTTP リファラー URL。
jsonPayload.csURL target.url ターゲット URL。
jsonPayload.csUserAgent network.http.user_agent HTTP ユーザー エージェント。
jsonPayload.sHierarchy additional.fields.value.string_value 「sHierarchy」フィールドの値。
jsonPayload.sHostname principal.hostname プリンシパルのホスト名。
jsonPayload.sIP principal.ip プリンシパルの IP アドレス。
jsonPayload.scBytes network.received_bytes クライアントから受信したバイト数。
jsonPayload.scHTTPStatus network.http.response_code HTTP レスポンス コード。
jsonPayload.scResultCode additional.fields.value.string_value 「scResultCode」フィールドの値。
LastStatus network.http.response_code HTTP レスポンス コード。
log_level security_result.severity セキュリティ結果の重大度。
logName security_result.category_details セキュリティ結果のカテゴリの詳細。
method network.http.method HTTP メソッド。
pid principal.process.pid プリンシパルのプロセス ID。
Port target.port ターゲットのポート。
proto network.application_protocol アプリケーション プロトコル。
referer network.http.referral_url HTTP リファラー URL。
RemoteHost principal.ip プリンシパルの IP アドレス。
RemoteUser principal.user.userid プリンシパルのユーザー ID。
resource.labels.instance_id target.resource.product_object_id ターゲット リソースのプロダクト オブジェクト ID。
resource.labels.project_id target.resource.attribute.labels.value 「project_id」ラベルの値。
resource.labels.zone target.resource.attribute.cloud.availability_zone ターゲット リソースのアベイラビリティ ゾーン。
resource.type target.resource.resource_type ターゲットのリソースタイプ。
response network.http.response_code HTTP レスポンス コード。
SizeBytes network.received_bytes クライアントから受信したバイト数。
src_ip principal.ip プリンシパルの IP アドレス。
src_port principal.port プリンシパルのポート。
ssl_cipher network.tls.cipher TLS 暗号。
ssl_version network.tls.version_protocol TLS バージョン プロトコル。
status network.http.response_code HTTP レスポンス コード。
target target.url ターゲット URL。
target_ip target.ip ターゲットの IP アドレス。
target_port target.port ターゲットのポート。
time metadata.event_timestamp イベントのタイムスタンプ。
uri_path target.process.file.full_path ターゲット ファイルのフルパス。
user principal.user.userid プリンシパルのユーザー ID。
useragent network.http.user_agent HTTP ユーザー エージェント。
version_protocol network.tls.version_protocol TLS バージョン プロトコル。
Workername principal.hostname プリンシパルのホスト名。
x_forwarded_for 「X-Forwarded-For」ヘッダーの値。
metadata.log_type パーサーコードで値が「APACHE」に設定されます。
metadata.product_name パーサーコードで「Apache Web Server」に設定されます。
metadata.vendor_name パーサーコードで値が「Apache」に設定されます。
metadata.event_type この値は、プリンシパルとターゲット情報の有無に基づいて決定されます。プリンシパルとターゲットの両方が存在する場合、イベントタイプは「NETWORK_HTTP」に設定されます。プリンシパルのみが存在する場合、イベントタイプは「STATUS_UPDATE」に設定されます。それ以外の場合は、「GENERIC_EVENT」に設定されます。
additional.fields.key キーは、フィールドに基づいてパーサーコードで「keep_alive」、「duration_microseconds」、「cookie」、「http_content_type」、「sHierarchy」、「scResultCode」に設定されます。
target.port 「proto」フィールドが「HTTP」の場合、ポートは 80 に設定されます。「proto」フィールドが「HTTPS」の場合、ポートは 443 に設定されます。「proto」フィールドが「FTP」の場合、ポートは 21 に設定されます。
target.resource.attribute.labels.key キーはパーサーコードで「project_id」に設定されます。
client_ip_address event.idm.read_only_udm.principal.ip と event.idm.read_only_udm.principal.asset.ip 変更履歴からマッピング
server event.idm.read_only_udm.target.hostname と event.idm.read_only_udm.target.asset.hostname 変更履歴からマッピング
bytes_in event.idm.read_only_udm.network.received_bytes 変更履歴からマッピング
PHPSESSID event.idm.read_only_udm.additional.fields 変更履歴からマッピング
AuthToken event.idm.read_only_udm.additional.fields 変更履歴からマッピング
response_time_microseconds event.idm.read_only_udm.additional.fields 変更履歴からマッピング
hostname event.idm.read_only_udm.intermediary.hostname 変更履歴からマッピング
Filename event.idm.read_only_udm.principal.process.file.full_path 変更履歴からマッピング
kv_key event.idm.read_only_udm.additional.fields 変更履歴からマッピング
info event.idm.read_only_udm.additional.fields 変更履歴からマッピング
SourceModuleName event.idm.read_only_udm.additional.fields 変更履歴からマッピング
SourceModuleType event.idm.read_only_udm.additional.fields 変更履歴からマッピング
src_ip event.idm.read_only_udm.target.ip と event.idm.read_only_udm.target.asset.ip 変更履歴からマッピング
tls_version event.idm.read_only_udm.network.tls.version 変更履歴からマッピング
version_protocol event.idm.read_only_udm.network.tls.version_protocol 変更履歴からマッピング
syncAccuracy event.idm.read_only_udm.security_result.detection_fields 変更履歴からマッピング
isSynced event.idm.read_only_udm.security_result.detection_fields 変更履歴からマッピング
tzKnown event.idm.read_only_udm.additional.fields 変更履歴からマッピング
user_location principal.location.country_or_region 変更履歴からマッピング
proto", "proto_version", "uri_path", and "uri_query additional.fields 変更履歴からマッピング
ip_msg principal.ip 変更履歴からマッピング
msg_method network.http.method 変更履歴からマッピング
useragentvalue network.http.user_agent 変更履歴からマッピング
bytes_out network.sent.bytes 変更履歴からマッピング
XForwardedForIP" and "RemoteHost principal.ip 変更履歴からマッピング
Remoteuser principal.user.userid 変更履歴からマッピング

変更ログ

このパーサーの変更ログを表示する

さらにサポートが必要な場合 コミュニティ メンバーや Google SecOps のプロフェッショナルから回答を得ることができます。