Zeek (이전 명칭: Bro) TSV 로그 수집

다음에서 지원:

이 문서에서는 Bindplane 에이전트를 사용하여 Zeek (이전 Bro) TSV 로그를 Google Security Operations로 수집하는 방법을 설명합니다.

Zeek (이전 명칭: Bro)는 네트워크 트래픽을 수동적으로 분석하고 연결, DNS 쿼리, HTTP 트랜잭션, SSL/TLS 세션, 파일 분석을 다루는 자세한 탭 구분 로그 파일을 생성하는 네트워크 보안 모니터링 플랫폼입니다. Zeek 센서는 기본적으로 /opt/zeek/logs/ 또는 /usr/local/zeek/logs/ 아래에 TSV 로그 파일을 생성합니다.

시작하기 전에

다음 기본 요건이 충족되었는지 확인합니다.

  • Google SecOps 인스턴스
  • Windows Server 2016 이상 또는 systemd가 설치된 Linux 호스트
  • Bindplane 에이전트와 Zeek 센서 호스트 간의 네트워크 연결
  • 프록시 뒤에서 실행하는 경우 Bindplane 에이전트 요구사항에 따라 방화벽 포트가 열려 있는지 확인합니다.
  • 로그 파일을 읽을 수 있는 권한이 있는 Zeek 센서 호스트에 대한 권한 있는 액세스
  • 센서 파일 시스템 (일반적으로 /opt/zeek/logs/ 또는 /usr/local/zeek/logs/ 아래)의 Zeek TSV 로그 파일에 대한 액세스 권한

Bindplane 에이전트의 Google SecOps 사용자 인증 정보 가져오기

Google SecOps에 Bindplane 에이전트를 인증하려면 다음 방법 중 하나를 선택합니다.

  • 새 배포: Chronicle API를 사용합니다 (옵션 1).
  • 기존 배포: 2027년 7월 20일에 수집 API가 지원 중단될 때까지 수집 인증 파일 (옵션 2)을 계속 사용합니다.
  1. Google Cloud 콘솔에 로그인하고 Google SecOps 인스턴스에 연결된 Google Cloud 프로젝트를 선택합니다.
  2. IAM 및 관리자 > 서비스 계정으로 이동합니다.
  3. 서비스 계정 만들기를 클릭합니다.
  4. 다음 구성 세부정보를 제공합니다.
    • 서비스 계정 이름: 계정 이름을 입력합니다 (예: bindplane-ingest).
    • 서비스 계정 설명: 설명을 입력합니다 (예: Bindplane agent log ingestion).
  5. 만들고 계속하기를 클릭합니다.
  6. 이 서비스 계정에 프로젝트에 대한 액세스 권한 부여 섹션에서 역할 선택을 클릭하고 Chronicle 편집자를 선택합니다.
  7. 계속을 클릭한 다음 완료를 클릭합니다.
  8. 생성한 서비스 계정을 클릭한 다음 키 탭으로 이동합니다.
  9. 키 추가 > 새 키 만들기를 클릭합니다.
  10. JSON을 선택하고 만들기를 클릭합니다. 키 파일이 컴퓨터에 다운로드됩니다.
  11. 키 파일을 Bindplane 수집기 디렉터리 (Linux의 경우 /opt/observiq-otel-collector/ingestion-auth.json, Windows의 경우 C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json)에 ingestion-auth.json로 저장하거나 config.yaml의 creds_file_path를 업데이트하여 저장한 경로와 일치시킵니다.
  12. IAM 및 관리자 > 설정으로 이동하여 프로젝트 번호를 복사합니다. 내보내기 도구 구성에 필요합니다.

옵션 2: 데이터 수집 인증 파일 다운로드 (기존)

  1. Google SecOps 콘솔에 로그인합니다.
  2. SIEM 설정 > 수집 에이전트로 이동합니다.
  3. 데이터 수집 인증 파일을 다운로드합니다.
  4. Bindplane 에이전트가 설치될 시스템에 파일을 안전하게 저장합니다.

Google SecOps 고객 ID 가져오기

  1. Google SecOps 콘솔에 로그인합니다.
  2. SIEM 설정 > 프로필로 이동합니다.
  3. 조직 세부정보 섹션에서 고객 ID를 복사하여 저장합니다.

Bindplane 에이전트 설치

다음 안내에 따라 Windows 또는 Linux 운영체제에 Bindplane 에이전트를 설치합니다.

Windows 설치

  1. 명령 프롬프트 또는 PowerShell을 관리자로 엽니다.
  2. 다음 명령어를 실행합니다.

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
    
  3. 설치가 완료될 때까지 기다립니다.

  4. 다음을 실행하여 설치를 확인합니다.

    sc query observiq-otel-collector
    

    서비스가 RUNNING으로 표시됩니다.

Linux 설치

  1. 루트 또는 sudo 권한으로 터미널을 엽니다.
  2. 다음 명령어를 실행합니다.

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
    
  3. 설치가 완료될 때까지 기다립니다.

  4. 다음을 실행하여 설치를 확인합니다.

    sudo systemctl status observiq-otel-collector
    

    서비스가 active (running)으로 표시됩니다.

추가 설치 리소스

추가 설치 옵션 및 문제 해결은 Bindplane 에이전트 설치 가이드를 참조하세요.

syslog를 수집하고 Google SecOps로 전송하도록 Bindplane 에이전트 구성

구성 파일 찾기

  • Linux:

    sudo nano /opt/observiq-otel-collector/config.yaml
    
  • Windows:

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
    

구성 파일 설정

  • config.yaml의 전체 콘텐츠를 다음 구성으로 바꿉니다.

    receivers:
      udplog:
        listen_address: "0.0.0.0:514"
    
    exporters:
      chronicle/bro_tsv:
        protocol: https
        # Region of your instance, for example us, europe, asia-southeast1
        location: <LOCATION>
        # Project number of the Google Cloud project linked to the instance
        project: '<PROJECT_NUMBER>'
        compression: gzip
        creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
        customer_id: '<customer_id>'
        endpoint: chronicle.googleapis.com
        log_type: BRO_TSV
        raw_log_field: body
        ingestion_labels:
          env: production
    
    service:
      pipelines:
        logs/bro_to_chronicle:
          receivers:
            - udplog
          exporters:
            - chronicle/bro_tsv
    

구성 매개변수

다음 자리표시자를 바꿉니다.

  • 수신자 구성:

    • udplog: 프로토콜 기반 수신기 유형:
      • UDP syslog의 udplog
      • tcplog(TCP syslog)
    • 0.0.0.0: 리슨할 IP 주소입니다.
      • 0.0.0.0: 모든 인터페이스에서 수신 대기 (권장)
      • 하나의 인터페이스에서 수신 대기할 특정 IP 주소
    • 514: 수신 대기할 포트 번호 (예: 514, 1514, 6514)
  • 내보내기 도구 구성:

    • bro_tsv: 내보내기 도구의 설명 이름
    • creds_file_path: 서비스 계정 JSON 키 파일의 전체 경로 (옵션 1):
      • Linux: /opt/observiq-otel-collector/ingestion-auth.json
      • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • <customer_id>: 이전 단계의 고객 ID
    • location: <LOCATION>을 Google SecOps 인스턴스의 리전 (예: us, europe, asia-southeast1)으로 바꿉니다. 내보내기 프로그램은 chronicle.googleapis.com에 이 값을 접두사로 추가합니다. 전체 목록은 리전 엔드포인트를 참고하세요.
    • project: <PROJECT_NUMBER>을 IAM 및 관리자 > 설정의 프로젝트 번호로 바꿉니다.
    • endpoint: chronicle.googleapis.com로 설정된 상태를 유지합니다.
    • BRO_TSV: Chronicle에 표시되는 로그 유형
    • ingestion_labels: YAML 형식의 선택적 라벨 (예: env: production)
  • 파이프라인 구성:

    • bro_to_chronicle: 파이프라인을 설명하는 이름입니다.

기존 수집 API 내보내기 도구

  • 옵션 2의 수집 인증 파일을 사용하는 경우 exporters 블록을 다음으로 바꿉니다. creds_file_path를 데이터 수집 인증 파일의 경로로 설정하고 인스턴스가 미국 외부에 있는 경우 malachiteingestion-pa.googleapis.com를 리전 엔드포인트 (예: europe-malachiteingestion-pa.googleapis.com)로 바꿉니다.

    exporters:
      chronicle/bro_tsv:
        compression: gzip
        creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
        customer_id: '<customer_id>'
        endpoint: malachiteingestion-pa.googleapis.com
        log_type: BRO_TSV
        raw_log_field: body
        ingestion_labels:
          env: production
    

구성 파일 저장

  • 수정 후 파일을 저장합니다.
    • Linux: Ctrl+O, Enter, Ctrl+X 순으로 누릅니다.
    • Windows: 파일 > 저장을 클릭합니다.

변경사항을 적용하려면 Bindplane 에이전트를 다시 시작하세요.

  • Linux에서 Bindplane 에이전트를 다시 시작하려면 다음 명령어를 실행합니다.

    sudo systemctl restart observiq-otel-collector
    
    1. 서비스가 실행 중인지 확인합니다.

      sudo systemctl status observiq-otel-collector
      
    2. 로그에서 오류를 확인합니다.

      sudo journalctl -u observiq-otel-collector -f
      
  • Windows에서 Bindplane 에이전트를 다시 시작하려면 다음 옵션 중 하나를 선택합니다.

    • 관리자 권한으로 명령 프롬프트 또는 PowerShell을 실행합니다.

      net stop observiq-otel-collector && net start observiq-otel-collector
      
    • 서비스 콘솔:

      1. Win+R를 누르고 services.msc를 입력한 다음 Enter 키를 누릅니다.
      2. observIQ OpenTelemetry Collector를 찾습니다.
      3. 마우스 오른쪽 버튼으로 클릭하고 다시 시작을 선택합니다.
      4. 서비스가 실행 중인지 확인합니다.

        sc query observiq-otel-collector
        
      5. 로그에서 오류를 확인합니다.

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
        

Zeek syslog 전달 구성

Zeek는 로컬에서 TSV 로그 파일을 생성합니다. syslog를 사용하여 이러한 로그를 Bindplane 에이전트로 전달하려면 Zeek 센서 호스트에서 syslog 데몬을 구성하세요.

  1. 루트 또는 sudo 권한으로 Zeek 센서 호스트에 로그인합니다.
  2. rsyslog 또는 syslog-ng가 아직 설치되어 있지 않으면 설치하고 구성합니다.
  3. Zeek 로그를 전달하는 rsyslog 구성 파일을 만듭니다.

    sudo nano /etc/rsyslog.d/zeek-forward.conf
    
  4. Zeek 로그를 Bindplane 에이전트로 전달하려면 다음 구성을 추가합니다.

    module(load="imfile")
    input(type="imfile"
        File="/opt/zeek/logs/current/*.log"
        Tag="zeek:"
        Severity="info"
        Facility="local6")
    local6.* @<BINDPLANE_AGENT_IP>:514
    
    • <BINDPLANE_AGENT_IP>를 Bindplane 에이전트 호스트의 IP 주소로 바꿉니다.
    • /opt/zeek/logs/current/*.log을 Zeek 로그 파일의 실제 경로로 바꿉니다(다른 경우).
    • TCP 전달에 @ 대신 @@를 사용합니다 (Bindplane 에이전트 수신자 유형과 일치해야 함).
  5. rsyslog를 다시 시작하여 변경사항을 적용합니다.

    sudo systemctl restart rsyslog
    
  6. Bindplane 에이전트 로그를 확인하여 syslog 메시지가 수신되고 있는지 확인합니다.

UDM 매핑 테이블

로그 필드 UDM 매핑 로직
rtt, operation, tunnel_type, action, cmd, arg, rows additional.fields additional_rtt, additional_op, additional_tt, additional_action, additional_cmd, additional_arg, additional_rows에서 병합됨
extensions.auth.type 'AUTHTYPE_UNSPECIFIED'로 설정
conn_state, action, error, desc metadata.description bro_conn의 경우 conn_state 설명, bro_smb_files의 경우 작업, bro_kerberos의 경우 'KERBEROS: %{error}', AsymPayloadFlow의 경우 desc, 기타의 경우 상수로 설정
bro_type, qerror, next_protocol, protocol metadata.event_type 기본적으로 GENERIC_EVENT로 설정, dns의 경우 NETWORK_DNS, conn/ntlm/smb_mapping/dce_rpc/tunnel/mysql/ssh/udp/tcp의 경우 NETWORK_CONNECTION, dhcp의 경우 NETWORK_DHCP, http/ssl의 경우 NETWORK_HTTP(next_protocol이 http인 경우), smb_files/files/x509의 경우 NETWORK_UNCATEGORIZED, radius의 경우 USER_LOGIN, ftp의 경우 NETWORK_FTP, qerror query_not_present의 경우 NETWORK_UNCATEGORIZED
bro_type, prod_event metadata.product_event_type 비어 있지 않으면 bro_type의 값, 비어 있으면 prod_event의 값
uid, id metadata.product_log_id 사용 가능한 경우 uid의 값, 그렇지 않은 경우 id의 값
metadata.product_name 'Bro'로 설정
metadata.vendor_name 'Zeek'로 설정합니다.
service_proto, source network.application_protocol 연결의 경우 service_proto에서 매핑되고 파일의 경우 소스에서 매핑되며 다른 항목의 경우 상수입니다.
호스트 이름 network.dhcp.client_hostname 값이 직접 복사됨
lease_time network.dhcp.lease_time_seconds uinteger로 변환됨
dhcp_info network.dhcp.type ~= 'ACK'인 경우 'ACK', ~= 'RELEASE'인 경우 'RELEASE', ~= 'INFORM'인 경우 'INFORM', ~= 'DISCOVER'인 경우 'DISCOVER', ~= 'OFFER'인 경우 'OFFER', ~= 'REQUEST'인 경우 'REQUEST'로 설정
assigned_ip network.dhcp.yiaddr 값이 직접 복사됨
direction network.direction 값이 직접 복사됨
answer_list network.dns.answers 값이 직접 복사됨
trans_id network.dns.id uint로 변환됨
q network.dns.questions q에서 병합됨
rcode network.dns.response_code '-'가 아닌 경우 uinteger로 변환됨
명령어 network.ftp.command 값이 직접 복사됨
메서드 network.http.method 값이 직접 복사됨
referrer network.http.referral_url 값이 직접 복사됨
status_code network.http.response_code 정수로 변환됨
user_agent network.http.user_agent 값이 직접 복사됨
proto, protocol network.ip_protocol conn의 경우 proto의 값, udp의 경우 'UDP', tcp의 경우 'TCP'
id_resp_bytes, received_bytes network.received_bytes 연결의 경우 id_resp_bytes, 파일의 경우 received_bytes에서 uinteger로 변환됨
id_orig_bytes network.sent_bytes uinteger로 변환됨
uid network.session_id 값이 직접 복사됨
암호 network.tls.cipher 값이 직접 복사됨
client_issuer network.tls.client.certificate.issuer 값이 직접 복사됨
client_subject network.tls.client.certificate.subject 값이 직접 복사됨
클라이언트 network.tls.client.certificate.version 값이 직접 복사됨
ja3 network.tls.client.ja3 값이 직접 복사됨
곡선 network.tls.curve 값이 직접 복사됨
설정됨 network.tls.established 값이 직접 복사됨
next_protocol network.tls.next_protocol 값이 직접 복사됨
재개됨 network.tls.resumed 값이 직접 복사됨
발급자, certificate.issuer network.tls.server.certificate.issuer ssl의 경우 발급기관의 값, x509의 경우 certificate.issuer
certificate.not_valid_after network.tls.server.certificate.not_after 날짜 필터를 사용하여 변환됨
certificate.not_valid_before network.tls.server.certificate.not_before 날짜 필터를 사용하여 변환됨
certificate.serial network.tls.server.certificate.serial 값이 직접 복사됨
subject, certificate.subject network.tls.server.certificate.subject ssl의 주체 값, x509의 certificate.subject
certificate.version network.tls.server.certificate.version 문자열로 변환됨
ja3s network.tls.server.ja3s 값이 직접 복사됨
버전 network.tls.version 값이 직접 복사됨
도메인 principal.administrative_domain 값이 직접 복사됨
file_size principal.file.size uinteger로 변환됨
client_host, _system_name, _HostName principal.hostname Kerberos의 client_host 값, x509의 _system_name 값, 추출된 경우 _HostName
id.orig_h principal.ip id.orig_h에서 병합됨
mac principal.mac 값이 직접 복사됨
id.orig_p principal.port 정수로 변환, id.orig_p의 값 또는 local_orig가 아닌 경우 conn에 대해 반전됨
user_email principal.user.email_addresses user_email에서 병합됨
user, username, user_name principal.user.userid ftp의 사용자 값, radius의 사용자 이름, kerberos의 user_name
qclass q.class uinteger로 변환됨
qname, q.name q.name qname 또는 q.name의 값
qtype q.type uinteger로 변환됨
result, auth_success security_result radius의 경우 BLOCK 작업, ssh의 경우 ALLOW/BLOCK/UNKNOWN 작업이 있는 security_result에서 병합됨
uri target.administrative_domain grok을 사용하여 URI에서 추출됨
full_file_path, fuid target.file.full_path smb_files의 경우 full_file_path의 값, files의 경우 fuid
md5 target.file.md5 값이 직접 복사됨
mime_type target.file.mime_type 값이 직접 복사됨
sha1 target.file.sha1 값이 직접 복사됨
size, file_size target.file.size smb_files의 경우 size에서, files의 경우 file_size에서 uinteger로 변환됨
server_host, host, CN, server target.hostname kerberos의 경우 server_host, http의 경우 host, x509의 경우 CN, ssh의 경우 server의 값
id.resp_h target.ip id.resp_h에서 병합됨
host_key, host_key_alg, kex_alg, mac_alg, compression_alg, cipher_alg, auth_attempts target.labels 다양한 라벨 객체에서 병합됨
id.resp_p target.port 정수로 변환, id.resp_p의 값 또는 로컬_원본이 아닌 경우 conn에 대해 반전됨
path, named_pipe target.resource.name smb_mapping의 경로 값, dce_rpc의 named_pipe
share_type target.resource.type smb_mapping의 share_type 값, dce_rpc의 경우 'PIPE'
url target.url 호스트 및 URI에서 연결됨

변경 로그

이 파서의 변경 로그 보기

도움이 더 필요하신가요? 커뮤니티 회원 및 Google SecOps 전문가에게 문의하여 답변을 받으세요.