Coletar registros do Apache

Versão do analisador:20.0

Compatível com:

Google SecOps SIEM

Este documento explica como ingerir registros do Apache no Google Security Operations usando o agente do Bindplane.

O Apache HTTP Server é um servidor da Web de código aberto que atende a solicitações HTTP e gera registros de acesso e de erro. O analisador processa os formatos de registro combinados/comuns padrão e os registros formatados em JSON, extraindo detalhes da solicitação HTTP, códigos de resposta e informações do cliente.

Antes de começar

Verifique se você tem os pré-requisitos a seguir:

• Uma instância do Google SecOps
• Windows Server 2016 ou mais recente ou host Linux com systemd
• Conectividade de rede entre o agente do Bindplane e o servidor Apache
• Se estiver em execução atrás de um proxy, verifique se as portas do firewall estão abertas de acordo com os requisitos do agente do Bindplane.
• Acesso privilegiado ao servidor Apache (raiz ou sudo)

Receber credenciais do Google SecOps para o agente do Bindplane

Para autenticar o agente do Bindplane no Google SecOps, escolha um dos seguintes métodos:

• Novas implantações: use a API Chronicle (opção 1).
• Implantações legadas: continue usando o arquivo de autenticação de ingestão (opção 2) até que a API Ingestion seja descontinuada em 20 de julho de 2027.

Opção 1: criar uma conta de serviço para a API Chronicle (recomendado)

1. Faça login no console doGoogle Cloud e selecione o projeto do Google Cloud vinculado à sua instância do Google SecOps.
2. Acesse IAM e administrador > Contas de serviço.
3. Clique em Criar conta de serviço.
4. Informe os seguintes detalhes de configuração:
   • Nome da conta de serviço: insira um nome para a conta (por exemplo, bindplane-ingest).
   • Descrição da conta de serviço: insira uma descrição (por exemplo, Bindplane agent log ingestion).
5. Clique em Criar e continuar.
6. Na seção Conceder a essa conta de serviço acesso ao projeto, clique em Selecionar um papel e escolha Editor do Chronicle.
7. Clique em Continuar e depois em Concluído.
8. Clique na conta de serviço que você criou e acesse a guia Chaves.
9. Clique em Adicionar chave > Criar nova chave.
10. Selecione JSON e clique em Criar. O arquivo de chave é baixado para o computador.
11. Salve o arquivo de chave como ingestion-auth.json no diretório do coletor do BindPlane (/opt/observiq-otel-collector/ingestion-auth.json no Linux ou C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json no Windows) ou atualize creds_file_path em config.yaml para corresponder ao caminho em que você o salvou.
12. Acesse IAM e administrador > Configurações e copie o Número do projeto. Você vai precisar dele para a configuração do exportador.

Observação: a chave JSON é uma credencial. Restrinja o acesso ao arquivo no host do BindPlane e alterne a chave de acordo com a política da sua organização.

Opção 2: baixar o arquivo de autenticação de ingestão (legado)

1. Faça login no console do Google SecOps.
2. Acesse Configurações do SIEM > Agentes de coleta.
3. Baixe o arquivo de autenticação de ingestão.
4. Salve o arquivo com segurança no sistema em que o agente do Bindplane será instalado.

Observação: esse arquivo autentica o agente na API Ingestion legada (malachiteingestion-pa.googleapis.com), que o Google programou para o fim da vida útil em 20 de julho de 2027. Planeje migrar para a opção 1 antes dessa data.

Receber o ID de cliente do Google SecOps

1. Faça login no console do Google SecOps.
2. Acesse Configurações do SIEM > Perfil.

3. Copie e salve o ID de cliente na seção Detalhes da organização.

   Observação: o ID do cliente é necessário para configurar o exportador do agente Bindplane.

Instalar o agente do BindPlane

Instale o agente do Bindplane no seu sistema operacional Windows ou Linux de acordo com as instruções a seguir.

Instalação do Windows

1. Abra o Prompt de comando ou o PowerShell como administrador.

2. Execute este comando:

   msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
   

3. Aguarde a conclusão da instalação.

4. Execute o seguinte comando para confirmar a instalação:

   sc query observiq-otel-collector
   

   O serviço precisa aparecer como RUNNING.

Instalação do Linux

1. Abra um terminal com privilégios de raiz ou sudo.

2. Execute este comando:

   sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
   

3. Aguarde a conclusão da instalação.

4. Execute o seguinte comando para confirmar a instalação:

   sudo systemctl status observiq-otel-collector
   

   O serviço precisa aparecer como active (running).

Outros recursos de instalação

Para mais opções de instalação e solução de problemas, consulte o guia de instalação do agente do BindPlane.

Observação: a configuração do exportador da API Chronicle requer o coletor Bindplane v1.106.0 ou mais recente. Os comandos anteriores instalam a versão mais recente. Se você estiver atualizando uma instalação, faça upgrade do coletor antes de mudar a configuração.

Configurar o agente do Bindplane para ingerir o syslog e enviar ao Google SecOps

Localize o arquivo de configuração.

• Linux:

  sudo nano /opt/observiq-otel-collector/config.yaml
  

• Windows:

  notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
  

Editar o arquivo de configuração

• Substitua todo o conteúdo de config.yaml pela seguinte configuração:

  receivers:
      udplog:
          listen_address: "0.0.0.0:514"
  
  exporters:
      chronicle/apache:
          protocol: https
          # Region of your instance, for example us, europe, asia-southeast1
          location: <LOCATION>
          # Project number of the Google Cloud project linked to the instance
          project: '<PROJECT_NUMBER>'
          compression: gzip
          creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
          customer_id: '<customer_id>'
          endpoint: chronicle.googleapis.com
          log_type: APACHE
          raw_log_field: body
  
  service:
      pipelines:
          logs/apache_to_chronicle:
              receivers:
                  - udplog
              exporters:
                  - chronicle/apache
  

Parâmetros de configuração

Substitua os seguintes marcadores de posição:

• Configuração do receptor:

  • listen_address: endereço IP e porta a serem detectados:
    • 0.0.0.0 para ouvir em todas as interfaces (recomendado)
    • A porta 514 é a porta padrão do syslog (requer raiz no Linux; use 1514 para não raiz).

• Configuração do exportador:

  • creds_file_path: caminho completo para o arquivo de chave JSON da conta de serviço (opção 1):
    • Linux: /opt/observiq-otel-collector/ingestion-auth.json
    • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
  • customer_id: ID de cliente copiado do console do Google SecOps
  • location: substitua <LOCATION> pela região da sua instância do Google SecOps (por exemplo, us, europe ou asia-southeast1). O exportador adiciona esse valor ao prefixo chronicle.googleapis.com. Consulte Endpoints regionais para ver a lista completa.
  • project: substitua <PROJECT_NUMBER> pelo número do projeto em IAM e administrador > Configurações.
  • endpoint: mantenha definido como chronicle.googleapis.com.

Exportador da API de ingestão legada

• Se você usar o arquivo de autenticação de ingestão da Opção 2, substitua o bloco exporters pelo seguinte. Defina creds_file_path como o caminho para o arquivo de autenticação de ingestão e, se a instância estiver fora dos EUA, substitua malachiteingestion-pa.googleapis.com pelo endpoint regional (por exemplo, europe-malachiteingestion-pa.googleapis.com).

  exporters:
      chronicle/apache:
          compression: gzip
          creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
          customer_id: '<customer_id>'
          endpoint: malachiteingestion-pa.googleapis.com
          log_type: APACHE
          raw_log_field: body
  

Observação: esse exportador vai parar de funcionar quando a API Ingestion for descontinuada em 20 de julho de 2027.

Salvar o arquivo de configuração

• Depois de editar, salve o arquivo:
  • Linux: pressione Ctrl+O, Enter e Ctrl+X.
  • Windows: clique em Arquivo > Salvar.

Reinicie o agente do Bindplane para aplicar as mudanças:

• Para reiniciar o agente do Bindplane no Linux, execute o seguinte comando:

  sudo systemctl restart observiq-otel-collector
  

  1. Verifique se o serviço está em execução:

     sudo systemctl status observiq-otel-collector
     

  2. Verifique se há erros nos registros:

     sudo journalctl -u observiq-otel-collector -f
     

• Para reiniciar o agente do BindPlane no Windows, escolha uma das seguintes opções:

  • Prompt de comando ou PowerShell como administrador:

    net stop observiq-otel-collector && net start observiq-otel-collector
    

  • Console de serviços:

    1. Pressione Win+R, digite services.msc e pressione Enter.
    2. Localize o coletor do OpenTelemetry da observIQ.
    3. Clique com o botão direito do mouse e selecione Reiniciar.

    4. Verifique se o serviço está em execução:

       sc query observiq-otel-collector
       

    5. Verifique se há erros nos registros:

       type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
       

Configurar o syslog no Apache

1. Faça login no servidor que hospeda o Apache usando SSH.

2. Crie um arquivo em /etc/rsyslog.d/ chamado 02-apache2.conf:

   vim /etc/rsyslog.d/02-apache2.conf
   

3. Adicione o seguinte código ao arquivo:

   module(load="imfile" PollingInterval="10" statefile.directory="/var/spool/rsyslog")
   
   input(type="imfile"
       File="/var/log/apache2/access.log"
       Tag="http_access"
       Severity="info"
       Facility="local6")
   
   Local6.info @<BINDPLANE_IP>:<BINDPLANE_PORT>
   
   module(load="imfile" PollingInterval="10" statefile.directory="/var/spool/rsyslog")
   
   input(type="imfile"
       File="/var/log/apache2/error.log"
       Tag="http_error"
       Severity="error"
       Facility="local7")
   
   Local7.error @<BINDPLANE_IP>:<BINDPLANE_PORT>
   

   • Substitua <BINDPLANE_IP> e <BINDPLANE_PORT> pelo endereço IP e pela porta configurados para o agente do Bindplane.
   • Se você estiver usando o protocolo TCP, adicione outro @ à linha do host (por exemplo, @@<BINDPLANE_IP>:<BINDPLANE_PORT>).

4. Reinicie os serviços rsyslog:

   sudo service rsyslog restart
   

Tabela de mapeamento de UDM

Campo de registro	Mapeamento de UDM	Lógica
bytes	network.received_bytes	Bytes recebidos do cliente.
bytes	network.sent_bytes	Bytes enviados ao cliente.
bytes_out	network.sent_bytes	Bytes enviados ao cliente.
bytes_received	network.received_bytes	Bytes recebidos do cliente.
Content	network.http.method	Método HTTP extraído do campo "Conteúdo".
Content	target.url	URL de destino extraído do campo "Conteúdo".
cookie	additional.fields.value.string_value	Valor do campo "cookie".
dest_ip	target.ip	Endereço IP do destino.
dest_name	target.hostname	Nome do host do destino.
dest_port	target.port	Porta do destino.
description	metadata.description	É a descrição do evento.
duration_microseconds	additional.fields.value.string_value	Valor do campo "duration_microseconds".
file_full_path	target.file.full_path	Caminho completo do arquivo de destino.
hostname	target.hostname	Nome do host do destino.
http_content_type	additional.fields.value.string_value	Valor do campo "http_content_type".
http_host	principal.hostname	Nome do host do principal.
http_method	network.http.method	Método HTTP.
http_referrer	network.http.referral_url	URL do referenciador HTTP.
http_user_agent	network.http.user_agent	User agent HTTP.
ID	metadata.id	ID do evento.
insertId	metadata.product_log_id	ID do registro do produto.
ip	principal.ip	Endereço IP do principal.
jsonPayload.cIP	target.ip	Endereço IP do destino.
jsonPayload.cPort	target.port	Porta do destino.
jsonPayload.csBytes	network.sent_bytes	Bytes enviados ao cliente.
jsonPayload.csMethod	network.http.method	Método HTTP.
jsonPayload.csMimeType	target.file.mime_type	Tipo MIME do arquivo de destino.
jsonPayload.csReferer	network.http.referral_url	URL do referenciador HTTP.
jsonPayload.csURL	target.url	URL de destino.
jsonPayload.csUserAgent	network.http.user_agent	User agent HTTP.
jsonPayload.sHierarchy	additional.fields.value.string_value	Valor do campo "sHierarchy".
jsonPayload.sHostname	principal.hostname	Nome do host do principal.
jsonPayload.sIP	principal.ip	Endereço IP do principal.
jsonPayload.scBytes	network.received_bytes	Bytes recebidos do cliente.
jsonPayload.scHTTPStatus	network.http.response_code	Código de resposta HTTP.
jsonPayload.scResultCode	additional.fields.value.string_value	Valor do campo "scResultCode".
LastStatus	network.http.response_code	Código de resposta HTTP.
log_level	security_result.severity	Gravidade do resultado de segurança.
logName	security_result.category_details	Detalhes da categoria do resultado de segurança.
method	network.http.method	Método HTTP.
pid	principal.process.pid	ID de processo do principal.
Port	target.port	Porta do destino.
proto	network.application_protocol	Protocolo de aplicativo.
referer	network.http.referral_url	URL do referenciador HTTP.
RemoteHost	principal.ip	Endereço IP do principal.
RemoteUser	principal.user.userid	ID do usuário do principal.
resource.labels.instance_id	target.resource.product_object_id	ID do objeto do produto do recurso de destino.
resource.labels.project_id	target.resource.attribute.labels.value	Valor do rótulo "project_id".
resource.labels.zone	target.resource.attribute.cloud.availability_zone	Zona de disponibilidade do recurso de destino.
resource.type	target.resource.resource_type	Tipo de recurso do destino.
response	network.http.response_code	Código de resposta HTTP.
SizeBytes	network.received_bytes	Bytes recebidos do cliente.
src_ip	principal.ip	Endereço IP do principal.
src_port	principal.port	Porta do principal.
ssl_cipher	network.tls.cipher	Criptografia TLS.
ssl_version	network.tls.version_protocol	Protocolo de versão TLS.
status	network.http.response_code	Código de resposta HTTP.
target	target.url	URL de destino.
target_ip	target.ip	Endereço IP do destino.
target_port	target.port	Porta do destino.
time	metadata.event_timestamp	Carimbo de data/hora do evento.
uri_path	target.process.file.full_path	Caminho completo do arquivo de destino.
user	principal.user.userid	ID do usuário do principal.
useragent	network.http.user_agent	User agent HTTP.
version_protocol	network.tls.version_protocol	Protocolo de versão TLS.
Workername	principal.hostname	Nome do host do principal.
x_forwarded_for		Valor do cabeçalho "X-Forwarded-For".
	metadata.log_type	O valor é definido como "APACHE" no código do analisador.
	metadata.product_name	O valor é definido como "Apache Web Server" no código do analisador.
	metadata.vendor_name	O valor é definido como "Apache" no código do analisador.
	metadata.event_type	O valor é determinado com base na presença de informações principais e de destino. Se o principal e o destino estiverem presentes, o tipo de evento será definido como "NETWORK_HTTP". Se apenas o principal estiver presente, o tipo de evento será definido como "STATUS_UPDATE". Caso contrário, ele será definido como "GENERIC_EVENT".
	additional.fields.key	A chave é definida como "keep_alive", "duration_microseconds", "cookie", "http_content_type", "sHierarchy", "scResultCode" no código do analisador com base no campo.
	target.port	Se o campo "proto" for "HTTP", a porta será definida como 80. Se o campo "proto" for "HTTPS", a porta será definida como 443. Se o campo "proto" for "FTP", a porta será definida como 21.
	target.resource.attribute.labels.key	A chave é definida como "project_id" no código do analisador.
client_ip_address	event.idm.read_only_udm.principal.ip e event.idm.read_only_udm.principal.asset.ip	Mapeado do registro de alterações
server	event.idm.read_only_udm.target.hostname e event.idm.read_only_udm.target.asset.hostname	Mapeado do registro de alterações
bytes_in	event.idm.read_only_udm.network.received_bytes	Mapeado do registro de mudanças
PHPSESSID	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
AuthToken	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
response_time_microseconds	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
hostname	event.idm.read_only_udm.intermediary.hostname	Mapeado do registro de mudanças
Filename	event.idm.read_only_udm.principal.process.file.full_path	Mapeado do registro de mudanças
kv_key	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
info	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
SourceModuleName	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
SourceModuleType	event.idm.read_only_udm.additional.fields	Mapeado do registro de alterações
src_ip	event.idm.read_only_udm.target.ip e event.idm.read_only_udm.target.asset.ip	Mapeado do registro de mudanças
tls_version	event.idm.read_only_udm.network.tls.version	Mapeado do registro de mudanças
version_protocol	event.idm.read_only_udm.network.tls.version_protocol	Mapeado do registro de mudanças
syncAccuracy	event.idm.read_only_udm.security_result.detection_fields	Mapeado do registro de mudanças
isSynced	event.idm.read_only_udm.security_result.detection_fields	Mapeado do registro de mudanças
tzKnown	event.idm.read_only_udm.additional.fields	Mapeado do registro de mudanças
user_location	principal.location.country_or_region	Mapeado do registro de mudanças
proto", "proto_version", "uri_path", and "uri_query	additional.fields	Mapeado do registro de mudanças
ip_msg	principal.ip	Mapeado do registro de mudanças
msg_method	network.http.method	Mapeado do registro de mudanças
useragentvalue	network.http.user_agent	Mapeado do registro de mudanças
bytes_out	network.sent.bytes	Mapeado do registro de mudanças
XForwardedForIP" and "RemoteHost	principal.ip	Mapeado do registro de mudanças
Remoteuser	principal.user.userid	Mapeado do registro de alterações

Registro de alterações

Confira o registro de alterações deste analisador

Precisa de mais ajuda? Receba respostas de membros da comunidade e profissionais do Google SecOps.