收集 VMware Avi 负载平衡器 WAF 日志

支持的平台:

本文档介绍了如何使用 Bindplane 代理将 VMware Avi 负载平衡器 WAF 日志注入到 Google Security Operations。

VMware Avi 负载平衡器(以前称为 Avi Networks)是一种应用交付控制器,可为 WAF 事件、客户端连接日志和虚拟服务活动生成 syslog 消息。解析器会从 syslog 格式的日志中提取字段,并将其映射到统一数据模型 (UDM)。

准备工作

请确保满足以下前提条件:

  • Google SecOps 实例
  • Windows Server 2016 或更高版本,或者具有 systemd 的 Linux 主机
  • Bindplane 代理与 AVI 控制器之间的网络连接
  • 如果通过代理运行,请确保防火墙端口已根据 Bindplane 代理要求打开
  • 对 VMware AVI 负载平衡器的特权访问权限

获取 Google SecOps 注入身份验证文件

  1. 登录 Google SecOps 控制台。
  2. 依次前往 SIEM 设置 > 收集代理
  3. 下载注入身份验证文件
  4. 将文件安全地保存在将要安装 Bindplane 的系统上。

获取 Google SecOps 客户 ID

  1. 登录 Google SecOps 控制台。
  2. 依次前往 SIEM 设置 > 配置文件
  3. 复制并保存组织详细信息部分中的客户 ID

安装 Bindplane 代理

按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。

Windows 安装

  1. 以管理员身份打开命令提示符PowerShell
  2. 运行以下命令:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
    
  3. 等待安装完成。

  4. 运行以下命令,验证安装是否成功:

    sc query observiq-otel-collector
    

    该服务应显示为 RUNNING

Linux 安装

  1. 打开具有 root 或 sudo 权限的终端。
  2. 运行以下命令:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
    
  3. 等待安装完成。

  4. 运行以下命令,验证安装是否成功:

    sudo systemctl status observiq-otel-collector
    

    该服务应显示为有效(正在运行)

其他安装资源

如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南

配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps

找到配置文件

  • Linux

    sudo nano /opt/observiq-otel-collector/config.yaml
    
  • Windows

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
    

修改配置文件

  • config.yaml 的全部内容替换为以下配置:

    receivers:
        udplog:
            listen_address: "0.0.0.0:514"
    
    exporters:
        chronicle/vmware_avinetworks_iwaf:
            compression: gzip
            creds_file_path: '/etc/bindplane-agent/ingestion-auth.json'
            customer_id: '<customer_id>'
            endpoint: malachiteingestion-pa.googleapis.com
            log_type: VMWARE_AVINETWORKS_IWAF
            raw_log_field: body
    
    service:
        pipelines:
            logs/vmware_avinetworks_iwaf_to_chronicle:
                receivers:
                    - udplog
                exporters:
                    - chronicle/vmware_avinetworks_iwaf
    

配置参数

替换以下占位符:

  • 接收器配置

    • listen_address:要监听的 IP 地址和端口:
      • 0.0.0.0 侦听所有接口(推荐)
      • 端口 514 是标准 syslog 端口(在 Linux 上需要 root 权限;对于非 root 用户,请使用 1514
  • 导出器配置

    • creds_file_path:提取身份验证文件的完整路径:
      • Linux/etc/bindplane-agent/ingestion-auth.json
      • WindowsC:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • customer_id:从 Google SecOps 控制台复制的客户 ID
    • endpoint:区域端点网址:
      • 美国malachiteingestion-pa.googleapis.com
      • 欧洲europe-malachiteingestion-pa.googleapis.com
      • 亚洲asia-southeast1-malachiteingestion-pa.googleapis.com
      • 如需查看完整列表,请参阅区域级端点

保存配置文件

  • 修改后,保存文件:
    • Linux:依次按 Ctrl+OEnterCtrl+X
    • Windows:依次点击文件 > 保存

重启 Bindplane 代理以应用更改

  • 如需在 Linux 中重启 Bindplane 代理,请运行以下命令:

    sudo systemctl restart observiq-otel-collector
    
    1. 验证服务是否正在运行:

      sudo systemctl status observiq-otel-collector
      
    2. 检查日志是否存在错误:

      sudo journalctl -u observiq-otel-collector -f
      
  • 如需在 Windows 中重启 Bindplane 代理,请选择以下选项之一:

    • 以管理员身份运行命令提示符或 PowerShell:

      net stop observiq-otel-collector && net start observiq-otel-collector
      
    • 服务控制台:

      1. Win+R,输入 services.msc,然后按 Enter 键。
      2. 找到 observIQ OpenTelemetry 收集器
      3. 右键点击并选择重新启动
      4. 验证服务是否正在运行:

        sc query observiq-otel-collector
        
      5. 检查日志是否存在错误:

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
        

为 VMware AVI WAF 配置外部日志记录

  1. 登录 AVI 控制器网页界面。
  2. 依次前往模板 > 配置文件 > 分析
  3. 创建分析资料,或选择现有的分析资料进行修改。
  4. 修改 Analytics 配置文件界面中,选择客户端日志标签页。
  5. 滚动到外部日志记录部分,然后选中将日志流式传输到外部服务器复选框。
  6. 提供以下配置详细信息:
    • 日志流式传输协议:选择 UDP
    • 默认端口:输入 514
    • 要流式传输的日志类型:选择所有日志
    • 点击服务器下方的添加按钮。
    • IP 地址:输入 Bindplane 代理 IP 地址。
    • 端口:输入 Bindplane 代理端口号(例如 514)。
  7. 点击保存
  8. 将设置应用于您希望流式传输日志数据的虚拟服务。

UDM 映射表

日志字段 UDM 映射 逻辑
server_name about.hostname 直接映射
_field additional.fields 已合并
additional_field_label additional.fields 已合并
cacheable_label additional.fields 已合并
compression_label additional.fields 已合并
host_label additional.fields 已合并
http_version_label additional.fields 已合并
is_internal_label additional.fields 已合并
key additional.fields 映射:`"all_request_headers_pragma", "all_request_headers_accept", "all_request_headers_co...
match_element_label additional.fields 已合并
match_value_label additional.fields 已合并
persistent_session_id_label additional.fields 已合并
request_headers_label additional.fields 已合并
request_id_label additional.fields 已合并
response_content_type_label additional.fields 已合并
response_headers_label additional.fields 已合并
response_time_first_byte_label additional.fields 已合并
response_time_last_byte_label additional.fields 已合并
rule_log_msg_label additional.fields 已合并
rule_log_phase_label additional.fields 已合并
rule_log_rule_group_label additional.fields 已合并
rule_log_rule_id_label additional.fields 已合并
rule_log_rule_name_label additional.fields 已合并
server_connection_reused_label additional.fields 已合并
server_response_code_label additional.fields 已合并
server_response_length_label additional.fields 已合并
server_response_time_first_byte_label additional.fields 已合并
server_response_time_last_byte_label additional.fields 已合并
server_rtt_label additional.fields 已合并
server_side_redirect_uri_label additional.fields 已合并
server_ssl_session_id_label additional.fields 已合并
servers_tried_label additional.fields 已合并
ssl_cipher_label additional.fields 已合并
ssl_session_id_label additional.fields 已合并
ssl_version_label additional.fields 已合并
tag_label additional.fields 已合并
value_label additional.fields 已合并
waf_log.latency_request_header_phase_label additional.fields 已合并
waf_log_latency_request_body_phase_label additional.fields 已合并
waf_log_latency_response_body_phase_label additional.fields 已合并
waf_log_latency_response_header_phase_label additional.fields 已合并
waf_log_rules_configured_label additional.fields 已合并
waf_log_rules_executed_label additional.fields 已合并
service_engine intermediary.hostname 直接映射
intermediary_ip intermediary.ip 已合并
server_src_port intermediary.port 直接映射
report_timestamp metadata.event_timestamp 解析为 ISO8601
timestamp metadata.event_timestamp 解析为 ISO8601
has_principal metadata.event_type 已映射:trueNETWORK_HTTPtrueNETWORK_CONNECTIONtrueSTATUS_UPDATE
log_id metadata.product_log_id 直接映射
log_id_syslog metadata.product_log_id 直接映射
http_method network.http.method 直接映射
method network.http.method 直接映射
http_user_agent network.http.parsed_user_agent 直接映射
http_referer network.http.referral_url 直接映射
referer network.http.referral_url 直接映射
http_status network.http.response_code 直接映射
response_code network.http.response_code 直接映射
http_user_agent network.http.user_agent 直接映射
user_agent network.http.user_agent 直接映射
http_bytes_received network.received_bytes 直接映射
response_length network.received_bytes 直接映射
http_bytes_sent network.sent_bytes 直接映射
request_length network.sent_bytes 直接映射
client_rtt network.session_duration.seconds 直接映射
duration network.session_duration.seconds 直接映射
server_conn_src_ip observer.ip 已合并
client_ip principal.asset.ip 已合并
source_ip principal.asset.ip 已映射:client_ipsource_ip
src_ip principal.asset.ip 已合并
client_ip principal.ip 已合并
source_ip principal.ip 已映射:client_ipsource_ip
src_ip principal.ip 已合并
client_src_port principal.port 直接映射
user principal.user.userid 直接映射
request_state security_result.description 直接映射
_field security_result.detection_fields 已合并
waf_status_label security_result.detection_fields 已合并
dest_ip target.asset.ip 已合并
server_ip target.asset.ip 已合并
vs_ip target.asset.ip 已合并
vs_name_syslog target.hostname 直接映射
dest_ip target.ip 已合并
server_ip target.ip 已合并
vs_ip target.ip 已合并
client_dest_port target.port 已重命名/已映射
port target.port 直接映射
server_dest_port target.port 已重命名/已映射
pool_label target.resource.attribute.labels 已合并
pool_name_label target.resource.attribute.labels 已合并
virtualservice_label target.resource.attribute.labels 已合并
redirected_uri target.url 直接映射
uri_query target.url 直接映射
url target.url 直接映射
不适用 metadata.event_type 常量:NETWORK_HTTP
不适用 metadata.product_name 常量:AVI Load Balancer
不适用 metadata.vendor_name 常量:Vmware
不适用 network.direction 常量:INBOUND
不适用 network.http.parsed_user_agent 常量:parseduseragent

需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。