收集 VMware Avi 负载平衡器 WAF 日志
本文档介绍了如何使用 Bindplane 代理将 VMware Avi 负载平衡器 WAF 日志注入到 Google Security Operations。
VMware Avi 负载平衡器(以前称为 Avi Networks)是一种应用交付控制器,可为 WAF 事件、客户端连接日志和虚拟服务活动生成 syslog 消息。解析器会从 syslog 格式的日志中提取字段,并将其映射到统一数据模型 (UDM)。
准备工作
请确保满足以下前提条件:
- Google SecOps 实例
- Windows Server 2016 或更高版本,或者具有
systemd的 Linux 主机 - Bindplane 代理与 AVI 控制器之间的网络连接
- 如果通过代理运行,请确保防火墙端口已根据 Bindplane 代理要求打开
- 对 VMware AVI 负载平衡器的特权访问权限
获取 Google SecOps 注入身份验证文件
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 收集代理。
- 下载注入身份验证文件。
将文件安全地保存在将要安装 Bindplane 的系统上。
获取 Google SecOps 客户 ID
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 配置文件。
复制并保存组织详细信息部分中的客户 ID。
安装 Bindplane 代理
按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。
Windows 安装
- 以管理员身份打开命令提示符或 PowerShell。
运行以下命令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安装完成。
运行以下命令,验证安装是否成功:
sc query observiq-otel-collector该服务应显示为 RUNNING。
Linux 安装
- 打开具有 root 或 sudo 权限的终端。
运行以下命令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安装完成。
运行以下命令,验证安装是否成功:
sudo systemctl status observiq-otel-collector该服务应显示为有效(正在运行)。
其他安装资源
如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南。
配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps
找到配置文件
Linux:
sudo nano /opt/observiq-otel-collector/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
修改配置文件
将
config.yaml的全部内容替换为以下配置:receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/vmware_avinetworks_iwaf: compression: gzip creds_file_path: '/etc/bindplane-agent/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: VMWARE_AVINETWORKS_IWAF raw_log_field: body service: pipelines: logs/vmware_avinetworks_iwaf_to_chronicle: receivers: - udplog exporters: - chronicle/vmware_avinetworks_iwaf
配置参数
替换以下占位符:
接收器配置:
listen_address:要监听的 IP 地址和端口:0.0.0.0侦听所有接口(推荐)- 端口
514是标准 syslog 端口(在 Linux 上需要 root 权限;对于非 root 用户,请使用1514)
导出器配置:
creds_file_path:提取身份验证文件的完整路径:- Linux:
/etc/bindplane-agent/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
customer_id:从 Google SecOps 控制台复制的客户 IDendpoint:区域端点网址:- 美国:
malachiteingestion-pa.googleapis.com - 欧洲:
europe-malachiteingestion-pa.googleapis.com - 亚洲:
asia-southeast1-malachiteingestion-pa.googleapis.com - 如需查看完整列表,请参阅区域级端点
- 美国:
保存配置文件
- 修改后,保存文件:
- Linux:依次按
Ctrl+O、Enter和Ctrl+X - Windows:依次点击文件 > 保存
- Linux:依次按
重启 Bindplane 代理以应用更改
如需在 Linux 中重启 Bindplane 代理,请运行以下命令:
sudo systemctl restart observiq-otel-collector验证服务是否正在运行:
sudo systemctl status observiq-otel-collector检查日志是否存在错误:
sudo journalctl -u observiq-otel-collector -f
如需在 Windows 中重启 Bindplane 代理,请选择以下选项之一:
以管理员身份运行命令提示符或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector服务控制台:
- 按
Win+R,输入services.msc,然后按 Enter 键。 - 找到 observIQ OpenTelemetry 收集器。
- 右键点击并选择重新启动。
验证服务是否正在运行:
sc query observiq-otel-collector检查日志是否存在错误:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
- 按
为 VMware AVI WAF 配置外部日志记录
- 登录 AVI 控制器网页界面。
- 依次前往模板 > 配置文件 > 分析。
- 创建新分析资料,或选择现有的分析资料进行修改。
- 在修改 Analytics 配置文件界面中,选择客户端日志标签页。
- 滚动到外部日志记录部分,然后选中将日志流式传输到外部服务器复选框。
- 提供以下配置详细信息:
- 日志流式传输协议:选择 UDP。
- 默认端口:输入 514。
- 要流式传输的日志类型:选择所有日志。
- 点击服务器下方的添加按钮。
- IP 地址:输入 Bindplane 代理 IP 地址。
- 端口:输入 Bindplane 代理端口号(例如
514)。
- 点击保存。
- 将设置应用于您希望流式传输日志数据的虚拟服务。
UDM 映射表
| 日志字段 | UDM 映射 | 逻辑 |
|---|---|---|
server_name |
about.hostname |
直接映射 |
_field |
additional.fields |
已合并 |
additional_field_label |
additional.fields |
已合并 |
cacheable_label |
additional.fields |
已合并 |
compression_label |
additional.fields |
已合并 |
host_label |
additional.fields |
已合并 |
http_version_label |
additional.fields |
已合并 |
is_internal_label |
additional.fields |
已合并 |
key |
additional.fields |
映射:`"all_request_headers_pragma", "all_request_headers_accept", "all_request_headers_co... |
match_element_label |
additional.fields |
已合并 |
match_value_label |
additional.fields |
已合并 |
persistent_session_id_label |
additional.fields |
已合并 |
request_headers_label |
additional.fields |
已合并 |
request_id_label |
additional.fields |
已合并 |
response_content_type_label |
additional.fields |
已合并 |
response_headers_label |
additional.fields |
已合并 |
response_time_first_byte_label |
additional.fields |
已合并 |
response_time_last_byte_label |
additional.fields |
已合并 |
rule_log_msg_label |
additional.fields |
已合并 |
rule_log_phase_label |
additional.fields |
已合并 |
rule_log_rule_group_label |
additional.fields |
已合并 |
rule_log_rule_id_label |
additional.fields |
已合并 |
rule_log_rule_name_label |
additional.fields |
已合并 |
server_connection_reused_label |
additional.fields |
已合并 |
server_response_code_label |
additional.fields |
已合并 |
server_response_length_label |
additional.fields |
已合并 |
server_response_time_first_byte_label |
additional.fields |
已合并 |
server_response_time_last_byte_label |
additional.fields |
已合并 |
server_rtt_label |
additional.fields |
已合并 |
server_side_redirect_uri_label |
additional.fields |
已合并 |
server_ssl_session_id_label |
additional.fields |
已合并 |
servers_tried_label |
additional.fields |
已合并 |
ssl_cipher_label |
additional.fields |
已合并 |
ssl_session_id_label |
additional.fields |
已合并 |
ssl_version_label |
additional.fields |
已合并 |
tag_label |
additional.fields |
已合并 |
value_label |
additional.fields |
已合并 |
waf_log.latency_request_header_phase_label |
additional.fields |
已合并 |
waf_log_latency_request_body_phase_label |
additional.fields |
已合并 |
waf_log_latency_response_body_phase_label |
additional.fields |
已合并 |
waf_log_latency_response_header_phase_label |
additional.fields |
已合并 |
waf_log_rules_configured_label |
additional.fields |
已合并 |
waf_log_rules_executed_label |
additional.fields |
已合并 |
service_engine |
intermediary.hostname |
直接映射 |
intermediary_ip |
intermediary.ip |
已合并 |
server_src_port |
intermediary.port |
直接映射 |
report_timestamp |
metadata.event_timestamp |
解析为 ISO8601 |
timestamp |
metadata.event_timestamp |
解析为 ISO8601 |
has_principal |
metadata.event_type |
已映射:true → NETWORK_HTTP、true → NETWORK_CONNECTION、true → STATUS_UPDATE |
log_id |
metadata.product_log_id |
直接映射 |
log_id_syslog |
metadata.product_log_id |
直接映射 |
http_method |
network.http.method |
直接映射 |
method |
network.http.method |
直接映射 |
http_user_agent |
network.http.parsed_user_agent |
直接映射 |
http_referer |
network.http.referral_url |
直接映射 |
referer |
network.http.referral_url |
直接映射 |
http_status |
network.http.response_code |
直接映射 |
response_code |
network.http.response_code |
直接映射 |
http_user_agent |
network.http.user_agent |
直接映射 |
user_agent |
network.http.user_agent |
直接映射 |
http_bytes_received |
network.received_bytes |
直接映射 |
response_length |
network.received_bytes |
直接映射 |
http_bytes_sent |
network.sent_bytes |
直接映射 |
request_length |
network.sent_bytes |
直接映射 |
client_rtt |
network.session_duration.seconds |
直接映射 |
duration |
network.session_duration.seconds |
直接映射 |
server_conn_src_ip |
observer.ip |
已合并 |
client_ip |
principal.asset.ip |
已合并 |
source_ip |
principal.asset.ip |
已映射:client_ip → source_ip |
src_ip |
principal.asset.ip |
已合并 |
client_ip |
principal.ip |
已合并 |
source_ip |
principal.ip |
已映射:client_ip → source_ip |
src_ip |
principal.ip |
已合并 |
client_src_port |
principal.port |
直接映射 |
user |
principal.user.userid |
直接映射 |
request_state |
security_result.description |
直接映射 |
_field |
security_result.detection_fields |
已合并 |
waf_status_label |
security_result.detection_fields |
已合并 |
dest_ip |
target.asset.ip |
已合并 |
server_ip |
target.asset.ip |
已合并 |
vs_ip |
target.asset.ip |
已合并 |
vs_name_syslog |
target.hostname |
直接映射 |
dest_ip |
target.ip |
已合并 |
server_ip |
target.ip |
已合并 |
vs_ip |
target.ip |
已合并 |
client_dest_port |
target.port |
已重命名/已映射 |
port |
target.port |
直接映射 |
server_dest_port |
target.port |
已重命名/已映射 |
pool_label |
target.resource.attribute.labels |
已合并 |
pool_name_label |
target.resource.attribute.labels |
已合并 |
virtualservice_label |
target.resource.attribute.labels |
已合并 |
redirected_uri |
target.url |
直接映射 |
uri_query |
target.url |
直接映射 |
url |
target.url |
直接映射 |
| 不适用 | metadata.event_type |
常量:NETWORK_HTTP |
| 不适用 | metadata.product_name |
常量:AVI Load Balancer |
| 不适用 | metadata.vendor_name |
常量:Vmware |
| 不适用 | network.direction |
常量:INBOUND |
| 不适用 | network.http.parsed_user_agent |
常量:parseduseragent |
需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。