收集 Tableau 日志

支持的平台:

本文档介绍了如何使用 Bindplane 将 Tableau 日志注入到 Google Security Operations。

Tableau 是一款商业智能和数据可视化平台,可生成用户活动、身份验证和审核日志。Tableau Server 会将日志文件存储在服务器文件系统上,因此基于文件的收集非常适合用于提取。

准备工作

请确保满足以下前提条件:

  • Google SecOps 实例
  • Windows Server 2016 或更高版本,或者具有 systemd 的 Linux 主机
  • Bindplane 代理与 Tableau Server 主机之间的网络连接
  • 如果在代理后面运行,请确保防火墙端口已根据 Bindplane 代理要求打开
  • 对 Tableau Server 具有管理员权限的特权访问权限
  • 访问服务器文件系统上的 Tableau Server 日志文件

获取 Google SecOps 注入身份验证文件

  1. 登录 Google SecOps 控制台。
  2. 依次前往 SIEM 设置 > 收集代理
  3. 下载数据注入身份验证文件。将该文件安全地保存在将要安装 Bindplane 的系统上。

获取 Google SecOps 客户 ID

  1. 登录 Google SecOps 控制台。
  2. 依次前往 SIEM 设置 > 配置文件
  3. 复制并保存组织详细信息部分中的客户 ID

安装 Bindplane 代理

按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。

Windows 安装

  1. 以管理员身份打开命令提示符PowerShell
  2. 运行以下命令:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
    
  3. 等待安装完成。

  4. 运行以下命令,验证安装是否成功:

    sc query observiq-otel-collector
    

该服务应显示为 正在运行

Linux 安装

  1. 打开具有 root 或 sudo 权限的终端。
  2. 运行以下命令:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
    
  3. 等待安装完成。

  4. 运行以下命令,验证安装是否成功:

    sudo systemctl status observiq-otel-collector
    

该服务应显示为有效(正在运行)

其他安装资源

如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南

配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps

找到配置文件

  • Linux

    sudo nano /etc/bindplane-agent/config.yaml
    
  • Windows

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
    

修改配置文件

  • config.yaml 的全部内容替换为以下配置:

    receivers:
        filelog:
            include:
                - /var/opt/tableau/tableau_server/data/tabsvc/logs/httpd/access.*.log
                - /var/opt/tableau/tableau_server/data/tabsvc/logs/vizqlserver/*.log
                - /var/opt/tableau/tableau_server/data/tabsvc/logs/backgrounder/*.log
            start_at: beginning
    
    exporters:
        chronicle/tableau:
            compression: gzip
            creds_file_path: '/etc/bindplane-agent/ingestion-auth.json'
            customer_id: '<customer_id>'
            endpoint: malachiteingestion-pa.googleapis.com
            log_type: TABLEAU
            raw_log_field: body
            ingestion_labels:
                env: production
    
    service:
        pipelines:
            logs/tableau_to_chronicle:
                receivers:
                    - filelog
                exporters:
                    - chronicle/tableau
    

配置参数

替换以下占位符:

  • 接收器配置

    • filelog:用于从磁盘收集日志文件的接收器类型
    • include:要监控的文件路径或 glob 模式的列表:
      • Linux/var/opt/tableau/tableau_server/data/tabsvc/logs/
      • WindowsC:\ProgramData\Tableau\Tableau Server\data\tabsvc\logs\
      • 关键日志文件包括 httpd/access.*.log(Apache 访问日志)、vizqlserver/*.log(VizQL 服务器日志)和 backgrounder/*.log(后台任务日志)
      • 调整路径以与 Tableau Server 安装相匹配
    • start_at:设置为 beginning 可从头开始读取现有日志文件,设置为 end 可仅读取新条目
  • 导出器配置

    • tableau:导出器的描述性名称
    • creds_file_path:提取身份验证文件的完整路径:
      • Linux/etc/bindplane-agent/ingestion-auth.json
      • WindowsC:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • <customer_id>:上一步中的客户 ID
    • endpoint:区域端点网址:
      • 美国malachiteingestion-pa.googleapis.com
      • 欧洲europe-malachiteingestion-pa.googleapis.com
      • 亚洲asia-southeast1-malachiteingestion-pa.googleapis.com
      • 如需查看完整列表,请参阅区域级端点
    • TABLEAU:日志类型,与在 Chronicle 中显示的完全一致
    • ingestion_labels:YAML 格式的可选标签(例如 env: production

流水线配置: * tableau_to_chronicle:流水线的描述性名称

保存配置文件

  • 修改后,保存文件:
    • Linux:依次按 Ctrl+OEnterCtrl+X
    • Windows:依次点击文件 > 保存

重启 Bindplane 代理以应用更改

如需在 Linux 中重启 Bindplane 代理,请执行以下操作:

  1. 运行以下命令:

    sudo systemctl restart observiq-otel-collector
    
  2. 验证服务是否正在运行:

    sudo systemctl status observiq-otel-collector
    
  3. 检查日志是否存在错误:

    sudo journalctl -u observiq-otel-collector -f
    

如需在 Windows 中重启 Bindplane 代理,请执行以下操作:

  1. 请从下列选项中选择一项:

    • 以管理员身份运行命令提示符或 PowerShell:
    net stop observiq-otel-collector && net start observiq-otel-collector
    
    • 服务控制台:
      1. Win+R,输入 services.msc,然后按 Enter 键。
      2. 找到 observIQ OpenTelemetry 收集器
      3. 右键点击并选择重新启动
  2. 验证服务是否正在运行:

    sc query observiq-otel-collector
    
  3. 检查日志是否存在错误:

    type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
    

验证 Tableau Server 日志文件位置

  1. 以管理员权限登录 Tableau Server 主机。
  2. 验证日志文件目录:
    • Linux/var/opt/tableau/tableau_server/data/tabsvc/logs/
    • WindowsC:\ProgramData\Tableau\Tableau Server\data\tabsvc\logs\
  3. 关键日志子目录和文件:
    • httpd/access.*.log:包含 HTTP 请求详细信息的 Apache 访问日志
    • vizqlserver/*.log:包含可视化查询活动的 VizQL 服务器日志
    • backgrounder/*.log:包含预定作业活动的后台任务日志
  4. (可选)使用 TSM 命令行工具生成日志归档以进行验证:

    tsm maintenance ziplogs -a -t -o -f tableau-logs.zip
    
  5. 如果日志目录与默认目录不同,请更新 Bindplane 代理 config.yaml 中的 include 路径。

UDM 映射表

日志字段 UDM 映射 逻辑
dataserver_permissions、local_dataserver、saved_credentials_viewerid、locale、server_oauth、:id、server_viewerid、dataserver_version、tablename、ElapsedTime、LastStatus、Timeszone additional.fields 指定字段中的合并键值对
内容 metadata.description 直接复制移除“_”后的值
ID, RemoteHost metadata.event_type 如果 ID 不为空,则设置为 USER_UNCATEGORIZED;如果存在 RemoteHost,则设置为 STATUS_UPDATE;否则设置为 GENERIC_EVENT
协议 network.application_protocol 直接复制值
http_version network.application_protocol_version 直接复制值
方法 network.http.method 直接复制移除“"”后的值
SizeBytes network.received_bytes 已转换为 uinteger
session_id network.session_id 直接复制值
工作器名称 principal.asset.hostname 直接复制值
RemoteHost principal.asset.ip 直接复制值
工作器名称 principal.hostname 直接复制值
RemoteHost principal.ip 直接复制值
端口 principal.nat_port 转换为整数
ID principal.user.product_object_id 直接复制值
RemoteUser principal.user.userid 如果值不为空或不是“_”,则直接复制该值
logging_ctx security_result.detection_fields 来自 logging_ctx 的合并键值对
路径 target.file.full_path 直接复制值
dbname target.resource.name 直接复制值
metadata.product_name 设置为“Tableau”
metadata.vendor_name 设置为“TABLEAU”
temp_user event.idm.read_only_udm.principal.user.userid 从变更日志映射
user_name event.idm.read_only_udm.principal.user.userid 从变更日志映射
temp_domain event.idm.read_only_udm.principal.administrative_domain 从变更日志映射
temp_role event.idm.read_only_udm.principal.user.attribute.roles 从变更日志映射
source_info event.idm.read_only_udm.additional.fields 从变更日志映射
user_application event.idm.read_only_udm.principal.application 从变更日志映射
temp_http_uri event.idm.read_only_udm.target.url 从变更日志映射
temp_api_call event.idm.read_only_udm.target.url 从变更日志映射
temp_site_id event.idm.read_only_udm.target.resource.name 从变更日志映射
java_method event.idm.read_only_udm.target.resource.name 从变更日志映射
java_class event.idm.read_only_udm.target.resource.type 从变更日志映射
temp_http_method event.idm.read_only_udm.network.http.method 从变更日志映射
temp_http_status event.idm.read_only_udm.network.http.response_code 从变更日志映射
"Computer" event.idm.read_only_udm.principal.hostname 从变更日志映射
"TimeGenerated" event.idm.read_only_udm.security_result.first_discovered_time 从变更日志映射
"_TimeReceived" event.idm.read_only_udm.security_result.last_discovered_time 从变更日志映射
"_IsBillable" event.idm.read_only_udm.additional.fields 从变更日志映射
"_BilledSize" event.idm.read_only_udm.additional.fields 从变更日志映射
"_Internal_WorkspaceResourceId" event.idm.read_only_udm.additional.fields 从变更日志映射
"_ItemId" event.idm.read_only_udm.additional.fields 从变更日志映射
"TenantId" event.idm.read_only_udm.additional.fields 从变更日志映射
"_SubscriptionId" event.idm.read_only_udm.additional.fields 从变更日志映射
"_ResourceId" event.idm.read_only_udm.principal.resource.id 从变更日志映射
"FilePath" event.idm.read_only_udm.additional.fields 从变更日志映射
"Type" event.idm.read_only_udm.additional.fields 从变更日志映射
"temp_message" event.idm.read_only_udm.metadata.description 从变更日志映射
"temp_logger_name" event.idm.read_only_udm.principal.application 从变更日志映射
"temp_pid" event.idm.read_only_udm.principal.process.pid 从变更日志映射
"temp_thread_name" event.idm.read_only_udm.principal.process.file.full_path 从变更日志映射
"temp_log_level" event.idm.read_only_udm.security_result.severity 从变更日志映射
appname event.idm.read_only_udm.metadata.product_event_type 从变更日志映射
id2 event.idm.read_only_udm.metadata.product_log_id 从变更日志映射
pid event.idm.read_only_udm.observer.process.pid 从变更日志映射
timestamp event.idm.read_only_udm.metadata.event_timestamp 从变更日志映射
user event.idm.read_only_udm.principal.user.userid 从变更日志映射
id1 event.idm.read_only_udm.network.session_id 从变更日志映射
logger event.idm.read_only_udm.observer.process.command_line 从变更日志映射
loglevel event.idm.read_only_udm.security_result.severity 从变更日志映射
user_id event.idm.read_only_udm.target.user.userid 从变更日志映射
site_id event.idm.read_only_udm.target.resource.id 从变更日志映射
message event.idm.read_only_udm.metadata.description 从变更日志映射
script_type event.idm.read_only_udm.target.resource.name 从变更日志映射
id3 event.idm.read_only_udm.additional.fields 从变更日志映射
thread event.idm.read_only_udm.additional.fields 从变更日志映射
function_name event.idm.read_only_udm.security_result.summary 从变更日志映射

更新日志

查看相应解析器的更改日志

需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。