收集 Tableau 日志
本文档介绍了如何使用 Bindplane 将 Tableau 日志注入到 Google Security Operations。
Tableau 是一款商业智能和数据可视化平台,可生成用户活动、身份验证和审核日志。Tableau Server 会将日志文件存储在服务器文件系统上,因此基于文件的收集非常适合用于提取。
准备工作
请确保满足以下前提条件:
- Google SecOps 实例
- Windows Server 2016 或更高版本,或者具有
systemd的 Linux 主机 - Bindplane 代理与 Tableau Server 主机之间的网络连接
- 如果在代理后面运行,请确保防火墙端口已根据 Bindplane 代理要求打开
- 对 Tableau Server 具有管理员权限的特权访问权限
- 访问服务器文件系统上的 Tableau Server 日志文件
获取 Google SecOps 注入身份验证文件
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 收集代理。
下载数据注入身份验证文件。将该文件安全地保存在将要安装 Bindplane 的系统上。
获取 Google SecOps 客户 ID
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 配置文件。
复制并保存组织详细信息部分中的客户 ID。
安装 Bindplane 代理
按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。
Windows 安装
- 以管理员身份打开命令提示符或 PowerShell。
运行以下命令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安装完成。
运行以下命令,验证安装是否成功:
sc query observiq-otel-collector
该服务应显示为 正在运行。
Linux 安装
- 打开具有 root 或 sudo 权限的终端。
运行以下命令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安装完成。
运行以下命令,验证安装是否成功:
sudo systemctl status observiq-otel-collector
该服务应显示为有效(正在运行)。
其他安装资源
如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南。
配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps
找到配置文件
Linux:
sudo nano /etc/bindplane-agent/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
修改配置文件
将
config.yaml的全部内容替换为以下配置:receivers: filelog: include: - /var/opt/tableau/tableau_server/data/tabsvc/logs/httpd/access.*.log - /var/opt/tableau/tableau_server/data/tabsvc/logs/vizqlserver/*.log - /var/opt/tableau/tableau_server/data/tabsvc/logs/backgrounder/*.log start_at: beginning exporters: chronicle/tableau: compression: gzip creds_file_path: '/etc/bindplane-agent/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: TABLEAU raw_log_field: body ingestion_labels: env: production service: pipelines: logs/tableau_to_chronicle: receivers: - filelog exporters: - chronicle/tableau
配置参数
替换以下占位符:
接收器配置:
filelog:用于从磁盘收集日志文件的接收器类型include:要监控的文件路径或 glob 模式的列表:- Linux:
/var/opt/tableau/tableau_server/data/tabsvc/logs/ - Windows:
C:\ProgramData\Tableau\Tableau Server\data\tabsvc\logs\ - 关键日志文件包括
httpd/access.*.log(Apache 访问日志)、vizqlserver/*.log(VizQL 服务器日志)和backgrounder/*.log(后台任务日志) - 调整路径以与 Tableau Server 安装相匹配
- Linux:
start_at:设置为beginning可从头开始读取现有日志文件,设置为end可仅读取新条目
导出器配置:
tableau:导出器的描述性名称creds_file_path:提取身份验证文件的完整路径:- Linux:
/etc/bindplane-agent/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
<customer_id>:上一步中的客户 IDendpoint:区域端点网址:- 美国:
malachiteingestion-pa.googleapis.com - 欧洲:
europe-malachiteingestion-pa.googleapis.com - 亚洲:
asia-southeast1-malachiteingestion-pa.googleapis.com - 如需查看完整列表,请参阅区域级端点
- 美国:
TABLEAU:日志类型,与在 Chronicle 中显示的完全一致ingestion_labels:YAML 格式的可选标签(例如env: production)
流水线配置:
* tableau_to_chronicle:流水线的描述性名称
保存配置文件
- 修改后,保存文件:
- Linux:依次按
Ctrl+O、Enter和Ctrl+X - Windows:依次点击文件 > 保存
- Linux:依次按
重启 Bindplane 代理以应用更改
如需在 Linux 中重启 Bindplane 代理,请执行以下操作:
运行以下命令:
sudo systemctl restart observiq-otel-collector验证服务是否正在运行:
sudo systemctl status observiq-otel-collector检查日志是否存在错误:
sudo journalctl -u observiq-otel-collector -f
如需在 Windows 中重启 Bindplane 代理,请执行以下操作:
请从下列选项中选择一项:
- 以管理员身份运行命令提示符或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector- 服务控制台:
- 按
Win+R,输入services.msc,然后按 Enter 键。 - 找到 observIQ OpenTelemetry 收集器。
- 右键点击并选择重新启动。
- 按
验证服务是否正在运行:
sc query observiq-otel-collector检查日志是否存在错误:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
验证 Tableau Server 日志文件位置
- 以管理员权限登录 Tableau Server 主机。
- 验证日志文件目录:
- Linux:
/var/opt/tableau/tableau_server/data/tabsvc/logs/ - Windows:
C:\ProgramData\Tableau\Tableau Server\data\tabsvc\logs\
- Linux:
- 关键日志子目录和文件:
httpd/access.*.log:包含 HTTP 请求详细信息的 Apache 访问日志vizqlserver/*.log:包含可视化查询活动的 VizQL 服务器日志backgrounder/*.log:包含预定作业活动的后台任务日志
(可选)使用 TSM 命令行工具生成日志归档以进行验证:
tsm maintenance ziplogs -a -t -o -f tableau-logs.zip如果日志目录与默认目录不同,请更新 Bindplane 代理
config.yaml中的include路径。
UDM 映射表
| 日志字段 | UDM 映射 | 逻辑 |
|---|---|---|
| dataserver_permissions、local_dataserver、saved_credentials_viewerid、locale、server_oauth、:id、server_viewerid、dataserver_version、tablename、ElapsedTime、LastStatus、Timeszone | additional.fields | 指定字段中的合并键值对 |
| 内容 | metadata.description | 直接复制移除“_”后的值 |
| ID, RemoteHost | metadata.event_type | 如果 ID 不为空,则设置为 USER_UNCATEGORIZED;如果存在 RemoteHost,则设置为 STATUS_UPDATE;否则设置为 GENERIC_EVENT |
| 协议 | network.application_protocol | 直接复制值 |
| http_version | network.application_protocol_version | 直接复制值 |
| 方法 | network.http.method | 直接复制移除“"”后的值 |
| SizeBytes | network.received_bytes | 已转换为 uinteger |
| session_id | network.session_id | 直接复制值 |
| 工作器名称 | principal.asset.hostname | 直接复制值 |
| RemoteHost | principal.asset.ip | 直接复制值 |
| 工作器名称 | principal.hostname | 直接复制值 |
| RemoteHost | principal.ip | 直接复制值 |
| 端口 | principal.nat_port | 转换为整数 |
| ID | principal.user.product_object_id | 直接复制值 |
| RemoteUser | principal.user.userid | 如果值不为空或不是“_”,则直接复制该值 |
| logging_ctx | security_result.detection_fields | 来自 logging_ctx 的合并键值对 |
| 路径 | target.file.full_path | 直接复制值 |
| dbname | target.resource.name | 直接复制值 |
| metadata.product_name | 设置为“Tableau” | |
| metadata.vendor_name | 设置为“TABLEAU” | |
temp_user |
event.idm.read_only_udm.principal.user.userid |
从变更日志映射 |
user_name |
event.idm.read_only_udm.principal.user.userid |
从变更日志映射 |
temp_domain |
event.idm.read_only_udm.principal.administrative_domain |
从变更日志映射 |
temp_role |
event.idm.read_only_udm.principal.user.attribute.roles |
从变更日志映射 |
source_info |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
user_application |
event.idm.read_only_udm.principal.application |
从变更日志映射 |
temp_http_uri |
event.idm.read_only_udm.target.url |
从变更日志映射 |
temp_api_call |
event.idm.read_only_udm.target.url |
从变更日志映射 |
temp_site_id |
event.idm.read_only_udm.target.resource.name |
从变更日志映射 |
java_method |
event.idm.read_only_udm.target.resource.name |
从变更日志映射 |
java_class |
event.idm.read_only_udm.target.resource.type |
从变更日志映射 |
temp_http_method |
event.idm.read_only_udm.network.http.method |
从变更日志映射 |
temp_http_status |
event.idm.read_only_udm.network.http.response_code |
从变更日志映射 |
"Computer" |
event.idm.read_only_udm.principal.hostname |
从变更日志映射 |
"TimeGenerated" |
event.idm.read_only_udm.security_result.first_discovered_time |
从变更日志映射 |
"_TimeReceived" |
event.idm.read_only_udm.security_result.last_discovered_time |
从变更日志映射 |
"_IsBillable" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"_BilledSize" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"_Internal_WorkspaceResourceId" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"_ItemId" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"TenantId" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"_SubscriptionId" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"_ResourceId" |
event.idm.read_only_udm.principal.resource.id |
从变更日志映射 |
"FilePath" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"Type" |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
"temp_message" |
event.idm.read_only_udm.metadata.description |
从变更日志映射 |
"temp_logger_name" |
event.idm.read_only_udm.principal.application |
从变更日志映射 |
"temp_pid" |
event.idm.read_only_udm.principal.process.pid |
从变更日志映射 |
"temp_thread_name" |
event.idm.read_only_udm.principal.process.file.full_path |
从变更日志映射 |
"temp_log_level" |
event.idm.read_only_udm.security_result.severity |
从变更日志映射 |
appname |
event.idm.read_only_udm.metadata.product_event_type |
从变更日志映射 |
id2 |
event.idm.read_only_udm.metadata.product_log_id |
从变更日志映射 |
pid |
event.idm.read_only_udm.observer.process.pid |
从变更日志映射 |
timestamp |
event.idm.read_only_udm.metadata.event_timestamp |
从变更日志映射 |
user |
event.idm.read_only_udm.principal.user.userid |
从变更日志映射 |
id1 |
event.idm.read_only_udm.network.session_id |
从变更日志映射 |
logger |
event.idm.read_only_udm.observer.process.command_line |
从变更日志映射 |
loglevel |
event.idm.read_only_udm.security_result.severity |
从变更日志映射 |
user_id |
event.idm.read_only_udm.target.user.userid |
从变更日志映射 |
site_id |
event.idm.read_only_udm.target.resource.id |
从变更日志映射 |
message |
event.idm.read_only_udm.metadata.description |
从变更日志映射 |
script_type |
event.idm.read_only_udm.target.resource.name |
从变更日志映射 |
id3 |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
thread |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
function_name |
event.idm.read_only_udm.security_result.summary |
从变更日志映射 |
更新日志
需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。