收集 Teradata 数据库日志
本文档介绍了如何使用 Bindplane 将 Teradata Database 日志注入到 Google Security Operations。
Teradata Database 是一种企业数据仓库平台,可生成查询、访问、安全审核和系统事件日志。它可为大规模本地部署提供高性能分析和数据管理。
准备工作
请确保满足以下前提条件:
- Google SecOps 实例
- Windows Server 2016 或更高版本,或者具有
systemd的 Linux 主机 - Bindplane 代理与 Teradata 数据库服务器之间的网络连接
- 如果在代理后面运行,请确保防火墙端口已根据 Bindplane 代理要求打开
- 对 Teradata Database 系统具有管理员权限的特权访问权限
获取 Google SecOps 注入身份验证文件
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 收集代理。
下载数据注入身份验证文件。将该文件安全地保存在将要安装 Bindplane 的系统上。
获取 Google SecOps 客户 ID
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 配置文件。
复制并保存组织详细信息部分中的客户 ID。
安装 Bindplane 代理
按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。
Windows 安装
- 以管理员身份打开命令提示符或 PowerShell。
运行以下命令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安装完成。
运行以下命令,验证安装是否成功:
sc query observiq-otel-collector
该服务应显示为 正在运行。
Linux 安装
- 打开具有 root 或 sudo 权限的终端。
运行以下命令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安装完成。
运行以下命令,验证安装是否成功:
sudo systemctl status observiq-otel-collector
该服务应显示为有效(正在运行)。
其他安装资源
如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南。
配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps
找到配置文件
Linux:
sudo nano /etc/bindplane-agent/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
修改配置文件
将
config.yaml的全部内容替换为以下配置:receivers: tcplog: listen_address: "0.0.0.0:514" exporters: chronicle/teradata_db: compression: gzip creds_file_path: '/etc/bindplane-agent/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: TERADATA_DB raw_log_field: body service: pipelines: logs/teradata_db_to_chronicle: receivers: - tcplog exporters: - chronicle/teradata_db
配置参数
替换以下占位符:
接收器配置:
listen_address:要监听的 IP 地址和端口:0.0.0.0侦听所有接口(推荐)- 端口
514是标准 syslog 端口(在 Linux 上需要 root 权限;对于非 root 用户,请使用1514)
导出器配置:
creds_file_path:提取身份验证文件的完整路径:- Linux:
/etc/bindplane-agent/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
customer_id:从 Google SecOps 控制台复制的客户 IDendpoint:区域端点网址:- 美国:
malachiteingestion-pa.googleapis.com - 欧洲:
europe-malachiteingestion-pa.googleapis.com - 亚洲:
asia-southeast1-malachiteingestion-pa.googleapis.com - 如需查看完整列表,请参阅区域级端点
- 美国:
保存配置文件
- 修改后,保存文件:
- Linux:依次按
Ctrl+O、Enter和Ctrl+X - Windows:依次点击文件 > 保存
- Linux:依次按
重启 Bindplane 代理以应用更改
如需在 Linux 中重启 Bindplane 代理,请执行以下操作:
运行以下命令:
sudo systemctl restart observiq-otel-collector验证服务是否正在运行:
sudo systemctl status observiq-otel-collector检查日志是否存在错误:
sudo journalctl -u observiq-otel-collector -f
如需在 Windows 中重启 Bindplane 代理,请执行以下操作:
请从下列选项中选择一项:
- 以管理员身份运行命令提示符或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector- 服务控制台:
- 按
Win+R,输入services.msc,然后按 Enter 键。 - 找到 observIQ OpenTelemetry 收集器。
- 右键点击并选择重新启动。
- 按
验证服务是否正在运行:
sc query observiq-otel-collector检查日志是否存在错误:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
配置 Teradata Database syslog 转发
- 以管理员身份登录 Teradata Database 服务器。
使用 Teradata Database Gateway 日志记录功能配置 syslog 转发。修改 rsyslog 配置文件:
sudo nano /etc/rsyslog.d/teradata.conf添加以下行,以将 Teradata 日志转发到 Bindplane 代理:
# Forward Teradata Database logs to Bindplane agent if $programname == 'teradata' then @@<bindplane-ip>:514- 将
<bindplane-ip>替换为 Bindplane 代理主机 IP 地址。
- 将
重启 rsyslog 服务:
sudo systemctl restart rsyslog通过检查 Bindplane 代理日志,验证日志是否正在发送。
UDM 映射表
| 日志字段 | UDM 映射 | 逻辑 |
|---|---|---|
| additional.fields | 合并自各种标签,例如 collect_timestamp_label、logon_date_time_label、logon_source_label、protocol_label、remote_hostname_label、logon_details_label、port_label、connection_id_label、cid_label、jdbc_driver_info_label、request_mode_label、statement_group_label、statement_type_label | |
| app_id | target.asset.product_object_id | 直接复制值 |
| client_addr | principal.asset.hostname、principal.asset.ip、principal.hostname、principal.ip | 直接将值复制到所有日期 |
| client_id | target.asset.asset_id | 串联为 CLIENT_ID:%{client_id} |
| collect_timestamp | metadata.collected_timestamp | 使用日期匹配功能(支持 RFC 3339、UNIX_MS、UNIX、ISO8601、yyyy-MM-dd HH:mm:ss 格式)进行转换 |
| default_database | target.resource.name, target.resource.resource_type | 直接复制到名称的值;针对 resource_type 设置为 DATABASE |
| error_code | network.http.response_code, additional.fields | 已转换为 response_code 的整数;已复制到 error_code_label 并合并到 additional.fields 中 |
| error_text | security_result.summary | 直接复制值 |
| host_name | principal.asset.hostname、principal.hostname | 值直接复制到两者 |
| logon_date_time | metadata.event_timestamp | 使用日期匹配功能(格式为 ISO8601、yyyy-MM-dd HH:mm:ss)进行转换 |
| logon_source | target.resource.parent | 直接复制值 |
| logon_source | additional.fields | 使用 grok 提取 logonSource,然后在 logon_source_label 中将其设置为 %{logonSource}LSS,合并到 additional.fields 中 |
| logon_source | additional.fields | 使用 grok 提取了 protocol、remote_hostname、port、logon_details、connection_id、cid、jdbc_driver_info,然后将它们设置在合并到 additional.fields 中的相应标签中 |
| proc_id | target.resource.id | 直接复制值 |
| profile_name | target.resource.attribute.labels | 在 profile_name_label 中设置,合并到 attribute.labels 中 |
| query_text | target.process.command_line | 直接复制值 |
| request_mode | target.resource.resource_subtype, additional.fields | 直接复制到 resource_subtype 的值;在合并到 additional.fields 中的 request_mode_label 中设置 |
| session_id | network.session_id | 直接复制值 |
| statement_group | principal.user.groupid, additional.fields | 直接复制到 groupid 的值;在合并到 additional.fields 中的 statement_group_label 中设置 |
| statement_type | security_result.about.labels, additional.fields | 在合并到 about.labels 中的 statementtype_value_label 中设置;在合并到 additional.fields 中的 statement_type_label 中设置 |
| ts | metadata.event_timestamp | 使用日期匹配功能转换,支持的格式包括 MMM d HH:mm:ss、MMM dd HH:mm:ss、SYSLOGTIMESTAMP、RFC 3339、UNIX、ISO8601、UNIX_MS |
| tt_granularity | target.resource.product_object_id | 直接复制值 |
| user_id | principal.user.userid | 直接复制值 |
| user_name | principal.user.user_display_name | 直接复制值 |
| metadata.event_type | 如果 has_principal、has_principal_user、has_target_resource 为 true,则设置为 USER_RESOURCE_ACCESS;否则,如果 has_principal 为 true,则设置为 STATUS_UPDATE;否则,设置为 GENERIC_EVENT | |
| metadata.product_name | 设置为“TERADATA_DB” | |
| metadata.vendor_name | 设置为“TERADATA” | |
profile_name |
event.idm.read_only_udm.target.resource.attribute.labels |
从变更日志映射 |
proc_id |
event.idm.read_only_udm.target.resource.id |
从变更日志映射 |
user_id |
event.idm.read_only_udm.principal.user.userid |
从变更日志映射 |
collect_timestamp |
event.idm.read_only_udm.metadata.collected_timestamp |
从变更日志映射 |
logon_date_time |
event.idm.read_only_udm.metadata.event_timestamp |
从变更日志映射 |
user_name |
event.idm.read_only_udm.principal.user.user_display_name |
从变更日志映射 |
logon_source |
event.idm.read_only_udm.target.resource.parent |
从变更日志映射 |
app_id |
event.idm.read_only_udm.target.asset.product_object_id |
从变更日志映射 |
client_id |
event.idm.read_only_udm.target.asset.asset_id |
从变更日志映射 |
error_code |
event.idm.read_only_udm.network.http.response_code |
从变更日志映射 |
statement_type |
event.idm.read_only_udm.security_result.about.labels |
从变更日志映射 |
statement_group |
event.idm.read_only_udm.principal.user.groupid |
从变更日志映射 |
request_mode |
event.idm.read_only_udm.target.resource.resource_subtype |
从变更日志映射 |
tt_granularity |
event.idm.read_only_udm.target.resource.product_object_id |
从变更日志映射 |
protocol |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
remote_hostname |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
logon_details |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
connection_id |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
port |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
cid |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
jdbc_driver_info |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
app_id |
principal.application |
从变更日志映射 |
collect_timestamp |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
error_code |
security_result.detection_fields |
从变更日志映射 |
logon_date_time |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
logon_source |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
proc_id |
principal.process.pid |
从变更日志映射 |
request_mode |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
statement_group |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
statement_type |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
user_id |
target.user.userid |
从变更日志映射 |
user_name |
target.user.user_display_name |
从变更日志映射 |
更新日志
需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。