收集 Progress MOVEit Transfer 記錄
本文說明如何使用 Bindplane,將 Progress MOVEit Transfer 記錄檔擷取至 Google Security Operations。
Progress MOVEit Transfer 是一種代管檔案傳輸 (MFT) 解決方案,可透過 HTTPS、FTPS 和 SFTP 等通訊協定,安全地傳輸加密檔案。提供防竄改稽核記錄、以角色為基礎的存取控制,以及 HIPAA、PCI DSS 和 GDPR 等法規遵循支援。MOVEit Transfer 會在稽核資料庫中記錄所有檔案傳輸活動、使用者驗證事件和管理動作。
事前準備
請確認您符合下列必要條件:
- Google SecOps 執行個體
- Windows Server 2016 以上版本,或搭載
systemd的 Linux 主機 - Bindplane 代理程式與 Progress MOVEit Transfer 伺服器之間的網路連線
- 如果是在 Proxy 後方執行,請確認防火牆通訊埠已按照 Bindplane 代理程式規定開啟
- Progress MOVEit Transfer 網頁管理控制台的 SysAdmin 級存取權
- 從 MOVEit Transfer 伺服器到 Bindplane 代理程式主機,開啟 UDP 通訊埠 514 (或所選系統記錄通訊埠)
取得 Bindplane 代理程式的 Google SecOps 憑證
如要向 Google SecOps 驗證 Bindplane 代理程式,請選擇下列其中一種方法:
- 新部署作業:使用 Chronicle API (選項 1)。
- 舊版部署作業:繼續使用擷取驗證檔案 (選項 2),直到 Ingestion API 於 2027 年 7 月 20 日停用。
方法 1:為 Chronicle API 建立服務帳戶 (建議)
- 登入 Google Cloud 控制台,然後選取連結至 Google SecOps 執行個體的 Google Cloud 專案。
- 依序前往「IAM & Admin」(IAM 與管理) >「Service Accounts」(服務帳戶)。
- 按一下「建立服務帳戶」。
- 提供下列設定詳細資料:
- 服務帳戶名稱:輸入帳戶名稱 (例如
bindplane-ingest)。 - 「服務帳戶說明」:輸入說明 (例如
Bindplane agent log ingestion)。
- 服務帳戶名稱:輸入帳戶名稱 (例如
- 點按「Create and continue」(建立並繼續)。
- 在「將專案存取權授予這個服務帳戶」部分,按一下「選取角色」,然後選取「Chronicle 編輯者」。
- 依序點選「繼續」和「完成」。
- 按一下您建立的服務帳戶,然後前往「金鑰」分頁。
- 依序點選「新增金鑰」>「建立新的金鑰」。
- 選取「JSON」,然後按一下「建立」。金鑰檔案會下載到電腦。
- 將金鑰檔案儲存為 Bindplane 收集器目錄中的
ingestion-auth.json(Linux 為/opt/observiq-otel-collector/ingestion-auth.json,Windows 為C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json),或更新config.yaml中的creds_file_path,使其與儲存檔案的路徑相符。 - 依序前往「IAM & Admin」(IAM 與管理) >「Settings」(設定),然後複製「Project number」(專案編號)。匯出工具設定時會用到。
方法 2:下載擷取驗證檔案 (舊版)
- 登入 Google SecOps 控制台。
- 依序前往「SIEM Settings」 > 「Collection Agents」。
- 下載擷取驗證檔案。
- 將檔案安全地儲存在要安裝 Bindplane 代理程式的系統上。
取得 Google SecOps 客戶 ID
- 登入 Google SecOps 控制台。
- 依序前往「SIEM 設定」 > 「設定檔」。
- 複製並儲存「機構詳細資料」部分的客戶 ID。
安裝 Bindplane 代理程式
請按照下列操作說明,在 Windows 或 Linux 作業系統上安裝 Bindplane 代理程式。
Windows 安裝
- 以管理員身分開啟「命令提示字元」或「PowerShell」。
執行下列指令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安裝完成。
執行下列指令,確認安裝成功:
sc query observiq-otel-collector服務應顯示為「RUNNING」。
安裝 Linux
- 開啟具有 root 或 sudo 權限的終端機。
執行下列指令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安裝完成。
執行下列指令,確認安裝成功:
sudo systemctl status observiq-otel-collector服務應顯示為「active (running)」。
其他安裝資源
如需其他安裝選項和疑難排解資訊,請參閱 Bindplane 代理程式安裝指南。
設定 Bindplane 代理程式,擷取系統記錄並傳送至 Google SecOps
找出設定檔
Linux:
sudo nano /opt/observiq-otel-collector/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
編輯設定檔
將
config.yaml的全部內容替換為下列設定:receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/moveit_transfer: protocol: https # Region of your instance, for example us, europe, asia-southeast1 location: <LOCATION> # Project number of the Google Cloud project linked to the instance project: '<PROJECT_NUMBER>' compression: gzip creds_file_path: '<CREDS_FILE_PATH>' customer_id: '<CUSTOMER_ID>' endpoint: chronicle.googleapis.com log_type: IPSWITCH_MOVEIT_TRANSFER raw_log_field: body ingestion_labels: log_source: moveit_transfer service: pipelines: logs/moveit_to_chronicle: receivers: - udplog exporters: - chronicle/moveit_transfer
設定參數
請替換下列預留位置。
Exporter 設定:
<CREDS_FILE_PATH>:服務帳戶 JSON 金鑰檔案的完整路徑 (選項 1):- Linux:
/opt/observiq-otel-collector/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
<CUSTOMER_ID>:先前複製的 Google SecOps 客戶 IDlocation:將<LOCATION>替換為 Google SecOps 執行個體的區域 (例如us、europe或asia-southeast1)。匯出工具會在這個值前面加上chronicle.googleapis.com。如需完整清單,請參閱「區域性端點」。project:依序前往「IAM 與管理」>「設定」,然後將<PROJECT_NUMBER>替換為專案編號。endpoint:維持設為chronicle.googleapis.com。設定範例
receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/moveit_transfer: protocol: https # Region of your instance, for example us, europe, asia-southeast1 location: <LOCATION> # Project number of the Google Cloud project linked to the instance project: '<PROJECT_NUMBER>' compression: gzip creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json' customer_id: 'a1b2c3d4-e5f6-g7h8-i9j0-k1l2m3n4o5p6' endpoint: chronicle.googleapis.com log_type: IPSWITCH_MOVEIT_TRANSFER raw_log_field: body ingestion_labels: log_source: moveit_transfer service: pipelines: logs/moveit_to_chronicle: receivers: - udplog exporters: - chronicle/moveit_transfer
舊版 Ingestion API 匯出工具
如果您使用選項 2 的擷取驗證檔案,請將
exporters區塊替換為下列內容。將creds_file_path設為擷取驗證檔案的路徑,如果您的執行個體位於美國境外,請將malachiteingestion-pa.googleapis.com替換為區域端點 (例如europe-malachiteingestion-pa.googleapis.com)。exporters: chronicle/moveit_transfer: compression: gzip creds_file_path: '<CREDS_FILE_PATH>' customer_id: '<CUSTOMER_ID>' endpoint: malachiteingestion-pa.googleapis.com log_type: IPSWITCH_MOVEIT_TRANSFER raw_log_field: body ingestion_labels: log_source: moveit_transfer
儲存設定檔
編輯完成後,請儲存檔案:
* Linux:依序按下 Ctrl+O、Enter 和 Ctrl+X
* Windows:依序點選「檔案」>「儲存」
重新啟動 Bindplane 代理程式,套用變更
如要在 Linux 重新啟動 Bindplane 代理程式,請按照下列步驟操作:
執行下列指令:
sudo systemctl restart observiq-otel-collector確認服務正在執行:
sudo systemctl status observiq-otel-collector查看記錄檔是否有錯誤:
sudo journalctl -u observiq-otel-collector -f
如要在 Windows 重新啟動 Bindplane 代理程式,請按照下列步驟操作:
您可以選擇下列其中一個選項:
以管理員身分開啟命令提示字元或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector服務控制台:
- 按下
Win+R鍵,輸入services.msc,然後按下 Enter 鍵。 - 找出「observIQ OpenTelemetry Collector」。
- 按一下滑鼠右鍵,然後選取「重新啟動」。
確認服務是否正在執行:
sc query observiq-otel-collector檢查記錄是否有錯誤:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
- 按下
設定 Progress MOVEit Transfer 系統記錄轉送
如要設定 MOVEit Transfer,透過 syslog 將稽核記錄項目轉送至 Bindplane 代理程式,請按照下列步驟操作:
- 以具備 SysAdmin 權限的使用者身分,登入 MOVEit Transfer 網頁管理控制台。
- 依序前往「設定」>「系統」>「稽核」>「系統記錄」。系統會顯示「Configure Syslog Settings」(設定系統記錄設定) 頁面。
- 在「Syslog Logging」(系統記錄記錄) 部分,選取「Enabled」(已啟用)。啟用後,每筆稽核記錄項目都會傳送至指定的系統記錄主機,以及 MOVEit Transfer 稽核資料庫。
- 在「Syslog Host」(系統記錄主機) 欄位中,輸入 Bindplane 代理程式主機的 IP 位址或主機名稱 (例如
192.168.1.100)。 在「Syslog Port」(系統記錄通訊埠) 欄位中輸入
514。如果留空,系統會還原為預設通訊埠514。在「Syslog Facility」下拉式選單中,選取 MOVEit Transfer 系統記錄訊息在遠端系統記錄主機上顯示的設施。預設值為 FTP。可用的標準 syslog 設施如下:
- KERN
- 使用者
- DAEMON
- AUTH
- SYSLOG
- LPR
- 最新資訊
- UUCP
- CRON
- AUTHPRIV
- FTP (預設)
- LOCAL0 到 LOCAL7
按一下「變更記錄設定」,儲存設定。
按一下「Send Test Syslog Message」,將測試訊息傳送至指定的 Bindplane 代理程式主機。由於 BSD Syslog 實作是以 UDP 為基礎,因此請檢查 Bindplane 代理程式記錄,手動確認測試訊息是否已送達。
確認 Bindplane 代理程式已收到測試訊息:
Linux:
sudo journalctl -u observiq-otel-collector -fWindows:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
防火牆需求
請確認已設定下列防火牆規則,允許 Syslog 流量從 MOVEit Transfer 傳送至 Bindplane 代理程式:
| 方向 | 通訊協定 | 來源 | 目的地 | 通訊埠 |
|---|---|---|---|---|
| 從 MOVEit Transfer 傳出 | UDP | MOVEit Transfer 伺服器 IP | Bindplane 代理程式主機 IP | 514 |
UDM 對應表
| 記錄欄位 | UDM 對應 | 邏輯 |
|---|---|---|
| 第 1 欄 | metadata.collected_timestamp | 已使用日期比對模式轉換:d/M/yyyy H:mm:ss A、M/d/yyyy H:mm:ss A、MM/dd/yyyy HH:mm:ss A |
| 第 1 欄 | metadata.event_timestamp | 使用日期比對模式轉換:d/M/yyyy H:mm:ss A、M/d/yyyy H:mm:ss A、MM/dd/yyyy HH:mm:ss A |
| 第 2 欄 | security_result.action_details | 直接複製值 |
| 第 3 欄 | target.hostname、target.asset.hostname | 直接從 column3 複製的值 |
| column4 | principal.ip、principal.asset.ip | 使用 IP 的 grok 模式從 column4 擷取 |
| column6 | target.file.full_path | 如果 folderPath 和 fileName 都存在,則會從兩者串連,否則只會從 fileName 串連 |
| column7 | target.file.full_path | |
| column15 | target.file.full_path | |
| column7 | target.user.email_addresses | 如果 column2 == file_sentemail,則合併 |
| column10 | metadata.description | 直接複製值 |
| column11 | metadata.product_event_type | 如果不是 None,則直接複製值 |
| column12 | target.ip、target.asset.ip | 使用 IP 的 Grok 模式從第 12 欄擷取 |
| column16 | target.file.full_path | 如果 folderPath 和 fileName 同時存在,則串連兩者;否則只使用 fileName |
| column23 | target.file.full_path | |
| column19 | target.user.user_display_name | 如果 column2 == file_sentemail 且 column8 == sender,則直接複製值,否則為目標使用者 |
| event_received_time | metadata.collected_timestamp | 使用日期比對模式轉換:UNIX_MS、dd/MM/yyyy HH:mm:ss、yyyy-MM-dd HH:mm:ss、MM/dd/yyyy HH:mm:ss A、yyyy/MM/dd HH:mm:ss、RFC 3339、yyyy-MM-ddTHH:mm:ss |
| 時間戳記 | metadata.event_timestamp | 使用日期比對模式轉換:MMM d HH:mm:ss、MMM dd HH:mm:ss、ISO8601、yyyy-MM-dd HH:mm:ss、yyyy-MM-dd HH:mm:ss Z、MM/dd/yyyy HH:mm:ss A、yy-MM-dd HH:mm:ss、RFC 3339、yyyy-MM-ddTHH:mm:ss |
| prin_ip | principal.ip、principal.asset.ip | 直接複製值 |
| AgentVersion | metadata.product_version | 直接複製值 |
| principal_host | principal.hostname、principal.asset.hostname | 直接複製值 |
| 使用者名稱 | principal.user.userid | 直接複製值 |
| company_name | principal.user.company_name | 直接複製值 |
| ID | target.process.pid | 直接複製值 |
| InstID | metadata.product_log_id | 直接複製值 |
| FileID | target.resource.attribute.labels | 合併為 additional_id_2,鍵為 FileID,值來自 FileID |
| FolderID | target.resource.attribute.labels | 合併為 additional_id_3,鍵為 FolderID,值來自 FolderID |
| FolderPath | target.file.full_path | 如果 FolderPath 和 FileName 同時存在,則由兩者串連而成,否則由 FolderPath 串連而成 |
| FileName | target.file.full_path | |
| FileName | target.resource.attribute.labels | 合併為 filename,鍵為 FileName,值來自 FileName |
| 主機 | principal.hostname、principal.asset.hostname | 直接複製值 |
| log_level | security_result.severity | 如果為 INFO 或 DEBUG,則設為 INFORMATIONAL;如果為 ERROR,則設為 ERROR |
| source_module_name | observer.resource.attribute.labels | 合併為 source_module_label,並以 source_module_name 做為鍵,以 source_module_name 做為值 |
| source_module_type | observer.application | 直接複製值 |
| log_msg | metadata.description | 如果 http_method != GET 且 file_path 為空白,則為 log_msg 的值,否則為 log_desc,否則為 description,否則為 Message |
| log_desc | metadata.description | |
| 說明 | metadata.description | |
| 訊息 | metadata.description | |
| 通訊埠 | principal.port | 直接複製值,轉換為整數 |
| tgtport | target.port | 直接複製值,轉換為整數 |
| 套件 | principal.process.command_line | 直接複製值 |
| srcip | principal.ip、principal.asset.ip | 直接複製值 |
| 使用者名稱 | principal.user.userid | 直接複製值 |
| 版本 | metadata.product_version | 直接複製值 |
| http_method | network.http.method | 直接複製值 |
| 動作 | security_result.action_details | 直接複製值 |
| 摘要 | security_result.summary | 直接複製值 |
| security_result | security_result | 直接合併 |
| tgtip | target.ip、target.asset.ip | 直接複製值 |
| application_proto | network.application_protocol | 直接複製並轉換為大寫 |
| 網址 | network.http.referral_url | 直接複製值 |
| status_code | network.http.response_code | 直接複製值,轉換為整數 |
| file_path | principal.process.file.full_path | 直接複製值 |
| file_size | principal.process.file.size | 如果不是 0,則轉換為 uinteger |
| process_id | principal.process.pid | 直接複製值 |
| session_id | network.session_id | 直接複製值 |
| task_id | additional.fields | 合併為 additional_field,鍵為 TASK_ID,string_value 來自 task_id |
| AgentBrand | metadata.product_event_type | 直接複製值 |
| Parm1 | additional.fields | 合併為 additional_field_3,鍵為 Parm1,string_value 來自 Parm1 |
| Parm2 | additional.fields | 合併為 additional_field_4,鍵為 Parm2,string_value 來自 Parm2 |
| 錯誤 | additional.fields | 合併為 additional_field_5,鍵為 Error,string_value 來自 Error |
| XFerSize | target.resource.attribute.labels | 合併為 additional_field_1,鍵為 XFerSize,值來自 XFerSize |
| FolderPath | metadata.event_type | 如果 FolderPath 和 action_performed 符合「刪除檔案」,請設為 FILE_DELETION;如果 tgtip 或 host 和 application_proto == HTTP,請設為 NETWORK_HTTP;如果 Username 或 username,請設為 USER_LOGIN;如果 tgtip 或 host 或 principal_host 或 IPAddress,請設為 STATUS_UPDATE;否則請設為 GENERIC_EVENT |
| tgtip | metadata.event_type | |
| 主機 | metadata.event_type | |
| principal_host | metadata.event_type | |
| IPAddress | metadata.event_type | |
| 使用者名稱 | metadata.event_type | |
| 使用者名稱 | metadata.event_type | |
| tgtip | metadata.event_type | 如果 column2 == sec_signon 且 tgtip 或 tar_host,則設為 USER_LOGIN;如果 sec_signoff 且 tgtip 或 tar_host,則設為 USER_LOGOUT;如果 folder_add,則設為 FILE_UNCATEGORIZED;如果 file_upload 或 download 且 tgtip 和 is_tgt_file_present,則設為 FILE_CREATION;如果 file_delete 且 srcip 和 is_tgt_file_present,則設為 FILE_DELETION;如果 file_rename,則設為 FILE_MODIFICATION;如果 file_dlhashchk,則設為 FILE_UNCATEGORIZED;如果 file_sentemail 且 useremail,則設為 EMAIL_TRANSACTION;如果 srcip,則設為 STATUS_UPDATE,否則設為 GENERIC_EVENT |
| tar_host | metadata.event_type | |
| srcip | metadata.event_type | |
| is_tgt_file_present | metadata.event_type | |
| 第 2 欄 | metadata.event_type | |
| useremail | metadata.event_type | |
| security_result | metadata.event_type | |
| extensions.auth.type | extensions.auth.type | 登入/登出事件請設為 MACHINE |
| metadata.vendor_name | metadata.vendor_name | 設為「IPS」 |
| metadata.product_name | metadata.product_name | 設為「IPSWITCH MOVEIT TRANSFER」 |
target_application |
event.idm.read_only_udm.target.application |
從變更記錄對應 |
product_event |
event.idm.read_only_udm.metadata.product_event_type |
從變更記錄對應 |
dstip |
event.idm.read_only_udm.target.ip 和 event.idm.read_only_udm.target.asset.ip |
從變更記錄對應 |
AdminTrust |
event.idm.read_only_udm.additional.fields |
從變更記錄對應 |
Permission |
event.idm.read_only_udm.additional.fields |
從變更記錄對應 |
log_status |
event.idm.read_only_udm.security_result.action.details |
從變更記錄對應 |
srcip |
event.idm.read_only_udm.principal.ip 和 event.idm.read_only_udm.principal.asset.ip |
從變更記錄對應 |
EventReceivedTime |
event.timestamp |
從變更記錄對應 |
SourceModuleName |
observer.resource.attribute.labels |
從變更記錄對應 |
SourceModuleType |
observer.application |
從變更記錄對應 |
SourceName |
metadata.product_event_type |
從變更記錄對應 |
Severity |
security_result. |
從變更記錄對應 |
Hostname |
principal.hostname |
從變更記錄對應 |
Channel |
security_result.about.resource.attribute.labels |
從變更記錄對應 |
AgentVersion |
metadata.version |
從變更記錄對應 |
變更記錄
還有其他問題嗎?向社群成員和 Google SecOps 專家尋求解答。