日誌與監控¶
由於資料管道通常在沒有人工監督的情況下執行,可觀測性至關重要。
Airflow 支援多種日誌機制,並內建了一種機制用於發出指標,以便在其他下游系統中進行收集、處理和視覺化。日誌功能對於診斷資料管道執行過程中可能出現的問題至關重要。
除了標準的日誌和指標功能外,Airflow 還支援使用 Airflow 健康檢查來檢測 Airflow 本身執行中的錯誤。由於 Airflow 通常用於在生產環境中執行資料管道,因此它還支援透過與 Sentry 整合來實現即時錯誤通知。
由於資料管道通常在沒有人工監督的情況下執行,可觀測性至關重要。
Airflow 支援多種日誌機制,並內建了一種機制用於發出指標,以便在其他下游系統中進行收集、處理和視覺化。日誌功能對於診斷資料管道執行過程中可能出現的問題至關重要。
除了標準的日誌和指標功能外,Airflow 還支援使用 Airflow 健康檢查來檢測 Airflow 本身執行中的錯誤。由於 Airflow 通常用於在生產環境中執行資料管道,因此它還支援透過與 Sentry 整合來實現即時錯誤通知。