Apache HDFS 連線¶

Apache HDFS 連線型別支援連線到 Apache HDFS。

預設連線 ID¶

Web HDFS Hook 使用引數 webhdfs_conn_id 作為連線 ID，預設情況下其值為 webhdfs_default。

主機

要連線的主機，可以是 local、yarn 或一個 URL。對於 Web HDFS Hook，可以指定多個主機，用逗號分隔。

埠

如果主機是 URL，請指定埠。

登入

HDFS 操作的有效使用者（非 Kerberos 認證）。

額外（可選，連線引數）

指定可在 Web HDFS 連線中使用的額外引數（以 json 字典形式）。以下額外引數可用於為 Web HDFS Hook 配置 SSL。

use_ssl - 是否應使用 SSL。預設設定為 false。
verify - 如何驗證 SSL。更多資訊請參考 https://docs.python-requests.org/en/master/user/advanced/#ssl-cert-verification。
cert - mTLS 的客戶端證書路徑，可以是合併證書或與 key 一起使用。
key - mTLS 的客戶端金鑰路徑，與 cert 一起使用。