Apache HDFS 連線¶
Apache HDFS 連線類型啟用與 Apache HDFS 的連線。
預設連線 ID¶
Web HDFS Hook 使用參數 webhdfs_conn_id
作為連線 ID,預設情況下參數值為 webhdfs_default
。
設定連線¶
- 主機
要連線的主機,可以是
local
、yarn
或 URL。對於 Web HDFS Hook,可以將多個主機指定為逗號分隔的列表。- 連接埠
如果主機是 URL,請指定連接埠。
- 使用者名稱
用於 HDFS 操作的有效使用者 (非 Kerberos 驗證)。
- 額外 (選填,連線參數)
指定可用於 Web HDFS 連線的額外參數 (以 JSON 字典形式)。以下額外參數可用於為 Web HDFS Hook 設定 SSL
use_ssl
- 是否應使用 SSL。預設值為 false。verify
- 如何驗證 SSL。更多資訊請參考 https://docs.python-requests.org/en/master/user/advanced/#ssl-cert-verification。cert
- mTLS 的用戶端憑證路徑,可以是合併的憑證,或與key
一起使用key
- mTLS 的用戶端金鑰路徑,與cert
一起使用