WebHDFS 運算子¶
WebHDFS 提供對儲存在 HDFS 中的資料的 Web 服務訪問。同時,它保留了原生 Hadoop 協議提供的安全性,並使用並行性以獲得更好的吞吐量。
WebHdfsSensor¶
等待檔案或資料夾到達 HDFS¶
WebHdfsSensor(WebHdfsSensor) 用於檢查檔案或資料夾是否已到達 HDFS。
使用 filepath 引數進行探測,直到找到提供的檔案。
參考資料¶
有關更多資訊,請檢視 WebHDFS REST API。
WebHDFS 提供對儲存在 HDFS 中的資料的 Web 服務訪問。同時,它保留了原生 Hadoop 協議提供的安全性,並使用並行性以獲得更好的吞吐量。
WebHdfsSensor(WebHdfsSensor) 用於檢查檔案或資料夾是否已到達 HDFS。
使用 filepath 引數進行探測,直到找到提供的檔案。
有關更多資訊,請檢視 WebHDFS REST API。