WebHDFS 運算子

WebHDFS 提供對儲存在 HDFS 中資料的 Web 服務存取。同時,它保留了原生 Hadoop 協定提供的安全性,並使用平行處理以獲得更好的吞吐量。

WebHdfsSensor

等待檔案或資料夾落在 HDFS 中

WebHdfsSensor 用於檢查檔案或資料夾是否落在 HDFS 中。

使用 filepath 參數來輪詢直到找到提供的檔案。

參考

如需更多資訊,請查看 WebHDFS REST API

這篇文章是否有幫助?