国产精品欧美久久久久无广告,国产精品无码专区第一页,精品久久久99大香线蕉

產品描述

數據開發(fā)服務向數據開發(fā)工程師提供拖拉拽控件的方式，設計復雜的工作流有向無環(huán)圖，挖掘出有商業(yè)價值的數據

架構描述：

提供B/S模式的web界面，使有瀏覽器的地方即可開發(fā)、管理任務的需求成為可能

開發(fā)工作流時，通過預設任務的前置任務和任務分支，設計出復雜的流程，達到有條件、有步驟地提煉出數據的目的

開發(fā)工作流時，通過預設任務失敗的重試次數、失敗重試間隔，有效地減少人工干預任務執(zhí)行的工作量，提高工作流執(zhí)行成功率

開發(fā)工作流時，通過預設超時告警、發(fā)送郵件，將工作流執(zhí)行信息及時推送給用戶

數據開發(fā)工程師通過使用SHELL、SQL、SPARK、FLINK等控件開發(fā)工作流，在一個工作流中使用多種計算機語言、計算引擎對數據打出組合拳，從海量、雜亂無章的數據中提煉出有效的知識和信息

啟動工作流時，保存輸入參數。任務執(zhí)行失敗重跑時，可恢復到故障發(fā)生的執(zhí)行環(huán)境，重新跑出數據

復雜的工作流執(zhí)行失敗時，可從失敗的任務節(jié)點開始跑數，避免從頭開始跑數，浪費計算資源

在一個工作流中，數據開發(fā)工程師可以只使用MySQL、ORACLE、HIVE等數據倉庫中的一種;可以同時使用MySQL、ORACLE、HIVE等數據倉庫中的幾種，使數據從一種數據倉庫流向另一種數據庫