Oozie 管理Hdoop作業（job）的工作流程調度管理系統

jopen 10年前發布 | 64K 次閱讀 Oozie 工作流引擎

  用幾句話就可以概括什么是Oozie：

  • Oozie是一個管理Hdoop作業（job）的工作流程調度管理系統。

  • Oozie的工作流是一系列動作的直接周期圖。

  • Oozie協調作業就是通過時間（頻率）和有效數據觸發當前的Oozie工作流程

  • Oozie是Yahoo針對Apache Hadoop開發的一個開源工作流引擎。
    用于管理和協調運行在Hadoop平臺上（包括：HDFS、Pig和
    MapReduce）的Jobs。Oozie是專為雅虎的全球大規模復雜
    工作流程和數據管道而設計。

  • Oozie圍繞著兩個核心進行：工作流（Workflow）和
    協調器（Coordinator），前者定義任務拓撲和執行邏輯，后
    者負責工作流的依賴和觸發。
    • </ul>


         更多內容，請參考下列資源：

    1.  Apache官網：https://oozie.apache.org/
    2.  Oozie開發指導：http://blog.cloudera.com/blog/category/oozie/
    3.  OOzie中文實例介紹：http://www.infoq.com/cn/articles/oozieexample
 本文由用戶 jopen 自行上傳分享，僅供網友學習交流。所有權歸原作者，若您的權利被侵害，請聯系管理員。
 轉載本站原創文章，請注明出處，并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺，歡迎各類分享！