12 / 74 改造好呢？還是放棄好呢？ 13 / 74 進擊的 Hadoop 14 / 74 改造 MapReduce Hadoop 掌握所有資料 (HDFS)，但是提供多種玩法 (YARN)！ 希望把 Hadoop 從 Batch 應用變成 Data Operating System： 透過 MapReduce 進行 Batch Processing 透過 Hive 與 Tez Resource Management 從 MapReduce 拉出來，變成 YARN Other YARN Frameworks 就有存在的可能了 17 / 74 MapReduce 改造 Phase 2 讓 MapReduce 變成一個單純跑在 YARN 上頭的 Batch Job Computing Framework 在 YARN 上頭另外發展 Tez、Storm、Giraph、Spark、 OpenMPI、 比較基本的模組： Hadoop Common (Core Libraries) Hadoop HDFS (Storage) Hadoop MapReduce (Computing Engine) Hadoop YARN (Resource Management + Job Scheduling / Monitoring) 比較沒人知道的事： Hadoop 2.x 也默默地做了四五年了 ... 雖然是大修，但是