Hadoop 2.6.0發布

jopen 10年前發布 | 29K 次閱讀 Hadoop

Apache Hadoop 2.6.0包含了許多重要的特性。

Hadoop Common

  1、Key management server (beta版本) Hadoop KMS對Hadoop和Hadoop用戶來說是一個安全網關。它為現有的Hadoop安全組建(authenticatication, confidentiality)提供了相應的接口。(HADOOP-10433)
  2、Credential provider(beta版本)。它是credential providers內部提供管理credentials, passwords and secrets的命令(HADOOP-10922、HADOOP-11031)

Hadoop HDFS

  1、異構的存儲層進入到第二階段,主要更新有:(1)、異構存儲的應用程序API;(2)、SSD存儲層;(3)、內存作為存儲層(beta版本)。
  2、支持Archival存儲
  3、Transparent data at rest encryption
  4、操作安全的DataNode,無需root訪問權限(Operating secure DataNode without requiring root access)。
  5、熱插拔驅動器,支持動態的添加、刪除DataNode上面的磁盤,而不需要重啟DataNode(beta版本)。
  6、AES(Advanced Encryption Standard)支持快速的wire encryption。

Hadoop YARN

  1、在YARN中支持長時間運行的服務:應用程序的服務注冊。
  2、支持滾動升級:(1)、ResourceManager上的工作可以保存起來,并可以繼續運行;(2)、NodeManager上的Container可以保存起來,,并可以繼續運行。
  3、Support node labels during scheduling;
  4、在CapacityScheduler中支持基于時間的資源保留(beta版本);
  5、為application artifacts提供了一個全局的,共享內存(beta版本);
  6、支持在Docker容器中本地地運行applications(alpha版本)。

重要的一些bug修復列表:

Hadoop Common
  HADOOP-10433 – Key management server (beta)
  HADOOP-10607 – Credential provider (beta)
Hadoop HDFS
  Heterogeneous Storage Tiers – Phase 2
  HDFS-5682 – Application APIs for heterogeneous storage
  HDFS-7228 – SSD storage tier
  HDFS-5851 – Memory as a storage tier (beta)
  HDFS-6584 – Support for Archival Storage
  HDFS-6134 – Transparent data at rest encryption (beta)
  HDFS-2856 – Operating secure DataNode without requiring root access
  HDFS-6740 – Hot swap drive: support add/remove data node volumes without restarting data node (beta)
  HDFS-6606 – AES support for faster wire encryption
Hadoop YARN
  YARN-896 – Support for long running services in YARN
  YARN-913 – Service Registry for applications
  YARN-666 – Support for rolling upgrades
  YARN-556 – Work-preserving restarts of ResourceManager
  YARN-1336 – Container-preserving restart of NodeManager
  YARN-796 – Support node labels during scheduling
  YARN-1051 – Support for time-based resource reservations in Capacity Scheduler (beta)
  YARN-1492 – Global, shared cache for application artifacts (beta)
  YARN-1964 – Support running of applications natively in Docker containers (alpha)
全部的Bug修復看這里

來自:http://www.iteblog.com/archives/1214

 本文由用戶 jopen 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!