在Spring框架下支持編寫 Hadoop 應用。Spring Hadoop使MapReduce、Streaming、Hive、Pig和級聯工作能夠通過Spring容器執行。Hadoop分布式文件系統的數據訪問是通過JVM的腳本語言，如Groovy和JRuby啟用。此外，還計劃支持Hadoop包括FsShell和DistCp等工具。

Hadoop中的NameNode好比是人的心臟，非常重要，絕對不可以停止工作。在hadoop1時代，只有一個NameNode。如果該NameNode數據丟失或者不能工作，那么整個集群就不能恢復了。這是hadoop1中的單點問題，也是hadoop1不可靠的表現。如下圖所示，便是hadoop1.0的架構圖

準備好源資源服務器，我使用之前的一臺node4，配置都是1GB內存20GB存儲 集群最好的安裝方式一定是通過本地源的，如果是公共源，那么網絡將會嚴重影響我們的安裝進度。所以制作本地源是每一個大數據工作者的必會技能。

今天夜間，除了 HTC 會在紐約和倫敦兩地舉辦一個神秘大型活動外（極有可能會是新旗艦機 M7 的發布會），Ubuntu 背后的公司 Canonical Ltd. 也沒有閑著，在其官網首頁掛出了一個倒計時預告“Tick, tock, tablet time!”，預示著再過十來個小時會有與平板相關的重磅消息放出。會是什么呢？

之前魅族曾表示，2015年第一季度將推出搭載Ubuntu系統的MX手機，而不少煤油都非常期盼這件事情的發生。現在Ubuntu中國在微博上表示，公司運來了一批魅族，至于干什么用的，沒有透露，但明眼人應該都清楚，Ubuntu版的MX近了。

Ubuntu Tweak是一個為了方便所有人配置Ubuntu的工具。它提供了許多默認系統并未提供的桌面和系統選項。

Ubuntu 觸屏平臺已經擁有許多有趣應用程序，甚至看起來很多開發者已經開始實現許多超乎期望的軟件，像 BT 客戶端就是個很好的例子。 Ubuntu 觸屏設備的應用商店在過去幾個月一直平穩增長并增添了許多有趣的應用程序。其中大多數都已經滿足操作系統的基本需求，但也有不少遠遠超出普通用戶的需求。

Unity 中有爭議的在線搜索功能將在今年四月份發布的 Ubuntu 16.04 LTS 中被默認禁用 用戶在 Unity 7 的 Dash 搜索欄里將只能搜索到本地文件、文件夾以及應用。這樣，用戶輸入的關鍵詞將不會被發送到 Canonical 或任何第三方內容提供商的服務器里。

Canonical 已經開始嘗試在 Ubuntu 16.04（Xenial Xerus）上做出重大調整，計劃放棄 Ubuntu 軟件中心（Ubuntu Software Center）并由 GNOME 軟件（GNOME Software）來替代。今年 8 月，Ubuntu MATE 開發者自 15.10 Alpha 開始不再搭載 Ubuntu 軟件中心引發了巨大爭議，對于資深用戶來說顯然并不是什么大事，但中心化的友好軟件中心對于新手來說非常重要。

我們要做的是完成在Windows下遠程調用Hadoop服務器集群，不過還是覺得Linux下更好用一些。 首先從hadoop-0.20.0的開發包中拷貝hadoop-0.20.0-eclipse-plugin.jar到Eclipse的plugins目錄下面，重啟Eclipse，就會發現視圖里面多了一個Map/Reduce選項

安裝hadoop是一件非常容易的事情,讀者可以在官網上下載到最近的幾個hadoop版本。

Hadoop集群安裝。首先我們統一一下定義，在這里所提到的Hadoop是指HadoopCommon，主要提供HDFS（分布式文件存儲）與Map/Reduce的核心功能。　

Apache Hadoop 2.0.3發布了，在這次版本更新中。1. 引入一種新的HDFS HA解決方案QJM 之前NameNode HA已經有兩種解決方案，分別是基于共享存儲區的Backup Node方案和基于Bookeeper的方案，在該版本中引入另外一種方案：QJM（Quorum Journal Manager）。

Twitter 將 Storm 正式開源了，這是一個分布式的、容錯的實時計算系統，它被托管在 GitHub 上，遵循 Eclipse Public License 1.0。Storm 是由 BackType 開發的實時處理系統，BackType 現在已在 Twitter 麾下。GitHub 上的最新版本是 Storm 0.5.2，基本是用 Clojure 寫的。

Apache Hadoop是一款支持數據密集型分布式應用并以Apache 2.0許可協議發布的開源軟件框架。它支持在商品硬件構建的大型集群上運行的應用程序。Hadoop是根據Google公司發表的MapReduce和Google檔案系統的論文自行實作而成。

Hadoop是MapReduce的開源實現，現在介紹它的單機模式安裝方法。實驗平臺：Ubuntu9.04，Hadoop0.20，JDK1.6。

使用SSH協議將namenode的公鑰信息authorized_keys復制到所有DataNode的.ssh目錄下(.ssh下最初沒有authorized_keys，如果有，則需要復制追加，后面會講到如何追加)。 root@hadoopName# scp authorized_keys 172.16.18.212:/root/.ssh/ 這樣配置過后，namenode可以無密碼登錄所有datanode，可以通過命令 “ssh 172.16.19.42”來驗證。有些手冊上介紹的配置方法與此不一致，但是這種方法是成功的。很多手冊到此步SSH配置就完成了，但是我實驗時發現不能正常啟動hadoop，所以我還繼續做了配置。

Hadoop2.2.0源代碼編譯

通常，集群里的一臺機器被指定為 NameNode，另一臺不同的機器被指定為JobTracker。這些機器是masters。余下的機器即作為DataNode也作為TaskTracker。

Cascading是一個架構在Hadoop上的API，用來創建復雜和容錯數據處理工作流。它抽象了集群拓撲結構和配置來快速開發復雜分布式的應用，而不用考慮背后的MapReduce。