IT企業利用云計算平臺Hadoop的10種方式

        如果你是世界上廣大 Hadoop 用戶的一員，你肯定知道 Google 曾經靠著分布式計算技術（Hadoop），在搜索引擎和廣告方面取得了舉世矚目的成就。現在的 Hadoop 不僅是當年的老二 Yahoo 的專用產品了，從 Hadoop 長長的用戶名單中，可以看到 非死book, 可以看到 Linkedin，可以看到 Amazon，可以看到 EMC, eBay，Tweeter，IBM, Microsoft, Apple, HP…。國內的公司有淘寶、百度等等。而今天我們要探討的是，Hadoop 作為基礎云計算平臺，除了廣告，IT 公司還用哪些方式在利用 Hadoop。

        1.  在線旅游

        云計算供應商 Cloudera COO Kirk Dunn 表示，目前上 80% 的世界在線旅游使用了 Cloudera 的 Hadoop 服務。他沒有透露具體的名單，但著名的 Orbitz Worldwide 是我知道的客戶之一。

        2.  移動數據

        目前 Cloudera 為美國 70% 的智能手機提供 Hadoop 支持，我們可以確定 Dunn 講的是無限供應商支持的移動數據儲存和處理。

        3.  電子商務

        Dunn 表示 Cloudia 為美國超過 1000 萬在線商家提供 Hadoop 服務，eBay 是他們的一個大客戶， 因為其要管理一個龐大的個人賣家市場，賣家數量達到 1000 萬以上。而 Ebay 在用 Hadoop 服務 90 天后，純利潤增加了3%。

        4.  能源發現

        雪佛龍代表解釋了他們公司利用 Hadoop 的實例：通過分類和處理海洋地震數據可以預測石油儲備狀況。

        5.  節能

        雪佛龍代表同時還表示 Hadoop 還用在節能上，雪佛龍利用 Hadoop 來支持其節能系統，顧客們按照系統提示節能的同時也節省了不少錢。而相關人士甚至表示這個理念可以用到精確和長期的基金預測上。

        6.  基礎架構管理

        越來越多的 IT 公司在收集和分析他們的服務器數據，在 Cloudera 討論會上， NetApp 代表表示他們公司利用 Hadoop 技術從全部的安裝點上收集設備 logs (超過千萬億的 logs 數量)。

        7.  圖片處理

        創業公司“Skybox 圖片”正是利用 Hadoop 來儲存和處理圖片的，這些圖片是衛星根據地理變化的模式有規律地抓取的高清圖片。Skybox 最近獲得了 7000 萬美元的融資。

        8.  欺詐識別

        這是個經典實用的話題，這在財政機構和情報機構非常有市場。Cloudera 客戶之一 Zions Bancorporation 表示他們利用 Hadoop 儲存一切可能預示欺騙性的用戶交易和異常情況數據。

        9. IT安全

        除了基礎架構管理，IT 公司們也開始用 Hadoop 來處理惡意軟件和網絡攻擊數據。去年 Trust

        就用 hadoop 為各種 IP 評定分數，然后各大公司就可以決定是否接受那些惡意 IP 的來訪。

        10.  醫療健康

        目前 Apixio 正使用 Hadoop 來幫助他們對病人的回答做語義分析，從而幫助醫生，護士更好的掌控病情。

        Hadoop 定義：

        1. 一個分布式系統基礎架構，由 Apache 基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序。充分利用集群的威力高速運算和存儲。

        2. Hadoop 是一套開源的、基礎是 Java 的、目前能夠讓數千臺普通、廉價的服務器組成一個穩定的、強大的集群，使其能夠對 pb 級別的大數據進行存儲、計算。已經具有了強大穩定的生態系統，也具有很多使用的延伸產品。比如做查詢的 Pig, 做分布式命名服務的 ZooKeeper, 做數據庫的 Hive 等等。

        Via gigaom