Contents云計算簡介一Java與云計算二云計算實例三云計算在教育中的應用四一、云計算簡介1.1云計算的含義云計算是技術還是理念1.1云計算的定義狹義：指IT基礎設施的交付和使用模式，指通過網絡以按需、易擴展的方式獲得所需的資源（硬件、平臺、軟件）。提供資源的網絡被稱為“云”。“云”中的資源在使用者看來是可以無限擴展的，并且可以隨時獲取，按需使用，隨時擴展，按使用付費。這種特性經常被稱為像水電一樣使用IT基礎設施。

Hive 是建立在 Hadoop 上的數據倉庫基礎構架。它提供了一系列的工具，可以用來進行數據提取轉化加載（ETL），這是一種可以存儲、查詢和分析存儲在 Hadoop 中的大規模數據的機制。Hive 定義了簡單的類 SQL 查詢語言，稱為 QL，它允許熟悉 SQL 的用戶查詢數據。同時，這個語言也允許熟悉 MapReduce 開發者的開發自定義的 mapper 和 reducer 來處理內建的 mapper 和 reducer 無法完成的復雜的分析工作。

大家都熟悉文件系統，在對HDFS進行分析前，我們并沒有花很多的時間去介紹HDFS的背景，畢竟大家對文件系統的還是有一定的理解的，而且也有很好的文檔。在分析Hadoop的MapReduce部分前，我們還是先了解系統是如何工作的，然后再進入我們的分析部分。

MapReduce是一個編程模型，也是一個處理和生成超大數據集的算法模型的相關實現。用戶首先創建一個Map函數處理一個基于key/value pair的數據集合，輸出中間的基于key/value pair的數據集合；然后再創建一個Reduce函數用來合并所有的具有相同中間key值的中間value值。現實世界中有很多滿足上述處理模型的例子，本論文將詳細描述這個模型。

CloudStack云管理平臺開源CloudStack的安裝<注意：在裝系統Centos6.3的時候一定要選擇最小化安裝>

Service Model Architectures

5 Software as a service (Saas)

The“Platform a sa Service”Model for Networking

Virtualization and Cloud Computing

Experiences with a Private Cloud

云計算：Cloud computing

分布式計算系統簡介

Hadoop集群搭建文檔

Amazon使用彈性計算云（EC2）和簡單存儲服務（S3）為企業提供計算和存儲服務。 收費的服務項目包括存儲服務器、帶寬、CPU資源以及月租費。月租費與電話月租費類似，存儲服務器、帶寬按容量收費，CPU根據時長(小時)運算量收費。 Amazon把云計算做成一個大生意沒有花太長的時間：不到兩年時間，Amazon上的注冊開發人員達44萬人，還有為數眾多的企業級用戶。 有第三方統計機構提供的數據顯示，Amazon與云計算相關的業務收入已達1億美元。云計算是Amazon增長最快的業務之一。

幫助讀者快速掌握hadoop的安裝和部署HDFS，Hbase，Hive等組件。Hadoopt是一個分布式系統基礎架構，由Apache基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序。充分利用集群的威力高速運算和存儲。Hadoop實現了一個分布式文件系統（Hadoop Distributed File System），簡稱HDFS。HDFS有著高容錯性的特點，并且設計用來部署在低廉的硬件上。而且它提供高傳輸率來訪問應用程序的數據，適合那些有著超大數據集的應用程序。

Yarn背景Yarn是一個分布式的資源管理系統，用以提高分布式的集群環境下的資源利用率，這些資源包括內存、IO、網絡、磁盤等。其產生的原因是為了解決原MapReduce框架的不足。最初MapReduce的committer們還可以周期性的在已有的代碼上進行修改，可是隨著代碼的增加以及原MapReduce框架設計的不足，在原MapReduce框架上進行修改變得越來越困難，所以MapReduce的committer們決定從架構上重新設計MapReduce,使下一代的MapReduce(MRv2/Yarn)框架具有更好的擴展性、可用性、可靠性、向后兼容性和更高的資源利用率以及能支持除了MapReduce計算框架外的更多的計算框架。

自從大四下學期加入新蛋bigdata團隊以來，一直利用業余時間學習hadoop生態系統的相關技術，學習的方式主要是跟蹤業界大神的博客以及hadoop官方的文檔，自己也利用公司淘汰下來的機器搭建了一個簡單的hadoop集群來測試。當學習完系統架構后自然要去讀hadoop源碼，從源碼層面了解hadoop的設計。

我這里所講的是hadoop-0.20.2-cdh3u1 版本已regular方式啟動時的代碼流程分析。在namenode啟動時會首先去構造Configuration對象，這個對象會貫穿代碼的整個執行過程，不過在構造的時候它并沒有去加載解析core-site.xml,hdfs-site.xml等配置文件，而是在第一次要使用到這些配置的時候才去解析，解析后保存在Configuration類里的一個Properties的對象里。在這之后才真正的去用Namenode的構造方法構造Namenode對象。

云服務提供的靈活性，可擴展性和規模效應，出現了有關安全相稱的擔憂。由于更多數據從位于中心服務器的詳細數據移動存儲到云，相應個人的和私有的數據的安全也要增加。如果沒有采取適當的措施選擇云供應商或實現自己的云，把數據轉移到云服務器，那么其保密性、可用性和數據的完整性將受到威脅。摘要云服務，例如軟件即服務，平臺即服務，基礎設施即服務，他們都有自己需要擔心的安全需求。

1.用戶使用指南1.1登陸搭建好OpenStack云計算平臺后，訪問http://control_IP/horizon，在本使用手冊中，control_IP為192.168.1.232，因此，訪問http://192.168.1.232/horizon，界面如下圖所示:
輸入用戶名和密碼，本使用手冊中的用戶名為admin，密碼也是admin，登陸成功后進入主頁面,如下圖所示:
因為admin具有管理員權限，所以登陸成功后會進入“管理員”管理界面，如果是普通用戶，則會直接進入“項目”界面。