DPark 是 Spark 的 Python 克隆，是一個Python實現的分布式計算框架，可以非常方便地實現大規模數據處理和迭代計算。 DPark 由豆瓣實現，目前豆瓣內部的絕大多數數據分析都使用DPark

基于zookeeper的分布式任務調度框架，具有如下特性 1.分布式，解決單點故障 2.支持負載均衡 3.支持自動擴容 4.容錯重試 5.任務基于SPI插件開發 項目主頁：

Cola Cola是一個分布式的爬蟲框架，用戶只需編寫幾個特定的函數，而無需關注分布式運行的細節。任務會自動分配到多臺機器上，整個過程對用戶是透明的。 依賴 首先，確保Python版本為2.6或者2

開發框架，包括代碼生成和UML 導入/導出。基于組件的編程框架。該項目旨在支持各種目標框架。基于wxWidgets的GUI應用程序是主要的示例。還提供了快速數據庫GUI設計包含UML導入/導出（DB逆向工程）。

Hadoop的分布式架構改進與應用 Baofeng Zhang@zju 1.? 背景介紹 談到分布式系統，就不得不提到Google的三駕馬車:GFS [1] ,MapReduce [2]

Apache Samza 是一個分布式流處理框架。它使用 Apache Kafka 用于消息發送，采用 Apache Hadoop YARN 來提供容錯，處理器隔離，安全性和資源管理。專用于實時數據的

(easy operation service)是公司內部開發的分布式服務調用框架，基于zookeeper,netty,hessian等成熟框架。在使用上與spring無縫結合，無任何學習成本（后端人員只

Pyleus 是一個來自 Yelp 的開源框架，使得 Yelp 的另外一個開源項目 mrjob 可以運行在 Apache Storm 框架上，就像 Hadoop 一樣。開發者可以使用純 Python 實現大數據的處理，并進行快速迭代。

摘 要 Failover是指系統處理故障并恢復的過程，目前大多數分布式系統都實現了自動Failover的機制，即使發生局部失敗也能繼續提供服務。Failover測試則是通過主動注入錯誤，模擬出各種

Celery （芹菜）是基于Python開發的分布式任務隊列。它支持使用任務隊列的方式在分布的機器／進程／線程上執行任務調度。 架構設計 Celery的架構由三部分組成，消息中間件（message

Celery （芹菜）是基于Python開發的分布式任務隊列。它支持使用任務隊列的方式在分布的機器／進程／線程上執行任務調度。 一、架構設計 Celery的架構由三部分組成，消息中間件（message

FourInOne（中文名字“四不像”）是一個四合一分布式計算框架，在寫這個框架之前，我對分布式計算進行了長時間的思考，也看了老外寫的其他開源框架,當我們把復雜的hadoop當作一門學科學習時，似乎忘

Twitter已經從以往的數據存儲開發經驗中提出一個名為 Gizzard的Scala框架，讓用戶可以更方便地創建自定義容錯、分布式數據庫。Twitter給出了一個名為“Rowz”的示例，方便用戶上手。 Twi

Disco是一個基于MapReduce的分布式計算框架。Disco是一個開源項目，由諾基亞研究中心開發用來解決處理大數據時碰到的實際問題。 Disco采用Python開發，具有易于使用，強大的特點

MyRPC是個遠程過程調用框架，設計用來方便地連接異構系統。它具有基于IDL的客戶機/服務器存根生成，多平臺支持，二進制協議（不需要轉義二進制數據，更少的開銷），支持各種數據類型（如字符串，二進制，符

Zookeeper是一個高性能，分布式的，開源分布式應用協調服務。它提供了簡單原始的功能，分布式應用可以基于它實現更高級的服務，比如同步， 配置管理，集群管理，名空間。它被設計為易于編程，使用文件系統

也有可以構建復雜的pipeline做一代碼優化和任務調度的好處，但目前還需要程序員來配置資源分配。 Spark在設計分布式數據集API時，模擬了Scala集合的操作API，使得額外的語法學習成本比Dataflow要低。

． ANSI/IEEE 六個品質要素 * 正確性（correctness）： –所製作的功能達到設計規範與滿足使用者需求的程度 * 可靠性（reliability）： –於規定之期間和條件下，仍能維持其性能水準的程度

X、Linux、Android與iOS的版本。 Eich認為，今日網路所面臨的主要威脅在於委託人與代理人之間的衝突，其中，使用者即為委託人，而瀏覽器即為代理人，期待網路上所有服務皆為免費是不切實際的，由於多數人

及多重處理(Multiprocessing)的能力 2. 什麼是執行緒支援多重處理的執行控制機制，它可以執行程式中任何一組相關且可與程式中其它部分多重並行處理的程式片斷。 播放背景音樂 執行緒ａ：數數運算 執行緒ｃ：動畫顯示 執行緒ｂ：程式（多執行緒）2