• 分布式文件系統:SeaweedFS 經驗

    SeaweedFS 是簡單,高伸縮性的分布式文件系統,包含兩部分:存儲數十億的文件;快速為文件服務。SeaweedFS 作為支持全 POSIX 文件系統語義替代,Seaweed-FS 選擇僅實現 key-file

    bger 2015-10-29   11325   0

    Web項目演化系列--分布式 經驗

    務器了,如果不想要搭建集群服務器,可將相應的功能剝離出來成為單一的項目,也就是分布式結構。 由于后期必然會演變成分布式架構,而各個結構又是集群,因此如果當前情況下就把項目構架得太多復雜,投入再多的

    jopen 2016-01-08   7121   0

    分布式隊列編程優化篇 經驗

    前言 “分布式隊列編程”是一個系列文,之前我們已經發布了《 分布式隊列編程模型、實戰 》,主要剖析了分布式隊列編程模型的需求來源、定義、結構以及其變化多樣性;根據作者在新美大實際工作經驗,給出了隊

    分布式系統的事務處理 經驗

    個區也需要進行數據冗余處理。這就是數據副本:當出現某個節點的數據丟失時可以從副本讀到,數據副本是分布式系統解決數據丟失異常的唯一手段。所以,在這篇文章中,簡單起見,我們只討論在數據冗余情況下考慮數據的一致性和性能的問題。簡單說來:

    分布式數據庫 HBase 經驗

    HBase是?Hadoop 的正式子項目,它是一個面向列的分布式數據庫。是建立的hdfs之上,提供高可靠性、高性能、列存儲、可伸縮、實時讀寫的數據庫系統。 它介于nosql和RDBMS之間,僅能通過主鍵(row

    openkk 2011-12-01   137182   0

    分布式計算框架 Fourinone 經驗

    FourInOne(中文名字“四不像”)是一個四合一分布式計算框架,在寫這個框架之前,我對分布式計算進行了長時間的思考,也看了老外寫的其他開源框架,當我們把復雜的hadoop當作一門學科學習時,似乎忘

    fmms 2011-12-06   35341   0

    分布式的數據存儲平臺 PNUTS 經驗

    Yahoo!的PNUTS是一個分布式的數據存儲平臺,它是 Yahoo!云計算平臺重要的一部分。它的上層產品通常也稱為Sherpa。按照官方的 描述,”PNUTS, a massively parallel

    openkk 2012-03-07   21153   0

    分布式數據存儲框架 Gizzard 經驗

    Twitter已經從以往的數據存儲開發經驗中提出一個名為 Gizzard的Scala框架,讓用戶可以更方便地創建自定義容錯、分布式數據庫。Twitter給出了一個名為“Rowz”的示例,方便用戶上手。 Twitter還公布了Gi

    openkk 2012-06-08   30644   0

    Disco - 基于MapReduce的分布式計算框架 經驗

    Disco是一個基于MapReduce的分布式計算框架。Disco是一個開源項目,由諾基亞研究中心開發用來解決處理大數據時碰到的實際問題。 Disco采用Python開發,具有易于使用,強大的特點

    openkk 2012-06-08   32597   0

    Java分布式應用平臺 SmartFrog 經驗

    SmartFrog 是一個功能強大而且靈活的用于配置發布和管理分布式軟件系統的 Java 平臺。 SmartFrog由以下三部分組成: A Language for defining configurations

    openkk 2012-06-09   14358   0

    分布式的內存對象系統 Shared Cache 經驗

    SharedCache是高性能的、分布式的內存對象系統,用于在動態WEB或Win應用程序中減少數據庫的負責,提高訪問速度。SharedCache 全部的代碼都是用c#寫的,100% DotNet原生態。

    jopen 2011-12-25   25235   0

    用于分布式計算的RPC框架:MyRPC 經驗

    MyRPC是個遠程過程調用框架,設計用來方便地連接異構系統。它具有基于IDL的客戶機/服務器存根生成,多平臺支持,二進制協議(不需要轉義二進制數據,更少的開銷),支持各種數據類型(如字符串,二進制,符號和無符號整數,浮點數,列表,結構和枚舉),和異常的支持。

    jopen 2014-02-28   13377   0

    分布式搜索 Elasticsearch 簡介 經驗

    Elasticsearch是一個基于lucene的、開源的、分布式的、RESTful的搜索引擎。Elasticsearch有如下特征: 1. 更快的執行搜索; 2. 安裝簡單; 3. 完全自由的搜索模式;

    jopen 2014-01-17   26758   0

    分布式監控系統 Ganglia 經驗

    Ganglia是一個跨平臺可擴展的,高 性能計算系統下的分布式監控系統,如集群和網格。它是基于分層設計,它使用廣泛的技術,如XML數據代表,便攜數據傳輸,RRDtool用于數據存儲和可 視化。它利用精

    openkk 2012-07-29   26858   0

    分布式資源管理 GridWay 經驗

    GridWay 是一個工作負載管理器,用于在一個由不同計算平臺組成的 grid 中執行作業管理和資源調配。GridWay 主要任務是大規模、可靠和高效的計算資源分片管理。

    openkk 2012-07-29   11522   0

    分布式消息系統Kafka初步 經驗

    的相關文章我已經做了索引,在我的博客中置頂了,大家可以方便的找到。從這一篇開始分布式消息系統的入門。 在我們大量使用分布式數據庫、分布式計算集群的時候,是否會遇到這樣的一些問題: l? 我想分析一下用戶行為(

    jopen 2012-11-30   178734   0

    分布式文件系統 HDFSd 經驗

    Hadoop Distributed File System,簡稱HDFS,是一個分布式文件系統。HDFS有著高容錯性(fault-tolerent)的特點,并且設計用來部署在低廉的(low- cos

    jopen 2012-09-10   15771   0

    Kafka 分布式環境搭建 經驗

    環境,我們會從單機版開始,然后逐漸往分布式擴展。單機版的搭建官網上就有,比較容易實現,這里我就簡單介紹下即可,而分布式的搭建官網卻沒有描述,我們最終的目的還是用分布式來解決問題,所以這部分會是重點。

    jopen 2012-12-01   121226   0

    分布式跟蹤系統:Zipkin 經驗

    Zipkin 是 Twitter 的一個開源項目,允許開發者收集 Twitter 各個服務上的監控數據,并提供查詢接口。

    jopen 2013-03-08   37790   0

    Python 分布式計算模塊:Parallel 經驗

    機制。能夠將計算壓力分布到多核CPU或集群的多臺計算機上,能夠非常方便的在內網中搭建一個自組織的分布式計算平臺。先從多核計算開始,普通的Python應用程序只能夠使用一個CPU進程,而通過Parallel

    jopen 2013-11-01   48494   0
    1 2 3 4 5 6 7 8 9 10
  • sesese色