?分布式存儲技術及應用 根據did you know(http://didyouknow.org/)的數據,目前互聯網上可訪問的信息數量接近1秭= 1百萬億億 (1024)。毫無疑問,各個大型網站也都
?Web高級應用論文 2006-6-21 XML在分布式系統中的作用 梁 礫 來源:www.javathinker.org 摘要:本文首先簡單介紹了XML的基本知識,然后,通過列舉、比較,詳細地介紹X
?一.?? 什么是Memcached Memcached 是一個高性能的分布式內存 對象緩存系統,用于動態Web應用以減輕數據庫負載。它通過在內存中緩存數據和對象 來減少讀取數據庫的次數,從而提供動態、數據庫驅動網站的速度。
?HBase--分布式數據庫 HBase – Hadoop Database,是一個高可靠性、高性能、面向列、可伸縮的分布式存儲系統,利用HBase技術可在廉價PC Server上搭建起大規模結構化存儲集群。
Terrastore是一個基于Terracotta(一個業界公認的、快速的分布式集群組件)實現的高性能分布式文檔數據庫。可以動態從運行中的集群添 加/刪除節點,而且不需要停機和修改任何配置。支持通過h
Distributed Checksum Clearinghouse (DCC) 是一個包含客戶端和服務器的平臺,用來收集跟郵件信息相關的 checksum 數據,計算器可為 SMTP 服務器提供數據,mail user agent 可用來監測和處理垃圾郵件。同時 DCC 服務器間可交換公用的 checksum 數據。
1.分布式日志收集系統:背景介紹 許多公司的平臺每天會產生大量的日志(一般為流式數據,如,搜索引擎的pv,查詢等),處理這些日志需要特定的日志系統,一般而言,這些系統需要具有以下特征: (1)
時也帶來了系統的復雜性——各子系統不是孤立存在的,它們彼此 之間需要協作和交互,這就是我們常說的分布式系統。各個子系統就好比動物園里的動物,為了使各個子系統能正常為用戶提供統一的服務,必須需要一種機制來進
Katta是一個可擴展的、故障容錯的、分布式實施訪問的數據存儲。 Katta可用于大量、重復、索引的碎片,以滿足高負荷和巨大的數據集。這些索引可以是不同的類型。當前該實現在Lucene和Hadoop
AtomizeJS 是一個 JavaScript 庫用來編寫運行在瀏覽器之上的分布式應用,無需在服務器編寫任何特定的邏輯。 項目主頁: http://www.baiduhome.net/l
dCache是一個分布式的存儲解決方案。它組織多臺電腦的存儲,合并后可用于存儲數據;最終用戶只是看到了大量的存儲空間。由于最終用戶不必知道 哪臺計算機上的數據存儲,其數據可從一臺計算機遷移到另一臺沒有
PaaS(平臺即服務)提供商dotCloud發布了一個開源產品Hipache,這是一個支持WebSocket的HTTP代理系統。
LGPL許可證,用Scala 2.8語言實現。目前還處于早期發展階段,Ian制作了一則36分鐘長的視頻,介紹這種“云的透明化分布式計算(Vimeo)”。 項目主頁: http://www.baiduhome.net/li
基于zeromq、gevent和 msgpack開發的分布式RPC框架zerorpc-python。這個框架簡單、易用。 項目主頁: http://www.baiduhome.net/li
FastDFS是一個開源的分布式文件系統,她對文件進行管理,功能包括:文件存儲、文件同步、文件訪問(文件上傳、文件下載)等,解決了大容量存儲和負載均衡的問題。特別適合以文件為載體的在線服務,如相冊網站、視頻網站等等。
牧羊犬(Sheepdog) 是一個新的第三方的KVM開源項目,提供分布式存儲管理功能。牧羊犬提供高可用性的KVM提供塊級存儲卷類似亞馬遜電子交易系統(彈性塊存儲虛擬 機)的客戶機。事實上,對牧羊犬項目
Katta是一個可擴展的、故障容錯的、分布式實施訪問的數據存儲。 Katta可用于大量、重復、索引的碎片,以滿足高負荷和巨大的數據集。這些索引可以是不同的類型。當前該實現在Lucene和Hadoop
Marp是一個比現有Hadoop分布式文件系統還要快三倍的產品,并且也是開源的。Mapr配備了快照,并號稱不會出現SPOF單節點故障,且被認為是與現有HDFS的API兼容。因此非常容易替換原有的系統。
Apache River 是一個分布式計算的架構,基于原 Sun 的 JSK Starter Kit 源碼,主要使用 Jini 規范。 項目主頁: http://www.open-open
ICE(Internet Communications Engine)是ZeroC提 供的一款高性能的分布式計算平臺,支持 C++ , .NET , Java , Python , Objective-C