PB級海量數據處理系統 Maxtable

openkk 13年前發布 | 25K 次閱讀 Java NoSQL數據庫

Maxtable是一個高性能、可擴展的、PB級海量數據處理系統,是一個開源項目。Maxtable是用C語言開發的,目前只有不到2萬行代碼,是一個輕量型的海量存儲系統,它為每一個不同的應用場景開發特有的 branch,以達到更好的適應用戶業務的目的, 現在已經應用在一家公司的虛擬化產品環境中的后臺元數據管理存儲系統。

Maxtable目前的應用領域主要包括:

  • key-value且value的大小在4M范圍內的數據模式,
  • 元數據管理,如大型云存儲的元數據管理,或者大型key-value系統的key管理。
  • 數據挖掘與分析領域。目前maxtable支持range query,delete等操作,未來會根據具體應用場景進行定制開發。

項目主頁:http://www.baiduhome.net/lib/view/home/1333941738108

 本文由用戶 openkk 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!