大規模數據存儲/計算軟件 Lexst

fmms 12年前發布 | 21K 次閱讀 數據存儲

    Lexst是一個分布式的大規模數據存儲/計算軟件。在此基礎上可搭建包括搜索引擎、云計算在內的諸多互聯網服務;也可按照某種業務邏輯,組建一個海量數據計算平臺。Lexst運行在Linux系統,遵循LGPL協議,開放源代碼,采用C、Java語言編程。Lexst包括32位和64位兩個版本。
    
    Lexst采用大批量、低成本的硬件,結合多種數據算法,通過簡化計算過程,實現高性能、大數據量的計算。系統的安全、穩定性、可靠性、可維護性則由軟件本身來保證。
    
Lexst實現了多種技術創新,包括:

  1. 大規模數據處理和數據庫結合(優勢很多,詳細見文檔)。
     2. 跨地域多集群協同工作。
  2. 數據即時生效(所存即所得,增、刪、改)
  3. 數據操作SQL語句化。
  4. 平衡運算數據量(對海量計算很重要)。
  5. diffuse/aggregate算法(絕對原創,與Google的map/reduce算法有一拼)
  6. marshal/educe算法(標準原創,這個Google真沒有)
  7. Keep udp(首創,詳見文檔介紹)
  8. 內置安全模塊(RSA、DES、3DES等算法)。

    項目主頁:http://www.baiduhome.net/lib/view/home/1335327349593

 本文由用戶 fmms 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!