A16Z 750萬美元投資分布式文件系統Tachyon
原文 http://www.36kr.com/p/220720.html
據WSJ 消息 , Tachyon 日前獲得了硅谷風投A16Z 750萬美元A輪投資。A16Z的普通合伙人Peter Levine加入Tachyon董事會。
根據該項目官網的介紹,Tachyon是一個以內存為中心的分布式文件系統,能夠為集群框架(如Spark、MapReduce)提供可靠的內存 級速度的文件共享服務,具有類Java的文件API、兼容Hadoop MapReduce和Spark、底層文件系統可插拔等特性。
Tachyon最初出現是為了解決如下問題:
- 大數據分析流水線中數據共享通過基于磁盤文件系統(HDFS等)性能比較緩慢;
- 大數據計算引擎的處理進程(Spark的Executor,MapReduce的Child JVM等)崩潰出錯后,緩存的數據也會全部丟失;
- 基于內存的系統存儲數據冗余,對象太多會導致Java GC時間過長。
Tachyon整體架構如下圖所示( 移步 了解Tachyon),
據悉,Tachyon項目在2012年底對外發布,孵化自UCLA Berkeley的 AMP 實驗室,由計算機在讀博士李浩源創立,Tachyon同樣是李浩源的博士攻讀方向。在接受 InfoQ 采訪時李浩源表示,
長期來講,我們會像Apache Mesos以及Apache Spark一樣,進入Apache Software Foundation。這里歡迎更多的開發者加入。
目前,這個開源項目已經吸引了超過30家公司的70多名貢獻者。包括雅虎、紅帽、Intel還有EMC,而EMC已經在其閃存產品DSSD、Isilon中嘗試集成Tachyon。創始人李浩源表示,Tachyon的商業軟件正在開發中,沒有確切發布的時間。
值得注意的是,A16Z還投資了大數據初創公司Adatao、Mesosphere、 Databricks 等,對新興的大數據領域、數據分析軟件看好。這幾家公司和Tachyon一樣,均與AMP實驗室有聯系。
[本文參考以下來源: blog.csdn.net , blogs.wsj.com , infoq.com ]