基于分布式技術的Web分析處理:Spindle

jopen 11年前發布 | 12K 次閱讀 Spindle

采用Scala, Spark, and Parquet技術實現的下一代Web分析處理。

Spindle 是來自Adobe研究院的開源項目,是構建在 Spark 上的Web日志分析查詢。通過 Spray 實現的多線程 HTTP 接口來輸出查詢結果。查詢是通過加載來自 Apache Parquet 的 HDFS 柱狀存儲格式。

基于分布式技術的Web分析處理:Spindle

基于分布式技術的Web分析處理:Spindle

項目主頁:http://www.baiduhome.net/lib/view/home/1414633596419

 本文由用戶 jopen 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!