• Mac版Spark獲得更新 整體生產力都提升了

    去年 12 月份,Readdle 推出了 Spark 電子郵件應用的 Mac 版本,這款應用程序能夠為用戶提供跨平臺的郵件收發體驗,并且支持新款 MacBook Pro 中加入的 Touch B...
    jopen 7年前    5515   

    雅虎開源“TensorFlowOnSpark” - TensorFlow 與 Apache Spark 結合

    它使得深度學習框架 TensorFlow 能與 Apache Spark 中的數據集兼容。對于使用 Spark 來處理不同類型數據的機構和開發者來說,這無疑是一個好消息。
    jopen 7年前    11973   

    別再比較Hadoop和Spark了,那不是設計人員的初衷

    對Hadoop與Spark孰優孰劣這個問題,最準確的觀點就是,設計人員旨在讓Hadoop和Spark在同一個團隊里面協同運行。
    jopen 8年前    8767   

    Spark生態頂級項目匯總

    現在 Apache Spark 已形成一個豐富的生態系統,包括官方的和第三方開發的組件或工具。后面主要給出 5 個使用廣泛的第三方項目。
    jopen 8年前    7128   

    用Spark/DBSCAN做地理定位數據聚類

    機器學習,特別是聚類算法,可以用來確定哪些地理區域被一個給定的用戶經常訪問和“入住”而哪些區域不是。這樣的地理分析使范圍廣泛的服務成為可能,從基于位置的推薦系統到先進的安全系統,并提供更個性化的用戶體驗。
    jopen 8年前    33151   

    變不可能為可能,Tachyon幫助Spark變小時級任務到秒

    本文作者是Gianmario Spacagna和Harry Powell,Barclays的數據科學家。Barclays的數據科學家。 集群計算和大數據技術已經取得了很多進展,不過現在很多大數...
    jopen 8年前    17142   

    Apache Spark 2.0 最快今年4月亮相

    1月才剛釋出1.6版的大數據技術Spark,下一個2.0版本預計4、5月釋出,將提供可運行在SQL/Dataframe上的結構化串流即時引擎,并統一化Dataset及DataFrame
    jopen 8年前    10292   

    在Docker上使用Weave搭建Hadoop和Spark跨主機容器集群

    實際環境是開發使用的兩臺服務器,每個服務器上是三個集群容器節點,總共六個節點,使用weave實現跨主機的通信,并且利用小插件可以實現在局域網或者是在外網查看監控集群的webUI和開放7077等關...
    jopen 8年前    36540   

    Spark 是否真的比 MapReduce 技高一籌

    Apache 基金會下的 Spak 再次引爆了大數據的話題。帶著比 Hadoop MapReduce 速度要快 100 倍的承諾以及更加靈活方便的 API,一些人認為這或許預示著 Hadoop ...
    jopen 8年前    29104   

    《Machine Learning with Spark》書評與作者訪談

    機器學習 以現有數據為基礎創建模型,通過數據驅動,對未來做出決策或者預測。機器學習在最近幾年獲得大量的關注,因為它對企業與商業做出決策非常有幫助。
    jopen 8年前    25101   

    [譯]R語言突破大數據瓶頸:Shiny的Spark之旅

    我對如何開發和部署"Shiny-SparkR"的應用一直很感興趣,本文目的將展示如何使用 SparkR 來驅動 Shiny 應用。
    jopen 8年前    24544   

    Hadoop/Spark生態圈里的新氣象

    令人驚訝的是,Hadoop在短短一年的時間里被重新定義。讓我們看看這個火爆生態圈的所有主要部分,以及它們各自具有的意義。
    jopen 8年前    35271   

    事實上,Spark是一項非常值得學習的技術

    2013年年底,我第一次接觸到Spark,當時我對Spark所使用的Scala語言產生了較大的興趣。一段時間后,我做了一個預測泰坦尼克號船上人員生存概率的數據科學項目。事實證明這是一個更深入了解...
    jopen 8年前    34562   

    7種常見的hadoop和spark項目

    如果您的Hadoop項目將有新的突破,那么它必定與下邊介紹的七種常見項目很相像。
    jopen 8年前    10075   

    2分鐘讀懂Hadoop和Spark的異同

    談到大數據,相信大家對Hadoop和Apache Spark這兩個名字并不陌生。但我們往往對它們的理解只是提留在字面上,并沒有對它們進行深入的思考,下面不妨跟我一塊看下它們究竟有什么異同。
    jopen 8年前    13152   

    spark十分優秀,但并非銀彈

    已經有太多的文章說spark有多么的優秀了,我是非常認可的。比如:統一分析引擎,RDD抽象,dataset、df等編程接口,交互式編程的支持,穩定高效的機器學習算法庫,高效的spark sql實...
    jopen 8年前    9359   

    解讀2015之Spark篇:新生態系統的形成

    編者按:2015年,整個IT技術領域發生了許多深刻而又復雜的變化,InfoQ策劃了“解讀2015”年終技術盤點系列文章,希望能夠給讀者清晰地梳理出技術領域在這一年的發展變化,回顧過去,繼續前行。...
    jopen 8年前    38554   

    大數據盤點之Spark篇

    譚政,Hulu 網大數據基礎平臺研發。曾在新浪微博平臺工作過。專注于大數據存儲和處理,對 Hadoop、HBase 以及 Spark 等等均有深入的了解。 2015 年中 Spark 版本...
    jopen 8年前    42951   

    2016年大數據領域預測:Spark淘汰MapReduce,拯救Hadoop

    2016 年大數據領域會發生什么情況?考慮到如今在深層神經網絡和規范性分析方面取得的進展,你可能覺得這個問題很好回答。而實際上,來自業界的大數據預測大不相同,本文精選出了最值得關注的 33 個預...
    jopen 8年前    26776   

    Spark 1.6今天發布

    今天,我們很開心的宣布發布Apache?Spark?1.6!這也是開源社區開發的一個里程碑,2015年貢獻spark的代碼是1000行,是2014一整年的兩倍,見下圖。
    jopen 8年前    26489   
    1 2 3 4

    熱門問答

    熱門文檔

  • sesese色