• 開源集群計算環境,Spark 1.1.0 發布 資訊

    0為22萬行。一方面,感謝Scala語言的簡潔和豐富表達力;另一方面,Spark很好地利用了Hadoop和Mesos(伯克利 另一個進入孵化器的項目,主攻集群的動態資源管理)的基礎設施。雖然很輕,但在容錯設計上不

    jopen 2014-09-12   16979   0
    Spark  

    電子書:《Docker入門實戰》 資訊

    00余篇文章,內容涉及Docker、CoreOS、Kubernetes、OpenStack、 Mesos、Yarn、Swarm、Machine、Compose、Deis等,其中有新聞,有教程,有深度解讀,我想我們真的是做了一件酷的不得了的

    jopen 2015-03-09   38884   0
    Docker  

    Twitter已經用Heron替換了Storm 資訊

    從而控制流經拓撲的數據量。除 Aurora外,Heron還可以使用其它服務調度器,如YARN或Mesos。實例運行用戶編寫的Java代碼,每個實例一個JVM。Heron通過協 議緩沖處理彼此間的通信,

    jopen 2015-06-15   17355   0
    Heron  

    如何在生產中成功運用Docker 資訊

    他們從兩年前開始向Docker容器遷移,做過很多嘗試,也失敗過很多次。 最后,我們開始運用Mesos,但當時它還沒有認證……我們還嘗試在Docker中運行Kafka,如果Kafka失敗了,那么我們

    jopen 2015-12-04   7444   0
    Docker  

    Spark學習筆記之淺釋 經驗

    運行框架: 1.Hadoop的MapReduce框架平臺YARN 2.Apache Mesos框架平臺 3.Spark的Standalone框架平臺 4.亞馬遜的AWS平臺 另,與Hadoop2

    jopen 2015-06-20   13091   0

    Rancher Labs發布開源跨云容器管理平臺Rancher 1.0 資訊

    移回來。 Rancher平臺未來的工作可能會包括支持其他的容器調度器,比如 Apache Mesos ,以及在“Windows Server 2016 GA發布”后增加微軟Windows支持。Wi

    jopen 2016-04-12   9411   0
    開源   Docker  

    Apache Spark 1.6.1 發布,集群計算環境 資訊

    是為了支持分布式數據集上的迭代作業,但是實際上它是對 Hadoop 的補充,可以在 Hadoo 文件系統中并行運行。通過名為 Mesos 的第三方集群框架可以支持此行為。Spark 由加州大學伯克利分校 AMP 實驗室 (Algorithms

    jopen 2016-03-11   27731   0

    Deis v1.6.0 發布,Docker Swarm 技術預覽 資訊

    下一步計劃 Deis 將會添加新的應用容器,提升集群效率,支持 Kubernetes 和 Mesos。Deis 控制面板和數據面板默認使用 fleet。Deis 將會繼續改進測試基礎設施,加速測試套件和加大測試覆蓋。

    jopen 2015-05-08   6442   0
    Deis  

    開源 PaaS 系統,Deis v1.10.0 發布 資訊

    deisctl install and similar commands group k8s, mesos, and swarm components logically deisctl dock and

    jopen 2015-09-05   8985   0
    Deis  

    Rancher Labs發布開源跨云容器管理平臺Rancher 1.0 資訊

    移回來。 Rancher平臺未來的工作可能會包括支持其他的容器調度器,比如 Apache Mesos ,以及在“Windows Server 2016 GA發布”后增加微軟Windows支持。Wi

    jopen 2016-04-12   8014   0
    開源   Docker  

    開源分布式計算系統,Spark 1.2 發布 資訊

    是為了支持分布式數據集上的迭代作業,但是實際上它是對 Hadoop 的補充,可以在 Hadoo 文件系統中并行運行。通過名為 Mesos 的第三方集群框架可以支持此行為。Spark 由加州大學伯克利分校 AMP 實驗室 (Algorithms

    jopen 2014-12-19   23822   1
    Spark  

    數據倉庫系統,Shark 0.2 發布 資訊

    很大程度上簡化了部署的流程,例如:本地運行Shark包含了一個 5分鐘內 在本地啟動Shark 0.2的指引 除了運行在Mesos上外,Shark現在也支持Spark的單一部署模式,可以讓你快速的啟動一個集群,而不需要安裝一個

    jopen 2012-10-22   12686   0
    Shark  

    初步使用 Docker 后感 經驗

    我發現在使用了docker之后組內的人都傾向于用docker. 至于研發, 則是強烈贊同用docker. 研發還想上Mesos管理, 這次則是輪到我反對了, 我覺得目前整個公司都還剛用上docker, 很多人還沒概念, 不要走的太超前

    e2ex 2015-05-15   31603   0
    Docker  

    Twitter開源了流數據處理引擎Heron 經驗

    們曾貢獻了 Apache Storm ,它開源于2011年。還有集群資源管理器 Apache Mesos 、MapReduce流數據處理架構 Summingbird 以及更近期提交的高性能日志復制服務

    MosKesler 2016-10-09   7776   0

    利用OpenStack技術來構建開發測試平臺實現精益研發 經驗

    rnetes、Mesos等工具來解決, HPE目前是通過開發自己的Fance組件來和Cloud Foundry做一個集成,來管理Docker服務 。 Kubernetes、Mesos等工具純粹是為

    qingcha 2016-05-10   36903   0

    虛擬化技術的昨天、今天和明天 資訊

    另一個威脅是,現在還看不出的一些威脅。類似Mesos這樣的工具可能會在流行起來之后決定不再使用Docker,而關注于其他虛擬化途徑。同樣地,可能什么時候,Mesos會覺得Docker能帶來的虛擬化級別的價值比不上維護Docker的花費。

    dgbm 2015-07-31   18321   0

    Twitter技術VP:我在眼淚中學會的6點架構設計經驗 經驗

    ache)集群,以及夜鷹集群(分布式Redis)。Twitter也遷移了幾乎所有的主要的緩存到Mesos,以降低運行成本。 對于Cache來說,擴展性和性能是首要挑戰。Twitter運營了數個集群

    zoyn7910 2017-02-22   6989   0

    王團結:如何用Hadoop/Spark構建七牛數據平臺 資訊

    net/article/2015-07-30/2825342 繼“ YARN or Mesos?Spark痛點探討 ”、“ Mesos資源調度與管理的深入分享與交流 ”、及“ 主流SQL on Hadoop框架選擇

    jopen 2015-07-30   15456   0
    Hadoop  

    Twitter技術VP:我在眼淚中學會的6點架構設計經驗 經驗

    ache)集群,以及夜鷹集群(分布式Redis)。Twitter也遷移了幾乎所有的主要的緩存到Mesos,以降低運行成本。 對于Cache來說,擴展性和性能是首要挑戰。Twitter運營了數個集群

    VeoCarruthe 2017-02-22   13654   0

    Dpark源碼剖析一(概述) 經驗

    提供了三種運行方式:本地模式(local,單進程)、多進程模式(實際上也是單機)以及mesos模式(使用mesos來調度達到分布式計算的目的)。 RDD 首先需要說明的是彈性分布式數據集(RDD)

    1 2 3 4 5 6 7 8 9 10
  • sesese色