• Apache Spark 1.2.0發布:引入基于Netty的實現,支持高可用,并提供機器學習API 資訊

    之間有什么關系嗎? Spark可以在很多不同的環境中運行,從和已部署的Hadoop共存,到運行在Mesos集群中,還可以運行在像 Databricks Cloud這樣的托管服務中。在Hadoop環境中,

    jopen 2015-01-10   22324   0

    盤點五類最受歡迎的開源云項目 資訊

    服務開通和管理工具 Ansible——一個用于部署系統和應用的自動化引擎。 Apache Mesos——集群管理系統,為分布式系統或框架提供有效的資源隔離及共享。它由美國加州大學的AMPLab創建

    d3fw 2015-04-28   16997   0
    P17

      微服務實例-構建分布式爬蟲系統-數人科技 文檔

    alesforce Zendesk分布式OS + 存儲PaaS 各種寶、云Ceph HDFS Mesos+Docker開源云計算時代業務技術型云集成商開源技術 + 云端服務專有技術 + 線下服務 16

    dmc3 2015-07-25   1277   0
    網絡爬蟲   方案   HTTP   HTML   Java  

    2016 GIAC全球互聯網架構大會日程如何安排? 問答

    下一代微服務不可缺的底層支撐。本專題主要討論容器技術的原理架構和實踐經驗,包括 Docker、Mesos、Kubernetes等。專題強調實踐和交流,話題設置圍繞容器、運維、云計算等技術領域,力求全方

    活動家becky 2016-10-12   1296   0

    Apache軟件基金會慶祝15年的開放源碼創新和社區的領導地位 資訊

    Deltacloud, Gora, Isis, Jena, Kitty, Lucy, ManifoldCF, Mesos, NPanday, Nuvem, OODT, OpenNLP, SIS, Stanbol, Wave

    jopen 2014-11-24   28520   0
    Apache  

    微服務核心架構梳理 經驗

    stack管理虛擬化,容器時代如何管理容器呢?這就要看看容器編排引擎了。 Apache mesos mesos是基于master,slave架構,框架決定如何利用資源,master負責管理機器,sl

    Robofox2014 2018-12-18   17241   0

    使用Kubernetes來管理Docker擴展 經驗

    和CPU利用率的調度還有一些沒有修復的問題。還有整合 Apache Mesos的調度 也在緊鑼密鼓的進行中。Apache Mesos是一款分布式系統的框架,提供了資源管理的API,和跨整個數據中心或云環境的調度。

    jopen 2015-10-28   31984   0
    Docker  

    Docker結合OpenStack在思源的經驗分享 經驗

    面向容器的開發以及我們對Docker本身逐步的摸索,才敢真正把環境切換到Kubernetes/Mesos上來,進而推進Magnum。借用京東鮑永成的那句話:”讓能夠接受新世界的團隊慢慢先適應“。

    jopen 2016-01-06   51428   0

    分布式機器學習的故事 資訊

    這個問題,現在有了YARN操作系統。(YARN是一個仿照UC Berkeley AMPLab的Mesos做的系統。關于這個“模仿”,又有另一個故事。) 故事 pLSA和MPI 我2007年畢業后加

    jopen 2014-01-22   30102   0

    專訪王峰:Hadoop生態下一代計算引擎-streaming和batch的統一 資訊

    基本比較通用了,沒有必要找替代物了,但YARN還有類似的系統,如Mesos。不過它與YARN理念不完全一樣,也有不少場景在用Mesos。 剛剛說,作為Hadoop生態系統最大的生長空間其實在于YA

    jopen 2016-03-02   33897   0
    Hadoop  
    P10

      大數據平臺技術框架選型分析 文檔

    HDFS GFS在Hadoop中的實現 資源管理 Twitter Mesos Google Borg的翻版 Hadoop Yarn 類似于Mesos 日志收集系統 Facebook Scribe Facebo

    guet_lee 2017-01-12   675   0

    三年后,我們從 Docker 轉到了 RKT 經驗

    Docker 正在嘗試將 Swarm 融入到 DockerCore,以此來打擊 Kubernetes,Mesos,Marathon 和 Nomad。 Docker 確實有簡化 Swarm,使它輕松被廣大 Docker

    GerardoWolf 2016-09-14   18020   0
    Docker  

    張逸:并行分布式計算框架Spark的現狀與未來發展 資訊

    、交互式、流處理等多種方式;而從大數據平臺而言,已有成熟的 Hadoop、Cassandra、Mesos 以及其他云的供應商。Spark 整合了主要的數據處理模型,并能夠很好地與現在主流的大數據平臺集成。下圖展現了

    jopen 2014-11-24   36172   1
    Spark  

    運維平臺規劃體系全介紹 資訊

    署到哪個IDC、哪個服務器,研發人員不用關心。后來Twitter根據Borg的思想,也開源實現了一個平臺——Mesos,不過Mesos對 LongTime的服務調度(如Nginx)支持不是太好,更適合MapReduce的事

    jopen 2015-05-30   26874   0
    平臺  
    P9

      Spark 筆記 文檔

    Spark程序運行過程 Spark 傳統上與Mesos“焦不離孟”,也可支持Amazon EC2和YARN。底層任務調度器的基類是個trait,它的不同實現可以混入實際的執行。例如,在Mesos上有兩種調度器實現,一種把每個節點的所有

    ylx1214 2015-04-18   1526   0

    三年后,我們從 Docker 轉到了 RKT 經驗

    Docker 正在嘗試將 Swarm 融入到 DockerCore,以此來打擊 Kubernetes,Mesos,Marathon 和 Nomad。 Docker 確實有簡化 Swarm,使它輕松被廣大 Docker

    yiyilove 2016-09-18   7805   0
    Docker  

    Awesome 干貨系列索引 經驗

    awesome-machine-learning awesome-meteor awesome-mesos by @dharmeshkakadia awesome-mesos by @parolkar awesome-nodejs by

    dwd4 2015-03-31   48958   0
    awesome  

    2018 年 Kubernetes 采用情況調查報告 經驗

    Kubernetes 進行容器編排。在明年,這個數據有望增長到 65%,而其他編排平臺(Docker Swarm,Mesos 等)的使用將會減少或保持不變。 對于 Kubernetes 支持的應用程序類型,有一種常見

    五嘎子 2018-12-13   16095   0

    再談容器標準:CoreOS總結OCI、CNCF和AppC的發展 資訊

    建容器,然后可以在rkt、Amazon EC2 Container Service(ECS)、Kubernetes或Mesos上運行,所有這些平臺都不需要重新打包。我們相信這是容器實現標準化最重要的一方面,所以我 們想就此繼續討論,誠邀來自社區的成員加入我們。

    jopen 2015-12-24   6680   0
    容器  

    一個虛擬化老兵的Docker淺見 經驗

    不深刻。 可以明顯看出分為三個陣容:基于IaaS云平臺,基于Kubernetes,基于Mesos;單從數量上看勢均力敵。為什么會這樣,筆者認為第一Docker還在迅速發展過程中,到底怎么做大家

    RonniePring 2016-02-06   24305   0
    Docker  
    1 2 3 4 5 6 7 8 9 10
  • sesese色