• Elasticsearch、MongoDB和Hadoop比較 經驗

    引擎,它們存儲著JSON文 檔,MongoDB存著JSON文檔,或者一堆JSON文檔存放在一個Hadoop集群的HDFS中。你可以使用這三種配置完成很多同樣的事情。 ES是否可以作為一個NoSQL

    jopen 2015-05-12   22864   0

    hadoop作業調優參數整理及原理 經驗

    觀。 當采用map中間結果壓縮的情況下,用戶還可以選擇壓縮時采用哪種壓縮格式進行壓縮,現在hadoop支持的壓縮格式有:GzipCodec,LzoCodec,BZip2Codec,LzmaCode

    mq2126 2016-01-21   9102   0

    Hadoop和Spark框架的異同 經驗

    談到大數據,相信大家對Hadoop和Apache Spark這兩個名字并不陌生。但我們往往對它們的理解只是停留在字面上,并沒有對它們進行深入的思考,下面不妨跟我一塊看下它們究竟有什么異同。 1 解決問題的層面不一樣

    oxzr6054 2016-09-02   14060   0

    Apache Hadoop 2.0 Alpha 發布 資訊

    Hadoop并不僅僅是一個用于存儲的分布式文件系統,而是設計用來在由通用計算設備組成的大型集群上執行分布式應用的框架。 Apache Hadoop 2.0 今天發布了首個 alpha 版本,該版本

    jopen 2012-05-27   18210   1

    Apache Hadoop 2.3.0發布 資訊

    分布式計算開源框架Hadoop近日發布了今年的第一個版本Hadoop-2.3.0,新版本不僅增強了核心平臺的大量功能,同時還修復了大量bug。 新版本對HDFS做了兩個非常重要的增強: 支持異構的存儲層次

    jopen 2014-02-27   10093   0

    Apache擬在Docker中運行Hadoop 資訊

    Apache 在其 Hadoop 維基百科發布了一個 頁面 ,主要整理了 Docker 中運行 Hadoop 的好處,以及要完全在 Docker 中運行 Hadoop 所需要完成的工作。在 Docker,或者說其它容器中運行

    jopen 2014-09-04   8223   0
    Hadoop   Docker  

    Hunk/Hadoop: 性能最佳實踐 資訊

    com/cn/news/2015/09/Hunk-Performance 無論有沒有使用Hunk,當運行Hadoop時,有很多種方式導致偶爾的性能底下。多數時候人們是增加更多的硬件來解決問題,但是有時候只需要簡單更改下文件的名稱就可以解決問題。

    jopen 2015-09-28   5966   0
    Hadoop  

    Spark和Hadoop,孰優孰劣? 資訊

    http://www.infoq.com/cn/news/2015/12/Spark-Hadoop-HDFS Spark 已經取代 Hadoop 成為最活躍的開源大數據項目。但是,在選擇大數據框架時,企業不能因此就厚此薄彼。近日,著名大數據專家

    jopen 2015-11-30   16341   0
    Spark  
    P9

      8步安裝好你的hadoop 文檔

    三個節點,先定義好主機名!!!!!這步很重要 分別是hadoop1 , hadoop2 , hadoop3 2 在所有節點上創建密鑰對 hadoop106#ssh-keygen -t rsa hadoop114#ssh-keygen

    lwg32719 2014-06-07   2110   0
    P33

      Hadoop與HBase自學筆記 文檔

    ?思數科技引領未來 www.bihuman.com Hadoop與HBase自學筆記 1、 安裝jdk 安裝eclipse時已經提過,這里略,使用jdk1.6.0_12版本。 2、 安裝Cygwin以及相關服務

    ka520 2015-11-14   1170   0
    P5

      How To Write Map-Reduce On Hadoop 文檔

    ?How To Write Map-Reduce On Hadoop 概述 Hadoop Map-Reduce是一個使用簡易的軟件框架,基于它寫出來的應用程序能夠運行在 由上千個商用機器組成的大型集群

    thinkingx 2011-12-15   4828   0
    P6

      Hadoop 學習總結之一:HDFS簡介 文檔

    ?一、HDFS的基本概念 1.1、數據塊(block) · HDFS(Hadoop Distributed File System)默認的最基本的存儲單位是64M的數據塊。 · 和普通文件系統相同的是

    huafenged 2012-02-24   3626   0

    Hadoop Outputformat淺析(轉) 博客

    Hadoop Outputformat淺析 (轉) 分類: 大數據技術 hadoop 作業 string path 存儲 null 目錄 (?) [-] 相關廠商內容 OutputFormats是做什么的

    cnzebra 2013-06-27   473   0
    P9

      Hadoop 集群搭建文檔 文檔

    ?Hadoop集群搭建文檔 環境: Win7系統裝虛擬機 虛擬機VMware-workstation-full-9.0.0-812388.exe Linux系統 Ubuntu12.0.4 JDK jdk-7u17-linux-i586

    cbxw 2015-01-07   1752   0
    P15

      基于Hadoop的研究及性能分析 文檔

    ? 基于Hadoop的研究及性能分析 摘要 在大數據到來的今天,本文首先介紹了Hadoop及其核心技術MapReduce的工作原理。詳細討論了Hadoop推測執行算法和SALS推測執行算法并對它們的性

    mn6e 2015-05-25   2824   0
    P9

      Hadoop 集群搭建文檔 文檔

    ?Hadoop集群搭建文檔 環境: Win7系統裝虛擬機 虛擬機VMware-workstation-full-9.0.0-812388.exe Linux系統 Ubuntu12.0.4 JDK jdk-7u17-linux-i586

    774318955 2014-04-28   2885   0
    P4

      Hadoop-0.20.2連接MySQL 文檔

    ?Hadoop-0.20.2 連接MySQL 一、 背景 為了方便Mapreduce直接訪問關系型數據庫(Mysql,Oracle),Hadoop提供了DBInputFormat和DBOutputFO

    baisonghh 2013-01-04   4610   0
    P23

      Hadoop源代碼分析(MapReduce概論) 文檔

    ?2009-02-21 Hadoop源代碼分析(MapReduce概論) 大家都熟悉文件系統,在對HDFS進行分析前,我們并沒有花很多的時間去介紹HDFS的背景,畢竟大家對文件系統的還是有一定的理解的

    suncf1985 2014-05-08   2043   0

    Hadoop快速部署工具 EasyHadoop 經驗

    EasyHadoop 是一個Hadoop一鍵安裝腳本,方便大家更容易安裝部署Hadoop軟件。 EasyHadoop 源自 暴風影音 Hadoop數據平臺項目而來,由暴風影音數據團隊 修湘同學 調研

    fmms 2012-02-19   48321   0

    hadoop執行分布式Process 經驗

    。 1.java API 里有個Process類,它可以去調用sqluldr2。 2.hadoop的map-reduce可以讓每個節點都去運行sqluldr2,然后轉化成HBase格式進行pu

    openkk 2012-08-31   22642   0
    1 2 3 4 5 6 7 8 9 10
  • sesese色