• Hadoop 與關系數據庫相互遷移,Apache Sqoop 1.99.4 發布 資訊

    Sqoop是一個用來將Hadoop和關系型數據庫中的數據相互轉移的工具,可以將一個關系型數據庫(例如 : MySQL ,Oracle ,Postgres等)中的數據導入到Hadoop的HDFS中,也可以將HDFS的數據導入到關系型數據庫中。

    jopen 2014-11-27   8376   0
    Hadoop  

    為什么如此難用?Hadoop 的 12 個技術痛點 資訊

    文章作者Andrew C. Oliver是一位專業的軟件顧問,同時還是北卡羅來納州達勒姆大數據咨詢公司Open Software Integrators的總裁和創始人。長時間的使用Hadoop,他發現了這12件事情真的影響了Hadoop的易用性。

    jopen 2014-10-27   8709   0
    Hadoop  

    Hadoop遭遇瓶頸的七大危險信號 資訊

    大多數企業大數據應用案例尚處于實驗和試點階段,對于少數首次在生產環境部署Hadoop系統的用戶來說,最常遇到的就是擴展問題,此類問題往往導致企業因噎廢食,終止大數據應用項目。

    jopen 2014-09-23   6890   0
    Hadoop  

    Apache Sqoop 1.99.5 發布,Hadoop 數據遷移 資訊

    Sqoop是一個用來將Hadoop和關系型數據庫中的數據相互轉移的工具,可以將一個關系型數據庫(例如 : MySQL ,Oracle ,Postgres等)中的數據導入到Hadoop的HDFS中,也可以將HDFS的數據導入到關系型數據庫中。

    jopen 2015-02-28   14190   0

    基于Hadoop的數據倉庫平臺,Apache Hive 1.2.1 發布 資訊

    Hive是一個基于Hadoop的數據倉庫平臺。通過hive,我們可以方便地進行ETL的工作。hive定義了一個類似于SQL的查詢語言:HQL,能 夠將用戶編寫的QL轉化為相應的Mapreduce程序基于Hadoop執行。

    jopen 2015-06-29   9747   0

    在Docker上使用Weave搭建Hadoop和Spark跨主機容器集群 資訊

    實際環境是開發使用的兩臺服務器,每個服務器上是三個集群容器節點,總共六個節點,使用weave實現跨主機的通信,并且利用小插件可以實現在局域網或者是在外網查看監控集群的webUI和開放7077等關鍵端口進行程序遠程調試功能。

    jopen 2016-02-24   36540   0
    Spark   Docker   Hadoop  
    P12

      Hadoop 和 HBase 分布式配置及整合 MyEclipse 開發 文檔

    說明:本文檔主要側重hadoop和hbase在windows下的開發.在linux上開發自行修改即可.

    caiyifeng 2012-11-17   10033   0

    光環國際公開課—Hadoop大數據處理技術及其實踐 問答

    光環國際公開課—Hadoop大數據處理技術及其實踐 開課時間:2015年1月16日、17日 咨詢電話:400-7060-559   010-846754957 課程內容采用遞進式,分為三個模塊分享: 模塊(一):全方位介紹大數據技術及hadoop系列工具開發技巧 大數據主

    3173130229 2014-12-28   14984   0
    數據庫   ci   云計算   C/C++  
    P31

      基于Hadoop生態技術構建阿里搜索離線系統 文檔

    目錄阿里搜索業務簡介搜索技術體系搜索離線系統實時計算方案集群優化與管理展望未來阿里搜索業務簡介搜索技術體系目錄阿里搜索業務簡介搜索技術體系搜索離線系統實時計算方案集群優化與管理展望未來離線系統—架構

    byc2 2014-11-19   1874   0

    Hadoop 進行分布式并行編程(一) 博客

    基本概念與安裝部署 級別:初級 曹羽中 ( caoyuz@cn.ibm.com ), 軟件工程師, IBM中國開發中心 2008 年 5 月 22 日 Hadoop 是一個實現了MapReduce 計算模型的開源分布式并行編程框架,借助于 Hadoop, 程序員可以輕松地編寫分布式并行程序,將其運行于計算機集群上,完成海量數據的計算。本文將介紹 MapReduce 計算模型,分布式并行計算等基本概

    Hadoopp 2012-09-28   1472   0

    Hadoop進行分布式并行編程(二) 博客

    程序實例與分析 Hadoop 是一個實現了MapReduce 計算模型的開源分布式并行編程框架,借助于Hadoop, 程序員可以輕松地編寫分布式并行程序,將其運行于計算機集群上,完成海量數據的計算。在本文中,詳細介紹了如何針對一個具體的并行計算任務,基于 Hadoop 編寫程序,如何使用 IBM MapReduce Tools 在 Eclipse 環境中編譯并運行 Hadoop 程序。 前言 在

    Hadoopp 2012-09-28   1535   0

    Hadoop 0.20的配置過程和配置文件(分布式) 博客

    在安裝Fedora 11的兩臺機器上的目錄結構一致,分別安裝JRE 6 Update 14,下載hadoop 0.20后解壓放在目錄/home/hadoop/下。hadoop包解壓以后的路徑名字是hadoop-0.20.0,建立一個軟鏈接指向這個目錄,方 便今后的升級,名字叫hadoop。修改/home/hadoop/hadoop/conf/hadoop-env.sh文件中的變量 JAVA_HOM

    Hadoopp 2012-09-28   1086   0
    P26

      hadoop學習總結之四:Map-Reduce的過程解析 文檔

    一、客戶端Map-Reduce的過程首先是由客戶端提交一個任務開始的。提交任務主要是通過JobClient.runJob(JobConf)靜態函數實現的。

    huafenged 2012-02-24   2954   0
    P18

      hadoop搭建與eclipse開發環境設置及遠程調試 文檔

    hadoop搭建與eclipse開發環境設置。 ――羅利輝前言1.1目標目的很簡單,為進行研究與學習,部署一個hadoop運行環境,并搭建一個hadoop開發與測試環境。具體目標是:在ubuntu系統上部署hadoop在windows上能夠使用eclipse連接ubuntu系統上部署的hadoop進行開發與測試1.2軟硬件要求注意:Hadoop版本和Eclipse版本請嚴格按照要求。

    li270606338 2013-08-28   4101   0

    Hadoop入門 - Linux下偽分布式計算的安裝與wordcount的實例展示 經驗

    本人是在ubuntu下進行實驗的,java和ssh安裝就不在這里講了,這兩個是必須要安裝的,好了我們進入主題安裝hadoop。

    fmms 2012-02-23   26987   0

    HCatalog - 基于Hadoop數據表和存儲管理服務 經驗

    Apache HCatalog是基于Apache Hadoop之上的數據表和存儲管理服務。

    openkk 2012-06-09   39460   0

    Hadoop 分布式文件系統:架構和設計 經驗

    Hadoop分布式文件系統(HDFS)被設計成適合運行在通用硬件(commodity hardware)上的分布式文件系統。它和現有的分布式文件系統有很多共同點。但同時,它和其他的分布式文件系統的區別也是很明顯的。HDFS是一個高 度容錯性的系統,適合部署在廉價的機器上。HDFS能提供高吞吐量的數據訪問,非常適合大規模數據集上的應用。

    jopen 2013-02-02   15835   0

    Hadoop -分布式環境搭建安裝配置 經驗

    Hadoop -分布式環境搭建安裝配置

    jopen 2014-02-25   19857   0

    微軟的開源 Hadoop 的 .NET SDK 開發包 經驗

    Microsoft .NET SDK For Hadoop 是個 Hadoop WebClient 的 .NET SDK。這個工具包提供 .NET API ,用來訪問 HDInsight 方面(HDFS,HCatalag,Oozie ,Ambari 和一些集成管理 Powershell 腳本)。

    jopen 2014-04-08   63765   0

    Hadoop MapReduce下一代 - 命令行Mini集群 經驗

    使用命令行接口運行Mini集群,用戶可以使用一個簡單的命令啟動或者停止一個單節點的Hadoop集群,不需要設置任何環境變量和管理配置文件。這個CLI Mini集群將會啟動Yarn/MapReduce和HDFS。

    jopen 2014-10-31   13426   0
    1 2 3 4 5 6 7 8 9 10
  • sesese色