• 統一數據分析接口,Apache Lens 2.2.0-beta-incubating 發布 資訊

    該項目主要特性: 簡單元數據層為數據存儲提供抽象視圖層 單一的共享模式服務器,基于 Hive 元存儲。模式通過數據管道 HCatalog 和分析應用進行共享: OLAP Cube QL

    jopen 2015-07-17   12057   0

    Spark 1.2.1穩定版本發布(released) 資訊

    和Spark進行鏈接時出現的字節碼錯誤 (SPARK-2075) 3、SQL 在Hive UDFs中使用 CACHE TABLE AS SELECT 失敗 (SPARK-5187);

    jopen 2015-02-09   20834   0
    Spark  

    統一數據分析接口:Apache Lens 經驗

    該項目主要特性: 簡單元數據層為數據存儲提供抽象視圖層 單一的共享模式服務器,基于 Hive 元存儲。模式通過數據管道 HCatalog 和分析應用進行共享: OLAP Cube QL

    jopen 2015-03-05   40651   0

    Spark性能調優之道——解決Spark數據傾斜(Data Skew)的N種姿勢 經驗

    builder() .appName("SparkDataSkewTunning") .config("hive.metastore.uris", "thrift://hadoop1:9083") .enableHiveSupport()

    thesame 2017-04-12   24706   0

    Spark SQL中對Json支持的詳細介紹 經驗

    "address":{"city":null, "state":"California"}} 在類似于Hive的系統中,這些JSON對象往往作為一個值儲存到單個的列中,如果需要訪問這個數據,我們需要使用UD

    jopen 2015-02-04   71241   0

    十八款Hadoop工具幫你馴服大數據 資訊

    造的圖形用戶界面客戶端)的截圖。 Hive 將數據導入集群還只是大數據分析的第一步。接下來我們需要提取HBase中來自文件的所有數據內容,而Hive的設計初衷在于規范這一提取流 程。它提供

    jopen 2015-03-17   24523   1
    Hadoop  
    P12

      Trafodion Technical Whitepaper 文檔

    ..................... 6 Integrating with native Hive and HBase data stores .........................

    zyang1989 2014-10-23   3074   0

    每天近百億條用戶數據,攜程大數據高并發應用架構涅槃 經驗

    ,異構化 ,接入的業務線、合作公司的數據源越來越多;接入的數據結構由以前的數據庫結構化數據整合轉為Hive表、評論文本數據、日志數據、天氣數據、網頁數據等多元化異構數據整合。 4)業務的高速發展和迭代

    陳超:Spark這一年,從開源到火爆 資訊

    ark Summit 2014上宣布Shark已經完成了其學術使命,且Shark的整體設計架構對Hive的依賴性太強,難以支持其長遠發展,所以決定終止Shark開發, 全面轉向Spark SQL。Spark

    jopen 2015-03-10   34447   0
    Spark  

    每天TB級數據處理,攜程大數據高并發應用架構涅槃 經驗

    ,異構化,接入的業務線、合作公司的數據源越來越多;接入的數據結構由以前的數據庫結構化數據整合轉為Hive表、評論文本數據、日志數據、天氣數據、網頁數據等多元化異構數據整合。 4) 業務的高速發展和迭代

    Databircks連城:Spark SQL結構化數據分析 經驗

    心使用了。 作為Shark的繼任者,Spark SQL的主要功能之一便是訪問現存的Hive數據。在與Hive進行集成的同時,Spark SQL也提供了JDBC/ODBC接口。Tableau、Qli

    jopen 2015-06-18   24182   0

    十八款Hadoop工具幫你馴服大數據 經驗

    造的圖形用戶界面客戶端)的截圖。 Hive 將數據導入集群還只是大數據分析的第一步。接下來我們需要提取HBase中來自文件的所有數據內容,而Hive的設計初衷在于規范這一提取流程。它提供一

    jopen 2015-03-19   29675   0

    從Hadoop到Spark的架構實踐 經驗

    模型以及Shark都讓人眼前一亮。同時期我們關注的還有Impala,但對比Spark,Impala可以理解為對Hive的升級,而Spark則嘗試 圍繞RDD建立一個用于大數據處理的生態系統。對于一家數據量高速增長,

    jopen 2015-06-08   49372   0
    P9

      HBase 技術介紹簡介 NOSQL數據庫 入門 文檔

    的計算能力,Zookeeper為HBase提供了穩定服務和failover機制。 此外,Pig和Hive還為HBase提供了高層語言支持,使得在HBase上進行數據統計處理變的非常簡單。 Sqoop則

    fyhbbs 2013-05-30   489   0
    P8

      HBase 簡介 文檔

    的計算能力,Zookeeper為HBase提供了穩定服務和failover機制。 此外,Pig和Hive還為HBase提供了高層語言支持,使得在HBase上進行數據統計處理變的非常簡單。 Sqoop則

    songyl525 2013-12-11   3157   0
    P9

      HBase 技術介紹 文檔

    的計算能力,Zookeeper為HBase提供了穩定服務和failover機制。 此外,Pig和Hive還為HBase提供了高層語言支持,使得在HBase上進行數據統計處理變的非常簡單。 Sqoop則

    hypermusic 2013-05-30   3005   0
    P13

      Hadoop:分布式大數據處理架構 文檔

    op上的復雜任務,例如:Apache Mahout、Flume、Sqoop、Pig、Oozie、Hive、HBase、ZooKeeper、Whirr等。同時Cloudera也是目前最大的提供企業Had

    xcxc 2015-08-24   614   0

    HBase技術詳細介紹 經驗

    算能力,Zookeeper為HBase提供了穩定服務和failover機制。 此外,Pig和Hive還為HBase提供了高層語言支持,使得在HBase上進行數據統計處理變的非常簡單。 Sqoop則

    fmms 2012-02-08   128579   0

    大數據平臺CDH集群離線搭建 經驗

    26]$ ./bin/mysql -uroot -p'123456' #hive mysql> create database hive DEFAULT CHARSET utf8 COLLATE utf8_general_ci;

    jopen 2016-01-19   25575   0
    P20

      以hadoop入門大數據之hadoop階段 文檔

    Hadoop階段一目標及計劃hadoop產生背景hadoop架構hadoop生態hadoop環境搭建hive、hbase等子項目什么是hadoophadoop應用場景hadoop、Spark Stream

    364337403 2017-03-28   11360   0
    1 2 3 4 5 6 7 8 9 10
  • sesese色