• hadoop 網站日志分析 經驗

    x、tomcat等產生的用戶訪問日志,以及各種Web應用程序自己輸出的日志。 二、需求分析: KPI指標設計 PV(PageView): 頁面訪問量統計 IP: 頁面獨立IP的訪問量統計

    jopen 2014-03-26   19031   0
    P12

      Hadoop 0.20.0 源碼流程分析 文檔

    ?Hadoop源碼以及流程解析 整體結構 DN: Configuration,JobClient,JobConf Master:JobTracker,JobInProgress,TaskInProgress

    sweetbaybe 2012-12-24   2501   0

    基于Hadoop的海量圖片存儲模型 的分析和設計 經驗

    squid實現負載的降低和提高用戶訪問速度。這里我們采用Hadoop作為我們設計圖片存儲系統的基礎,一方面是因為Hadoop開源的特性,方便我們根據業務需求做一些源代碼方面的改善;令一方面,Hadoop可以部署在廉價的PC上,通過

    jopen 2014-01-02   84435   0
    Hadoop  

    基于Hadoop的大規模數據分析平臺:Apache Pig 經驗

    Pig是一個基于Hadoop的大規模數據分析平臺,它提供的SQL-LIKE語言叫Pig Latin,該語言的編譯器會把類SQL的數據分析請求轉換為一系列經過優化處理的MapReduce運算。Pig為復

    jopen 2013-04-03   21109   0

    基于Hadoop MapReduce模型的數據分析平臺研究設計 經驗

    36dsj.com/archives/28713 前言 拖了5天終于看完了兩篇論文,對相關數據分析平臺搭建技術也有了進一步的了解。對自己這幾天的筆記做了一個整理,既是為了方便自己以后查看,也是為以

    d3fw 2015-04-28   48832   0

    基于Hadoop的大規模網絡流量分析 經驗

    在網絡流量的分析中,基于流的分析被大多數ISP所采用,分析系統一般部 署在一臺高配置的服務器中。如由CERT網絡勢態感知團隊(CERT-NetSA)開發的用于大規模網絡安全分析的網絡交互分析工具集 SILK(the

    jopen 2015-07-30   14958   0

    Cascading - 基于Hadoop的數據管理和分析框架 經驗

    Cascading是一個應用程序框架,能夠幫助開發人員快速開發基于 Apache Hadoop 的 健壯數據分析和數據管理應用程序。 項目主頁: http://www.open-open

    openkk 2012-06-09   26819   0

    Kylin:基于Hadoop的開源數據倉庫OLAP分析引擎 經驗

    Kylin是一個開源、分布式的OLAP分析引擎,它由eBay公司開發,并且基于Hadoop提供了SQL接口和OLAP接口,能夠支持TB到 PB級別的數據量。OLAP即聯機分析處理,它能夠幫助分析人員、管理人員或執行人

    jopen 2014-12-02   33465   0

    BigInsights:解讀IBM基于Hadoop的數據分析平臺 資訊

    處理在今年的市場規模已經達到 700 億美元并且正以每年 15-20% 的速度增長。幾乎所有主要的科技公司都對大數據感興趣,對該領域的產品及服務進行了大量投入。其中包括了 IBM、Oracel、EM

    openkk 2012-02-25   30861   0
    Hadoop  

    基于twisted實現的智能dns系統:smartdns 經驗

    smartdns 是 python 語言編寫,基于 twisted 框架實現的dns server,能夠支持針對不同的dns請求根據配置返回不同的解析結果。smartdns獲取dns請求的源IP或者客戶端IP(支持edns協議的請

    jopen 2014-01-06   18380   0
    P3

      基于Eclipse的Hadoop編程環境配置 文檔

    ?基于Eclipse的Hadoop開發環境配置 廢話少說,先說一下開發環境版本。 ???? Hadoop: Apache Hadoop-0.20.0 ???? Eclipse: Eclipse 3.4

    lenhan12345 2012-11-27   379   0

    Cloudbreak - 基于Hadoop的Docker service API 經驗

    Cloudbreak 是首個基于hadoop的docker service API。 Cloudbreak 建立于 Apache Ambari , Docker containers, Serf 和 dnsmasq

    jopen 2014-08-24   15444   0

    基于hadoop 網絡爬蟲 經驗

    一。hadoop作網絡爬蟲的原因 爬蟲程序的海量計算特性要求必須要用分布式方式來實現。一般爬蟲爬取的是整個互聯網上的所有或部分數據,這個數據量一般是P byte級,至少也是T byte級,因此

    jopen 2013-12-26   84009   0

    基于Hadoop的數據收集系統 - Chukwa 經驗

    Chukwa,簡單的說它是一個數據收集系統,它可以將各種各樣類型的數據收集成適合 Hadoop 處理的文件保存在 HDFS 中供 Hadoop 進行各種 MapReduce 操作。Chukwa 本身也提供了很多內

    openkk 2012-02-27   44721   0
    P26

      基于Hadoop的電影推薦系統 文檔

    1. 基于Hadoop的電影推薦系統 答辯者:李婷婷 指導老師:師智斌 2. Hadoop在大型內容推薦系統中的應用? 背景 ? 推薦效果 ? 技術選型 ? 技術實現 ? 推薦系統的評測 ? Hadoop&Hive使用經驗

    基于Hadoop的實時查詢:Cloudera Impala 經驗

    Cloudera 發布實時查詢開源項目 Impala (黑斑羚)!多款產品實測表明,比原來基于MapReduce的Hive SQL查詢速度提升3~90倍。Impala是Google Dremel的模仿,但在SQL功能上青出于藍勝于藍。

    jopen 2012-10-24   35447   0

    Roslyn項目分析代碼 資訊

    Redmond 召開了 Lang.NEXT 大會,會上有一個演講,演示了 Roslyn 項目這個代碼分析工具。Dustin Campbell 的演講“更深入了解 Roslyn 項目”對它做了 介紹 ,并以一個示例項目代碼的構建作為結束。

    fmms 2012-04-28   10851   1
    Roslyn  

    MapReduce做相似度分析 經驗

    控日志等等” 2 ?"對于這些日志的離線分析Hadoop),wget&rsync雖然人力維護成本較高,但可以滿足功能行需求。但對于這些日志的實時分析需求(例如實時推薦,監控系統),則往往必須要引入一些“高大上”的系統"

    jopen 2013-12-23   11168   0
    P139

      軟件需求分析 文檔

    1. 軟件需求分析張 恂 2011-3-17 www.zhangxun.com info@zhangxun.com 2. 自我介紹資深軟件工程顧問和教練 軟件需求和分析專家 1998 開始研究

    lingli1031 2012-06-23   2360   0
    方案   報告   演講  
    P14

      ASP.Net MVC4中調用Web API的四個方法 文檔

    ?ASP.NET MVC4中調WEB API的四個方法 當今的軟件開發中,設計軟件的服務並將其通過絡對外發布,讓各種客戶端去使用服務已經是十分普遍的做法。就.NET而言,目前提供了Remoting

    martinmvc5 2015-04-18   878   0
    1 2 3 4 5 6 7 8 9 10
  • sesese色