• 開源大數據處理工具匯總(下) 經驗

    3、完全的分布式系統,broker、producer、consumer都原生自動支持分布式。自動實現復雜均衡。 4、內核非常小,整個系統(包括服務端和客戶端)只有一個272KB的jar包,內部機制也不復雜,適合進行內嵌或者二次開發

    jopen 2016-01-05   77527   0

    Redis 集群方案 經驗

    1000M網卡跑滿,速度受網卡速度限制 處理速度與包大小大概關系如下: 1.2 多實例測試 前提是系統網卡軟中斷均衡到多CPU核心處理,測試機器網卡開啟RSS,有16個隊列: 操作:10字節Value SET,

    jopen 2015-03-18   19526   0

    redis集群方案 經驗

    1000M網卡跑滿,速度受網卡速度限制 處理速度與包大小大概關系如下: 1.2 多實例測試 前提是系統網卡軟中斷均衡到多CPU核心處理,測試機器網卡開啟RSS,有16個隊列: 操作:10字節Value SET,

    jopen 2013-12-09   35775   0

    Cassandra-無中心化結構存儲系統 經驗

    。除了實際的數據持久化組件之外,系統還需要有以下特性;可擴展性和強大的負載均衡,會員和故 障檢測,故障修復,副本同步,負載均衡,狀態轉移,并發和作業調度,請求編組,請求路由,系統監控和報警以及配置管理。每種解決方法詳細描述都超出了本文

    jopen 2013-10-24   37563   0
    P21

      hbase 文檔

    4. hbase命令 4 4.1. 命令的進退 4 4.2. 命令 5 5. hbase依賴zookeeper 6 6. hbase開發 6 6.1. 配置 6 6.2. 表管理類 7 6.3. 表描述類

    q943768628 2018-04-02   1512   0

    非關系性分布式數據庫:HBase 經驗

    ase的支持情況: HDFS:高可靠的底層存儲支持 MapReduce:高性能的計算能力 Zookeeper:穩定服務和failover機制 Pig&Hive:高層語言支持,便于數據統計 Sqoop:

    jopen 2014-12-03   22768   0

    Docker集群中服務發現工具的概念及優勢 經驗

    當一個服務的消費者上線時,它能夠在預設的終端查詢該服務的相關信息。然后它就可以基于查到的信息與其需要的組件進行交互。負載均衡就是一個很好的例子,它可以通過查詢服務發現門戶得到各個后端節點承受的流量數,然后根據這個信息來調整配置。

    jopen 2015-03-21   17460   0
    Docker  

    大型網站架構系列:分布式消息隊列(一) 經驗

    2日志收集系統 分為Zookeeper注冊中心,日志收集客戶端,Kafka集群和Storm集群(OtherApp)四部分組成。 Zookeeper注冊中心,提出負載均衡和地址查找服務; 日志收集

    免費教程 2016-03-30   22182   0
    P36

      分布式MySQL總結 文檔

    數據切分帶來的問題跨庫和跨表查詢 跨庫join 結果集合并 結果集排序 全局自增id Sequence服務 Zookeeper? 分布式事務 13. 跨表和跨庫查詢應用層query cache(跨表,跨庫) 利用merge引擎和partion表(跨表)

    根號二 2012-10-26   11049   0

    分布式設計與開發------幾種必須了解的分布式算法 經驗

    google chubby ,不過看不了源碼。開源的實現可見 libpaxos 。另外, ZooKeeper 也基于paxos解決數據一致性問題,也可以看看它是如果實現paxos的。 4)適用場景

    p4cf 2015-11-29   18082   0

    adminer 3.70 特別定制版發布,似于phpMyAdmin的MySQL管理客戶端 資訊

    html代碼標準化修改. 3: 增加Query log 功能, 可列表當前執行的所有語句. 下地址: http://www.fenanr.com/read/112033.html

    jopen 2013-05-28   6067   0
    adminer  

    SQL Server 2014 預覽版本將于本月發布 資訊

    Server 2014的重點包括效能的改善、支援混合雲端,以及提供更完整的商業智慧(BI)解決方案。 責SQL Server專案的微軟企業副總裁Quentin Clark於周三(6/5)舉行的TechEd

    jopen 2013-06-06   5495   0
    P35

      淘寶Metamorphosis介紹 文檔

    保存pull的偏移量offset 異常情況下的消息暫存和recover 利用zookeeper在同一個group的consumer之間做負載均衡 實時性取決于pull間隔,消費者處理能力差異不影響服務端 太多的無效pull請求可能浪費服務器資源

    narry 2012-03-19   368   0
    P35

      Metamorphosis 介紹 文檔

    保存pull的偏移量offset 異常情況下的消息暫存和recover 利用zookeeper在同一個group的consumer之間做負載均衡 實時性取決于pull間隔,消費者處理能力差異不影響服務端 太多的無效pull請求可能浪費服務器資源

    wzjgn 2014-06-11   762   0

    Android靜默安裝和靜默卸載代碼 代碼段

    jnitest", getApplicationContext())){ toast("卸成功"); }else{ toast("卸失敗"); } }; }.start(); } /** * 描述: 啟動 * @param

    andoid 2015-03-09   5733   0
    Android  

    LinkedIn是如何優化Kafka的 經驗

    開發新的Customer 目前的Kafka Customer客戶端依賴于 ZooKeeper ,這種依賴會產生一些大家所熟知的問題,包括ZooKeeper的使用缺乏安全性以及Customer實例之間可能會出現的 腦裂現象(split

    jopen 2015-09-22   18951   0
    P20

      Hadoop 主要子項目介紹 文檔

    hadoopSqoop Bigtable Nosql 2. Hadoop主要子項目介紹(Pig Zookeeper Hbase Sqoop Avro Chukwa Cassandra )Hive 現 在H

    706394187 2015-05-23   807   0

    Container技術一覽 經驗

    Docker Swarm內置了service discovery,也可以用etcd,Consul和ZooKeeper實現; CoreOS Open Source etcd:全局的分布式KV存儲,在CoreOS中用來實現service

    OdeSwint 2016-02-26   41817   0
    Docker   開源  

    QCon專訪彭淵:Fourinone是俄羅斯套娃中最小的一個 資訊

    并行計算框架,它集成了Hadoop、ZooKeeper、MQ、分布式緩存四大主要的分布式計算功能,Fourinone的功能強大用途廣泛,它實現了ZooKeeper的所有功能并進行了很多改進,它同時又提

    fourinone 2012-10-21   15218   0
    P5

      hbase性能調優 文檔

    ?配置優化zookeeper.session.timeout 默認值:3分鐘(180000ms) 說明:RegionServer與Zookeeper間的連接超時時間。當超時時間到后,ReigonSer

    beauty2003 2016-05-10   566   0
    1 2 3 4 5 6 7 8 9 10
  • sesese色