面對大量用戶訪問、高并發請求，海量數據，可以使用高性能的服務器、大型數據庫，存儲設備，高性能Web服務器，采用高效率的編程語言比如(Go,Scala)等，當單機容量達到極限時，我們需要考慮業務拆分和分布式部署，來解決大型網站訪問量大，并發量高，海量數據的問題。

針對海量消息所要求的橫向擴展性和系統的高可用性，ActiveMQ提供了網絡連接模式的集群功能。簡單的說，就是通過把多個不同的broker實例連接在一起，作為一個整體對外提供服務，從而提高整體對外的消息服務能力。通過這種方式連接在一起的broker實例之間，可以共享隊列和消費者列表，從而達到分布式隊列的目的。

MongoDB是一個介于關系數據庫和非關系數據庫之間的產品，是非關系數據庫當中最像關系數據庫的。支持類似于面向對象的查詢語言，幾乎可 以實現類似關系數據庫單表查詢的絕大部分功能，而且還支持對數據建立索引。本文介紹了如何使用Docker搭建MongoDB集群。

Hadop是一種分布式系統基礎架構，由Apache基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序，充分利用集群的威力高速運算和存儲。

Topic是Kafka對消息的邏輯歸類，也是消息存儲的物理意義；而partition的存在，是為了避免磁盤沒有做任何raid而進行邏輯到物理上的分區概念；Log是一個topic下某一個分區的消息的邏輯概念，它由多個Segment組成

WebSphere MQ 是WebSphere 家族的一種消息中間件產品。它為客戶提供了安全，可靠，便捷的消息異步傳輸的平臺。 本文主要介紹WebSphere MQ 群集的配置和驗證方法。MQ群集為客戶提供了靈活的擴展性。它可以根據用戶的需要，隨時增加或減少群集成員，而不會影響到整個群集的可用性。在某一個系統宕機或出現網絡故障的情況下，位于群集中的其他成員可以無縫的接管該系統負責的業務，避免系統的單點故障。

集群有別于分布式的解決方案，它采用的是每臺服務器運行相同應用的策略，由負責平衡的服務器進行分流，這對提高整個系統的并發量及吞吐量是更有效的辦法。而集群對請求的處理又有兩種不同的方式：負載平衡、狀態復制(即集群)，狀態復制需要在各服務器間復制應用狀態，而負載平衡則不用，每臺服務器都是獨立的。實踐證明，在各應用服務器之間不需要狀態復制的情況下，負載平衡可以達到性能的線性增長及更高的并發需求。

LVS是Linux Virtual Server的簡稱，也就是Linux虛擬服務器, 是一個由章文嵩博士發起的自由軟件項目，它的官方站點是www.linuxvirtualserver.org。現在LVS已經是 Linux標準內核的一部分，在Linux2.4內核以前，使用LVS時必須要重新編譯內核以支持LVS功能模塊，但是從Linux2.4內核以后，已經完全內置了LVS的各個功能模塊，無需給內核打 任何補丁，可以直接使用LVS提供的各種功能。 使用LVS技術要達到的目標是：通過LVS提供的負載均衡技術和Linux操作系統實現一個高性能、高可用的服務器群集，它具有良好可靠性、可擴展性和可操作性。從而以低廉的成本實現最優的服務性能。

HAProxy提供高可用性、負載均衡以及基于TCP和HTTP應用的代理，支持虛擬主機，它是免費、快速并且可靠的一種解決方案。HAProxy特別適用于那些負載特大的web站點，這些站點通常又需要會話保持或七層處理。HAProxy運行在當前的硬件上，完全可以支持數以萬計的并發連接。并且它的運行模式使得它可以很簡單安全的整合進您當前的架構中，同時可以保護你的web服務器不被暴露到網絡上。什么是keepalivedkeepalived是一個類似于layer3,4&5交換機制的軟件，也就是我們平時說的第3層、第4層和第5層交換。

CM--集群管理與負載均衡系統五竹,搜索與算法目錄性能與應用2目錄背景介紹Clustermap(CM)--集群管理與負載均衡系統起源于淘寶商品搜索引擎.主要解決如下問題:如何知道服務節點(searcher)是否可用如何選取一行服務節點，并能保持各行之間的負載均衡如何選取某一列的一個節點不停服務的情況下，增減機器Before背景介紹伴隨著淘寶搜索業務的發展，CM面臨越來越多的挑戰：集群間的集群狀態管理與負載均衡的要求越來越多，如SP需要知道其下面的所有服務的拓撲和存活狀態.服務定位更復雜。

負載均衡基本概念1、什么是負載均衡?負載均衡技術在現有網絡結構之上提供了一種廉價、有效、透明的方法，來擴展網絡設備和服務器的帶寬、增加吞吐量、加強網絡數據處理能力、提高網絡的靈活性和可用性。它有兩方面的含義：首先，大量的并發訪問或數據流量分擔到多臺節點設備上分別處理，減少用戶等待響應的時間；其次，單個重負載的運算分擔到多臺節點設備上做并行處理，每個節點設備處理結束后，將結果匯總，返回給用戶，系統處理能力得到大幅度提高。BIG/IP利用定義在其上面的虛擬IP地址來為用戶的一個或多個應用服務器提供服務。

由于目前現有網絡的各個核心部分隨著業務量的提高，訪問量和數據流量的快速增長，其處理能力和計算強度也相應地增大，使得單一的服務器設備根本無法承擔。針對此情況而衍生出來的一種廉價有效透明的方法以擴展現有網絡設備和服務器的帶寬、增加吞吐量、加強網絡數據處理能力、提高網絡的靈活性和可用性的技術就是負載均衡（LoadBalance）。

Linux集群的研究及應用摘要：隨著計算機技術的發展和越來越廣泛的應用,人們對計算機的依賴程度也越來越高。計算機的可靠性和可用性也變得越來越重要了。盡管單臺計算機的性能和可靠性越來越好,但還是有許多現實的要求是單臺計算機難以達到的。計算機集群技術就是將多臺計算機組織起來進行協同工作來模擬一臺功能更強大的計算機的技術。本文首先對現有服務器集群系統的技術進行了分析,介紹了幾個典型的集群系統,重點討論了負載均衡集群（LVS）和高可用集群(HighAvailability)的工作原理和實現技術。然后根據現有的集群技術的缺點進行了改進，將負載均衡集群和高可用集群整合在一起，結合Linux軟件RAID5技術實現了三層構架的WWW服務器集群，以較低的價格達到了昂貴的商業硬件存儲解決方案所實現的效果。

隨著你的網站業務量的增長你網站的服務器壓力越來越大？需要負載均衡方案！商業的硬件如F5又太貴，你們又是創業型互聯公司如何有效節約成本，節省不必要的浪費？同時實現商業硬件一樣的高性能高可用的功能？有什么好的負載均衡可伸張可擴展的方案嗎？答案是肯定的！有！我們利用LVS+Keepalived基于完整開源軟件的架構可以為你提供一個負載均衡及高可用的服務器。

SDN控制器集群中的分布式技術實踐

heartbeat:心跳功能,或者雙機熱備,雙機雙備,雙機互備.如下圖片,內網IP地址負責心跳檢測環境:A主機器外網網卡192.168.1.56內網網卡

服務器集群技術簡介FrankHe背景長期以來，科學計算、數據中心等領域一直是高端RISC服務器的天下，用戶只能選擇IBM、SGI、SUN、HP等公司的產品，不但價格昂貴，而且運行、維護成本高。隨著Internet服務和電子商務的迅速發展，計算機系統的重要性日益上升，對服務器可伸縮性和高可用性的要求也變得越來越高。RISC系統高昂的代價和社會旺盛的需求形成強烈的反差。集群技術的出現和IA架構服務器的快速發展為社會的需求提供了新的選擇。

Heartbeat 專案是 Linux-HA 工程的一個組成部分，也是目前開源HA項目中最成功的一個例子，Linux-HA的全稱是High-Availability Linux，這個開源專案的目標是：通過社區開發者的共同努力，提供一個增強linux可靠性（reliability）、可用性（availability）和可服務性（serviceability）（RAS）的群集解決方案，它實現了一個高可用集群系統。心跳服務和集群通信是高可用集群的兩個關鍵元件，在 Heartbeat 專案裡，由 heartbeat 模組實現了這兩個功能。