早期我們和很多公司一樣使用的是zabbix監控， 應該說zabbix的功能還是蠻強大的。但是隨著公司的業務發展，我們很快發現有很多問題zabbix很難解決。

Corda is a decentralised database system in which nodes trust each other as little as possible.

目前為止，我們專注于如何創建、解釋和執行程序。在第一章中，我們學會使用函數作為組合和抽象的手段。第二章展示了如何使用數據結構和對象來表示和操作數據，以及向我們介紹了數據抽象的概念。在第三章中，我...

Apache Beam(原名Google DataFlow)是Google在2016年2月份貢獻給Apache基金會的Apache孵化項目，被認為是繼MapReduce，GFS和BigQuery...

現在，許多人都會與來自不同地方的人一起工作。當和你一起合作工作的人不在同一個辦公室里時，就會出現各種狀況。我一直在研究這些狀況，我研究它們的時間超過了十年。在大多數情況下，它可以被歸結為我們所面對的五大問題。

分布式系統是指： 通過網絡把多個組件連接起來，并提供組件之間消息傳遞和協作的系統。 分布式系統要解決的問題很多，異構、伸縮性、開放、安全、容錯等，但是基本問題是—— 提供組件之間消息通信 。沒有...

當一個互聯網業務獲得大眾歡迎的時候，最顯著碰到的技術問題，就是服務器非常繁忙。當每天有1000萬個用戶訪問你的網站時，無論你使用什么樣的服務器硬件，都不可能只用一臺機器就承載的了。因此，在互聯網...

隨著大數據時代的到來，分布式是解決大數據問題的一個主要手段，隨著越來越多的分布式的服務，如何在分布式的系統中對這些服務做協調變成了一個很棘手的問題。今天我們就來看看如何使用Python，利用開源...

Hadoop是大數據領域最流行的技術，但并非唯一。還有很多其他技術可用于解決大數據問題。除了Apache Hadoop外，另外9個大數據技術也是必須要了解的。

這篇文章主要來描述下 Google 是如何實現一套可靠的 分布式Cron服務 ，服務于內部那些需要絕大多數計算作業定時調度的團隊。 在這個系統的實踐過程中，我們收獲了很多，包括如何設計、如何實現...

標識（ID / Identifier）是無處不在的，生成標識的主體是人，那么它就是一個命名過程，如果是計算機，那么它就是一個生成過程。如何保證分布式系統下，并行生成標識的唯一與標識的命名空間有著密不可分的關系。

這是一個強大，但又輕量級的分布式爬蟲框架。jlitespider天生具有分布式的特點，各個worker之間需要通過一個或者多個消息隊列來連接。消息隊列我的選擇是 rabbitmq 。worker...

分布式鎖可以基于很多種方式實現，比如zookeeper、redis...。不管哪種方式，他的 基本原理 是不變的： 用一個狀態值表示鎖，對鎖的占用和釋放通過狀態值來標識。

隨著互聯網信息技術的飛速發展，數據量不斷增大，業務邏輯也日趨復雜，對系統的高并發訪問、海量數據處理的場景也越來越多。如何用較低成本實現系統的高可用、易伸縮、可擴展等目標就顯得越發重要。為了解決這...

通常情況下，Tomcat、Jetty等Servlet容器，會默認將Session保存在內存中。如果是單個服務器實例的應用，將Session保存在服務器內存中是一個非常好的方案。但是這種方案有一個...

一個復雜的分布式爬蟲系統由很多的模塊組成，每個模塊是一個獨立的服務(SOA架構)，所有的服務都注冊到Zookeeper來統一管理和便于線上擴展。模塊之間通過thrift(或是protobuf，或...

數據服務的高可用性只能通過第二種方法來完成——數據的冗余存儲 。 但是，加入更多的機器，會讓我們的數據服務變得很復雜，尤其是跨服務器的事務處理，也就是跨服務器的數據一致性。

在分布式大行其道的今天，我們在系統內部、平臺之間廣泛運用消息中間件進行數據交換及解耦。CMQ是騰訊云內部自研基于的高可靠、強一致、可擴展分布式消息隊列，在騰訊內部包括微信手機QQ業務紅包、騰訊話...

在分布式大行其道的今天，我們在系統內部、平臺之間廣泛運用消息中間件進行數據交換及解耦。CMQ是騰訊云內部自研基于的高可靠、強一致、可擴展分布式消息隊列，在騰訊內部包括微信手機QQ業務紅包、騰訊話...

毫秒服務引擎（msec, 取英文名Mass Service Engine in Cluster的首字母組合）是騰訊的一個開源框架，適用于在廉價機器組成的集群上開發和運營分布式后臺服務。毫秒服務引...