微博產品后端服務團隊在資源受限情況下基于Tsung提供了一套開箱即用的100萬用戶性能壓測工具套件，推動兩名能力和經驗都欠缺的中初級工程師，不但順利完成支持海量用戶的在線聊天室項目任務，同時保...

新手向，基于Redis構建的分布式爬蟲。 以爬取考研網的貼子為例，利用 PyQuery, lxml 進行解析，將符合要求的文章文本存入MySQ數據庫中。

采用Java實現的基于netty輕量的高性能分布式RPC服務框架。實現了RPC的基本功能，開發者也可以自定義擴展，簡單，易用，高效。

在又拍云，即使是 應用層服務 也依賴到其他服務，而那些服務又依賴到了更多服務。當一個接口超時時，定位接口的性能瓶頸是困難的。

本文詳細的介紹了分布式數據管理的各種舉措和一些應用案例，具有很強的實戰指導作用。

對于希望監視復雜的 微服務架構 系統的組織，分布式追蹤正在快速成為一種不可或缺的工具。Uber工程團隊的開源分布式追蹤系統 Jaeger 自2016年起，在公司內部實現了大范圍的運用，已經集成于...

XXL-JOB是一個輕量級分布式任務調度框架，其核心設計目標是開發迅速、學習簡單、輕量級、易擴展。現已開放源代碼并接入多家公司線上產品線，開箱即用。

一提起“分布式系統”，大家的第一感覺就是好高大上啊，深不可測，看各類大牛關于分布式系統的演講或者書籍，也大多是一臉懵逼。本文期望用淺顯易懂的大白話來就什么是分布式系統、分布式系統有哪些優勢、分布...

在爬蟲的開發過程中，有些業務場景需要同時抓取幾百個甚至上千個網站，此時就需要一個支持多爬蟲的框架。在設計時應該要注意以下幾點：

隨著京東業務的高速增長，京東研發體系陸續實施了SOA化和微服務戰略，以應對日益復雜的業務和急劇增加的應用種類。這些分布式應用彼此依賴，共同協作來完成所有京東的業務場景，其動態變化的復雜性和數量已...

1月10日，Apache軟件基金會宣布，Apache Beam成功孵化，成為該基金會的一個新的頂級項目。Google開源的Beam恰逢其時，在各種大數據處理引擎百花齊放時推出一個統一編程框架，統...

Apache Beam是一個開源的數據處理編程庫，由Google共享給Apache的項目，前不久剛剛成為Apache TLP項目。它提供了一個高級的、統一的編程模型，允許我們通過構建Pipeli...

Apache Flink 提供了可以恢復數據流應用到一致狀態的容錯機制。確保在發生故障時，程序的每條記錄只會作用于狀態一次（exactly-once），當然也可以降級為至少一次（at-least-once）。

Celery 是一個由 Python 編寫的簡單、靈活、可靠的用來處理大量信息的分布式系統,它同時提供操作和維護分布式系統所需的工具。

分布式鎖 是控制分布式系統之前訪問共享資源的一種方式。如果不同的系統或是同一個系統的不同主機之間共享了一個或一組資源，那么訪問這些資源的時候，往往需要互斥來防止彼此干擾來保證一致性，在這種情況下...

2016年Q3季度初，在美團外賣上單2.0項目上線后，商家和商品數量急速增長，預估商品庫的容量和寫峰值QPS會很快遇到巨大壓力。隨之而來也會影響線上服務的查詢性能、DB（數據庫，以下統一稱DB）...

經過簡單的考察，我發現，打包流程中最慢的環節是貼圖壓縮。在不同的平臺，需要把原始貼圖文件壓縮成對應平臺的壓縮貼圖格式： ios 平臺對應的是 PVR 壓縮格式；Android 平臺對應的是 ET...

2015年11月9日谷歌開源了人工智能系統TensorFlow，同時成為2015年最受關注的開源項目之一。TensorFlow的開源大大降低了深度學習在各個行業中的應用難度。

wukong，是一款golang實現的高性能、支持中文分詞的全文搜索引擎。我個人覺得它最大的特點恰恰是不像ElasticSearch那樣龐大和功能完備，而是可以以一個Library的形式快速集成...

分布式事務就是指事務的參與者、支持事務的服務器、資源服務器以及事務管理器分別位于不同的分布式系統的不同節點之上。以上是百度百科的解釋，簡單的說，就是一次大的操作由不同的小操作組成，這些小的操作分...