58大數據平臺在最近一年半的時間內技術演進的過程。主要內容分為三方面：58大數據平臺目前的整體架構是怎么樣的；最近一年半的時間內我們面臨的問題、挑戰以及技術演進過程；以及未來的規劃。

HDFS Federation為HDFS系統提供了NameNode橫向擴容能力。然而作為一個已實現多年的解決方案，真正應用到已運行多年的大規模集群時依然存在不少的限制和問題。本文以實際應用場景出...

在Hadoop集群整個生命周期里，由于調整參數、Patch、升級等多種場景需要頻繁操作NameNode重啟，不論采用何種架構，重啟期間集群整體存在可用性和可靠性的風險，所以優化NameNode重啟非常關鍵。

NameNode在整個HDFS系統架構中占據舉足輕重的位置，內部數據和處理邏輯相對復雜，本文簡單梳理了NameNode的內存全景及對其中幾個關鍵數據結構，從NameNode內存核心數據視角對Na...

HDFS全稱是Hadoop Distribute File System,是一個能運行在普通商用硬件上的分布式文件系統。與其他分布式文件系統顯著不同的特點是：

做軟件開發的都知道模塊化思想，這樣設計的原因有兩方面： 一方面是可以模塊化，功能劃分更加清晰，從“數據采集--數據接入--流失計算--數據輸出/存儲”

HDFS 是Hadoop 項目中的文件系統。是Hadoop 框架的底層實現部分， 具有高傳輸率、高容錯率等特點， 并且以流的形式訪問文件系統中的數據，從而解決訪問速度和安全性等問題，實現海量數據的存儲管理。

讀取 HDFS 文件的正確方式

HDFS（Hadoop Distributed File System ）Hadoop分布式文件系統。是根據google發表的論文翻版的。論文為GFS（Google File System）Go...

HDFS是Hadoop Distribute File System 的簡稱，也就是Hadoop分布式文件系統。

HDFS-RAID 是Facebook基于hadoop-20-append分支(第一代Hadoop)開發的raid方案，對HDFS的修改極少，主要包括為NameNode增加了根據block信息找...

Hadoop中關于文件操作類基本上全部是在＂org.apache.hadoop.fs＂包中，這些API能夠支持的操作包含：打開文件，讀寫文件，刪除文件等。

實現對HDFS增刪改查CRUD等操作

HDFS Java文件API示例

hfds 是一種文件系統，用于存儲hadoop將要處理的數據。適用于大規模分布式數據處理，是一個可擴展行的文件分布式系統；

本文主要講述 HDFS原理-架構、副本機制、HDFS負載均衡、機架感知、健壯性、文件刪除恢復機制

HDFS是一個具有高度容錯性的分布式文件系統，適合部署在廉價的機器上，它具有以下幾個特點： 1）適合存儲非常大的文件 2）適合流式數據讀取，即適合“只寫一次，讀多次”的數據處理模式 ...

HDFS是一種文件系統，存儲著Hadoop應用將要處理的數據，類似于普通的Unix和linux文件系統，不同的是他是實現了google的GFS文件系統的思想，是適用于大規模分布式數據處理相關應用...