重新编译，以便支持snappy算法。

HDFS

HDFS写流程

HDFS读流程

HDFS元数据管理

namenode保存在内存上

SecondNameNode

定期合并edit logs到fsimage，替换fsimage

HDFS高可用

MapReduce

• 分区
• 排序
• 规约
• 分组

  MapReduce的分区与分组的区别

  
  

HIVE

• 从HDFS加载创建表，是剪切操作。

  分区表

• 分区就是分文件夹

分桶

• 分桶就是mapreduce中的分区