MapReduce(十五): 从HDFS读取文件的源码分析

以Map任务读取文本数据为例：

1)   LineRecordReader负责对文件分割的定位，以及对读取每一行内容的封装供用户Map任务使用。每次在定位在文件中不为0的位置时，多读取一行，因为前一个处理该位置之前的数据时，会完整把该一行已经读取并处理。

 

2)   LineReader负责对所要访问文件输入流的数据进行每一行读取，只实现对每一行读取的逻辑。

3)   DFSDataInputStream封装了DFSInputStream的实现，直接调用DFSInputStream接口完成。