Linux大文件快速处理小方法

1. 背景

　　工作中使用MapReduce任务导出一批含有路径的文件，共计行数300W+，需要检测文件是否在对应的服务器中存在，而文件所在的服务器并非hadoop集群的服务器，因此打算采用bash脚本进行。具体的方法如下(　　工作中使用MapReduce任务导出一批含有路径的文件，共计行数3