2025年05月25日浏览 458 大数据

DistCp源码解析

说明 DistCp（分布式拷贝）是用于大规模集群内部和集群之间拷贝的工具。它使用Map/Reduce实现文件分发，错误处理和恢复，以及报告生成。它把文件和目录的列表作为map任务的输入，每个任务会完成源列表中部分文件的拷贝。由于使用了Map/Redu ......

2025年03月29日浏览 331 大数据

Mapredcue作业启动

Mapreduce作业启动源码解析，从源码开始理解Mapreduce。