MapReduce程序调试工具--MRUnit简介与使用

MRUnit简介:         当hadoop的MapReduce做业提交到集群环境中运行,对于出问题的定位比较是比较麻烦的,有时须要一遍遍的修改代码和打印出日志来排查一个很小的问题,若是数据量大的话调试起来至关耗时间。所以有必要使用良好的单元测试手段来尽早的消除明显的bug。然而作MapReduce的单元测试会有一个障碍,好比Map和Reduce一些参数对象是在运行时由hadoop框架传入的
相关文章
相关标签/搜索