Hadoop Streaming的一些基本知识

Streaming工做原理: 在上面的例子里，mapper和reducer都是可执行文件，它们从标准输入读入数据（一行一行读）， 并把计算结果发给标准输出。Streaming工具会建立一个Map/Reduce做业， 并把它发送给合适的集群，同时监视这个做业的整个执行过程。java 如 果一个可执行文件被用于mapper，则在mapper初始化时， 每个mapper任务会把这个可执行文件做为一个单独

>>阅读原文<<