读Coded-TeraSort笔记

本文是我阅读文献《Coded TeraSort》后,通过翻译、整理、加上自己的理解做的笔记。希望大家一起探讨,如有错误还请指教。 paper链接:Coded TeraSort 一、简介 在一个传统的MapReduce程序中(Map-shuffle-reduce),程序的瓶颈发生在shuffle阶段(高达50%-70%时间)。作者提出了一种为数据增加结构化冗余,以此来降低MapReduce的shuf
相关文章
相关标签/搜索