[转]文档去重算法：SimHash和MinHash

simhash与重复信息识别 来源：http://grunt1223.iteye.com/blog/964564     在工作学习中，我往往感叹数学奇迹般的解决一些貌似不可能完成的任务，并且十分希望将这种喜悦分享给大家，就好比说：“老婆，出来看上帝”……  随着信息爆炸时代的来临，互联网上充斥着着大量的近重复信息，有效地识别它们是一个很有意义的课题。例如，对于搜索引擎的爬虫系统来说，收录重复的网

>>阅读原文<<