搜索引擎工做原理解析

本篇文章从整个搜索引擎架构技术大框架方面来学习，搜索引擎工做原理。web 1 搜索引擎基本模块 2 爬虫 网络爬虫（Web crawler），是一种按照必定的规则，自动地抓取万维网信息的程序或者脚本，它们被普遍用于互联网搜索引擎或其余相似网站，能够自动采集全部其可以访问到的页面内容，以获取或更新这些网站的内容和检索方式。从功能上来说，爬虫通常分为数据采集，处理，储存三个部分。传统爬虫从一个或若干初

>>阅读原文<<