网络爬虫项目开发日志(二):爬虫架构设计

架构设计原则:前端       一、不过分设计,全部设计都是本着服务业务的初心。web       二、保留足够的可拓展性架构       三、开发成本降至最低(学习成本+开发时效+开源技术优先+去IOE)ide 架构设计计划:模块化        一言不合,先上图,下面是爬虫系统架构目标,分为三个阶段以下:学习 一期:spa       业务上的需求是,按需爬取网页,并且查询的体量也会很小,由于
相关文章
相关标签/搜索