实时机票/火车票抓取系统整体架构

实时机票/火车票抓取系统是一个带有业余性质的系统,主要是作为技术的训练场。比如说ActiveMq,RMI,WebService,即使最原始的Socket也在这里一展拳脚。 大概可以分为几个模块: 对外服务模块:WebService(Axis2),RMI的方式,原始Socket流方式(主要学习用),HTTP JSON方式。 日志监控:提供对抓取的监控,监控抓取网站的规则变化,如果出现抓取错误等提供E
相关文章
相关标签/搜索