distribute-webmagic组件queue详解

queue可作为distribute-webmagic的任务队列,也可作为独立的消息去重中间件 在distribute-webmagic中的架构图:   该组件通讯基于netty,缓存基于ehcache,介绍以下核心类 EhCache 封装后的缓存 QueueClient  客户端启动和发送数据 ConnectionListener 客户端断线自动重连 NettyUtils 基于tcp的自定义协议
相关文章
相关标签/搜索