百度贴吧爬虫node+vue baidu_tieba_crawler

baidu_tieba_crawler

演示地址

http://www.femirror.com/index
服务器很慢，请原谅

使用说明书

！！！爬虫类的东东仍是友善使用

程序运行不起来就要检查下 如下接口是否替换

~ 代理的api接口  mongo地址 socket地址

先说下目录结构

├─model              mongooes 模型  Scheme
│  ├─model.js        定义了数据库模型 
├─server             运行socket 和 api的服务端代码
│  ├─api.js          express路由生成的 restful api
│  ├─api_action.js   api.js 会调用个人函数 
│  ├─cp.js           socket.js会经过child_process调用我 我只运行在子进程里
├─fe                 vue-cli 生成的 Webpack 打包工具 便于调试。
│  │  ├─src          其余没什么好介绍的了

真·调试

node socket.js //运行restful api 和socket服务
cd fe && npm run dev   //运行调试模式

关于技术栈

用到的东西挺多的，可是都是用了点皮毛知识,提早踩坑。

前端的

vue大礼包(vue-resource vue-router vue-socket.id element-ui)

后端的

express socket.io superagent cheerio mongoose

数据库

mongo