后台数据同步思路

项目中有一个需求，需要与民政部的数据实时同步。 思路：民政部官网的数据不会直接告诉我们，需要我们去官网查看，每个月民政部会更新两条href链接，是县级一下或者县级以上的两条数据，人工手动定期拷贝略显的low了，使用爬虫来获取网页数据，再将数据经过筛选存入数据库，开启一起定时任务，定时获取网页中最新的两条数据； 实现：所需要的数据，民政部网址是 http://www.mca.gov.cn/artic

>>阅读原文<<