爬虫中异步数据写入MySQL数据库方法

爬虫中异步数据写入MySQL数据库方法（adbapi） 数据库pymysql的commit()和execute()在提交数据时，都是同步提交至数据库，因为scrapy框架数据的解析和异步多线程的，因此scrapy的数据解析速度，要远高于数据的写入数据库的速度。若是数据写入过慢，会形成数据库写入的阻塞，影响数据库写入的效率。 经过多线程异步的形式对数据进行写入，能够提升数据的写入速度。python

>>阅读原文<<