scrapy+mongodb

a56爆大奖在线娱乐们都知道scrapy适合爬取大量的网站信息，爬取到的信息储存到数据库显然需要更高的效率，scrapy配合mongodb是非常合适的，这里记录一下如何在scrapy中配置mongodb。 文件结构 当a56爆大奖在线娱乐们创建一个scrapy工程的时候，scrapy会自动给a56爆大奖在线娱乐们创建目录结构，像下面这样： 提取数据 i
posted @ 2017-06-09 16:13  善行者无疆  阅读(1421)  评论(0)  编辑  收藏  举报