热门
最新
红包
立Flag
投票
同城
我的
发布
《爬虫框架 Scrapy+MongoDB 爬取 Github 用户信息 | 每日工具推荐》
今天给大家带来的是 Python 爬虫框架 Scrapy，因为之前自己爬取数据用过，感觉很不错，所以就分享给大家了。我们先来看下该工具在 Github 上的数据情况，如下图所示，可以看到有 1.8k 个关注，41.5k 个 star，9.3k 个 fork，可以说非常亮眼了。
爬完数据，当然还要想着把数据存储在某个地方了，这个地方通常都是指数据库，耳熟能想的有 MySQL、Oracle 等等，不过我采用的是字典型数据库 MongoDB，至于为什么用它？一方面是因为爬取下来的数据，就是字典格式，所以顺手而为
——来自博客 https://blog.csdn.net/csdn_codechina/article/details/120226363
你是否用过 Scrapy 和 MongoDB(多选)
33 人已经参与 已结束
用过 MongoDB ?
11人
用过 Scrapy ?
10人
内容难度适中 ?
7人
内容过难 ?
5人
是否需要写安装教程 ?
12人
CSDN App 扫码分享
评论
点赞
- 复制链接
- 举报
下一条：
冒个泡
