Home

Awesome

#tech163newsSpiders

爬取网易新闻,存储到本地的mongodb

##依赖服务

1.MongoDB

##依赖包

  1. pip install scrapy
  2. pip install pybloom
  3. pip install pymongo

##运行

进入tech163目录 执行scrapy crawl news

##详细分析

参见博文