Skip to content

Latest commit

 

History

History
10 lines (8 loc) · 404 Bytes

README.md

File metadata and controls

10 lines (8 loc) · 404 Bytes

DoubanPyspider

使用Pyspider框架的豆瓣爬虫

依赖:

python第三方库:pyspider, pymongo, requests
数据库:mongodb
代理池:IPProxy

Usage

安装mongodb, 使用pip安装pyspider和pymongo,在pyspider新建一个爬虫项目,将movie_spider.py文件的内容拷贝到项目中运行即可。