demo-python-scrapy-webpage-with-requests-html

Use scrapy

1开发环境配置

1. 安装Anaconda套装
2. 打开套装里的终端 Anaconda Prompt
3. 下载本教程配套的压缩包
4. 用终端cd命令进入压缩包解压的文件目录 如cd C:\work\demo-python-scrapy-webpage-with-requests-html
5. 进入后执行代码如下

---

  >>>Pip install pipenv

  >>>Pipenv install 

  >>>Pipenv shell

  >>>Jupyter notebook

---

在jupyter notebook上进行代码的编辑

2开发过程

按照Mr.Wang教程进行编辑

代码在文件Untitled.ipynb中

3发布

爬取的结果text,link在zip的output文件。