python快速构建爬虫项目Scrapy,和Scrapy项目结构分析
上一篇 Python学习必备知识,使用conda管理python环境和包(基于Windows)
安装好scrapy,pycharm,conda等等
进入指定环境(激活环境),安装scrapy,可用 conda 或者 pip 命令
1. 指定项目目录
cd D:\Python\scrapy
2. 检查环境(或者自己新建环境,并激活,参照命令)
conda env list
3. 激活环境
activate base
4. 检查当前环境下,有没有scrapy包(重复操作,直到显示有这个包安装成功,即有显示即可)
conda list
我这里是安装好的,具体安装请参照 conda install xxxx 或者 pip install xx(python3版本更适合这个)
5. 开始构建Scrapy项目,命令如下
scrapy startproject projectname
其中projectname 是你要初始化的项目名称
scrapy genspider projectname_spider https://www.tmall.com/



