# 1。 cmd # 2 。 创建虚拟环境 pip install virtualenv # 3。 pip install virtualenvwrapper-win # 4. mkvirtualenv -p python3 py_scrapy # pip list 虚拟环境安装的库 # deactivate 退出虚拟环境 # workon 虚拟环境名字 使用虚拟环境 # 安装 scrapy pip install scrapy ========================================== # 1、 新建项目 # 切换到指定目录 scarpy startproject douban_spider item.py 定义结构化数据字段 # 2、制作爬虫 scrapy genspider douban_250_spider movie.douban.com
scrapy crawl douban_250_spider # 保存数据 scrapy crawl douban_250_spider -o douban.csv
