python virtualenv 安装scrapy

安装virtualenv pip install virtualenv virtualenv –no-site-packages [虚拟环境名称] 默认情况下，虚拟环境会依赖系统环境中的site packages，就是说系统中已经安装好的第三方package也会安装在虚拟环境中，如果不想依赖这些package，那么可以加上参数 –no-site-packages建立虚拟环境 cd [虚拟环境名称]\Scripts activate启动虚拟环境 deactivate退出虚拟环境安装scrapy 先启动虚拟环境，Virtualenv 附带有pip安装工具，因此需要安装的套件可以直接运行：pip install [套件名称] 安装scrapy前需要安装以下 http://www.lfd.uci.edu/~gohlke/pythonlibs/ # 非官方安装包 安装whl文件，如把x.whl文件放在D盘根目录下，则在cmd输入： pip install d:\x.whl 如果安装pywin32 提示DLL load failed，则 把\Lib\site-packages\pywin32_system32下的三个dll文件拷贝到windows\system32下即可。

最后安装pip install scrapy scrapy startproject 【myproject】创建项目

scrapy.cfg: 项目的配置文件。 myproject/: 该项目的python模块。之后将在此加入代码。 myproject/items.py: 项目中的item文件。 myproject/pipelines.py: 项目中的pipelines文件。 myproject/settings.py: 项目的设置文件。 myproject/spiders/: 放置spider代码的目录。

scrapy crawl 【项目名】