(2)Scrapy安装

pip install Scrapy

Windows系统上安装(本教程)

• 从 Python 安装 Python2.7

  添加下面的路径到PATH设置环境变量：

  C:\Python27\;C:\Python27\Scripts\;

  您可以通过使用以下命令来检查Python版本：

  python --version

• 安装 OpenSSL 或下载地址 ：http://www.egenix.com/cryptodownload/?file=egenix-pyopenssl-0.13.0_1.0.0g_1.win-amd64-py2.7.msi(重点)
  添加 C:\OpenSSL-Win64\bin 在您的系统环境变量中；

  注：OpenSSL预装在所有的操作系统(除了Windows)。

• 安装 Visual C++ 2008 再发行组件或Visual C++ 2008 Redistributables 和 Win64 OpenSSL v1.0.1f

• 安装 pywin32&amd64
• 安装 Python2.7.9 以下的 pip 或者下载地址： https://pypi.python.org/pypi/setuptools#files 

• 您可以通过使用以下命令来检查 pip 版本：

  pip --version

• 安装twisted，下载地址 –https://pypi.python.org/packages/2.7/T/Twisted/Twisted-13.0.0.win32-py2.7.msi#md5=c2d453a344f56cf6f77204c5769288c0
• 安装 zope 接口：https://pypi.python.org/pypi/zope.interface/4.1.0 选择倒数第二个 zope.interface-4.1.0.win32-py2.7.exe 
• 安装 lxml ，版本要选对应系统，错误的是用不了的。下载地址： https://pypi.python.org/pypi/lxml/3.2.3

Ubuntu系统

Python的最新版本是预先安装在Ubuntu操作系统。使用由 Scrapinghub 提供 Ubuntu 的软件包 apt-get。要使用这些软件包：

• 需要输入用于登录 Scrapy 包 APT 的 GPG密钥：

  sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 627220E7

• 接下来，使用下面的命令来创建 /etc/apt/sources.list.d/scrapy.list 文件：

  echo 'deb http://archive.scrapy.org/ubuntu scrapy main'| sudo tee /etc/apt/sources.list.d/scrapy.list

• 更新软件包列表并安装scrapy：

  sudo apt-get update && sudo apt-get install scrapy

Archlinux系统

yaourt -S scrapy

Mac OS X系统

xcode-select--install

• 安装homebrew
• 设置环境变量 PATH 指定 homebrew 包在系统软件包前使用：

  echo "export PATH=/usr/local/bin:/usr/local/sbin:$PATH">>~/.bashrc

• 变更完成后，重新加载 .bashrc 使用下面的命令：

  source ~/.bashrc

• 接下来，使用下面的命令安装 Python：

  brew install python

• 接下来，安装scrapy：

  pip install Scrapy