Scrapy配置安装

  • 文档 官网文档(英文):

http://doc.scrapy.org/en/latest/intro/install.html

中文文档(相对官网较老版本):

http://scrapy-chs.readthedocs.io/zh_CN/1.0/intro/overview.html

平台安装指南

Windows 平台

您需要修改 PATH 环境变量,将Python的可执行程序及额外的脚本添加到系统路径中。将以下路径添加到 PATH 中:

  1. C:\Python2.7\;C:\Python2.7\Scripts\;

请确认下载符合您系统的版本(win32或者amd64)

  • 安装Scrapy:
  1. pip install Scrapy
  • 验证安装

输入 Scrapy或者scrapy(大小写都可以)

如果提示如下命令,就证明安装成功啦,如果失败了,请检查上述步骤有何疏漏。

配置安装 - 图1

Linux Ubuntu 平台

  • 安装 Scrapy

    If you prefer to build the python dependencies locally instead of relying on system packages you’ll need to install their required non-python dependencies first:

  1. sudo apt-get install python-dev python-pip libxml2-dev libxslt1-dev zlib1g-dev libffi-dev libssl-dev

You can install Scrapy with pip after that:

  1. sudo pip install Scrapy
  • 验证安装

    安装完毕之后,输入 scrapy

注意,这里linux下不要输入Scrapy,linux依然严格区分大小写的

如果出现如下提示,这证明安装成功

配置安装 - 图2