Scrapy - 环境

在本章中，我们将讨论如何安装和设置 Scrapy。Scrapy 必须使用 Python 安装。

可以使用 **pip** 安装 Scrapy。要安装，请运行以下命令：

pip install Scrapy

Windows

**注意** - Windows 操作系统不支持 Python 3。

**步骤 1** - 从 Python 安装 Python 2.7

通过将以下路径添加到 PATH 来设置环境变量：

C:\Python27\;C:\Python27\Scripts\;

可以使用以下命令检查 Python 版本：

python --version

**步骤 2** - 安装 OpenSSL。

在环境变量中添加 C:\OpenSSL-Win32\bin。

**注意** - 除 Windows 外，所有操作系统都预装了 OpenSSL。

**步骤 3** - 安装 Visual C++ 2008 可再发行组件包。

**步骤 4** - 安装 pywin32。

**步骤 5** - 为低于 2.7.9 的 Python 版本安装 pip。

可以使用以下命令检查 pip 版本：

pip --version

**步骤 6** - 要安装 scrapy，请运行以下命令：

pip install Scrapy

如果您的机器上安装了 anaconda 或 miniconda，请运行以下命令使用 conda 安装 Scrapy：

conda install -c scrapinghub scrapy

Scrapinghub 公司支持 Linux、Windows 和 OS X 的官方 conda 包。

**注意** - 如果您在通过 pip 安装时遇到问题，建议使用上述命令安装 Scrapy。

Ubuntu 操作系统预装了最新版本的 Python。使用 Scrapinghub 提供的 Ubuntu 包 aptgettable。要使用这些包：

**步骤 1** - 您需要将用于签署 Scrapy 包的 GPG 密钥导入到 APT 密钥环中：

sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 627220E7

**步骤 2** - 接下来，使用以下命令创建 /etc/apt/sources.list.d/scrapy.list 文件：

echo 'deb http://archive.scrapy.org/ubuntu scrapy main' | sudo tee 
/etc/apt/sources.list.d/scrapy.list

**步骤 3** - 更新软件包列表并安装 scrapy：

sudo apt-get update && sudo apt-get install scrapy

您可以使用以下命令从 AUR Scrapy 包安装 Scrapy：

yaourt -S scrapy

使用以下命令安装 Xcode 命令行工具：

xcode-select --install

不要使用系统 Python，而是安装一个不会与系统其他部分冲突的新更新版本。

**步骤 1** - 安装 homebrew。

**步骤 2** - 设置环境 PATH 变量以指定在使用系统软件包之前应使用 homebrew 软件包：

echo "export PATH = /usr/local/bin:/usr/local/sbin:$PATH" >> ~/.bashrc

**步骤 3** - 为确保更改已完成，请使用以下命令重新加载 **.bashrc**：

source ~/.bashrc

**步骤 4** - 接下来，使用以下命令安装 Python：

brew install python

**步骤 5** - 使用以下命令安装 Scrapy：

pip install Scrapy

打印页面