Stories

Detail Return Return

爬蟲框架 Scrapy 的安裝 - Stories Detail

Win 環境

1 檢查本地的python版本:

python -V

Python 3.9.8(我本地是)

2 whl方式安裝 twisted

  • 1 因為scrapy需要twisted的環境,所以我們直接去下載whl文件
    根據自己的Python版本在

    https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

    選擇下載
    image.png

  • 2 下載好後,Twisted‑20.3.0‑cp39‑cp39‑win_amd64.whl,將這個文件存放到python安裝路徑下的script文件夾中。
    如下:
    image.png
  • 3 執行安裝

    pip install twisted_iocpsupport-1.0.2-cp39-cp39-win_amd64.whl

    3 安裝scrapy

    pip install scrapy

4 安裝pywin32

pip install pywin32

5 檢查是否安裝成功

scrapy startproject baidu baidu.com

顯示類似如下,説明scrapy 已經成功安裝

New Scrapy project 'baidu', using template directory 'D:\python398\lib\site-              
packages\scrapy\templates\project', created in:
  F:\test\baidu.com

You can start your first spider with:
  cd baidu.com
  scrapy genspider example example.com

Linux 環境

直接 執行 命令:

pip install scrapy

Add a new Comments

Some HTML is okay.