爬虫实战三、PyCharm搭建Scrapy开发调试环境

一、环境准备

二、PyCharm配置Scrapy

2-1、创建Python项目

注意,由于无法使用PyCharm直接创建Scrapy项目,因此需要先创建普通的Python项目。

创建普通Python项目mySpider。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 图片.png

选择项目位置。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215160105.png

2-2、配置Project Interpreter

点击File-> Settings->Project: mySpider->Project Interpreter。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215161633.png

注意此截图已经配置好完毕,如果没有Project Interpreter,点击下图红框处添加。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215163513.png

添加Project Interpreter。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215163542.png

注意:如果有多个Python版本,为防止冲突可以选择第一个虚拟环境,此处我只有一个环境,选择配置系统解释器。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215164629.png

根据自身实际情况进行选择。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215164832.png

2-3、添加Scrapy的相关包

解释器安装完毕,点击右下方的+号,查询包

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215164951.png

安装包,依次安装:

lxml -> zope.interface -> pyopenssl -> twisted -> scrapy

一般情况下Anaconda已经安装了很多类库,我们只需安装scrapy即可。显示蓝色代表已经安装成功。

《爬虫实战三、PyCharm搭建Scrapy开发调试环境》 TIM截图20190215165030.png

    原文作者:Cehae
    原文地址: https://www.jianshu.com/p/107445b4fffd
    本文转自网络文章,转载此文章仅为分享知识,如有侵权,请联系博主进行删除。
点赞