第一步：安装scrapy，详情 第二步：安装mongo。 第三步：使用scrapy，爬去目标数据 a. 新建项目 在自己想要存放的位置(文件夹)，使用下面命令创建项目，项目名称自己随意。 scrapy startproj…

本文首发于我的博客：gongyanli.com 前言:本文主要讲解Scrapy的命令行功能，Scrapy提供了两种类型的命令。 1.全局命令 2.项目命令，必须在Scrapy项目中运行 全局命令 1.startproje…

scrapy.cfg存放的目录认定是 项目的根目录 scrapy 针对不同目的提供了多个命令。 创建项目 $ scrapy startproject my_pro 有些Scrapy命令(比如crawl)要求必须在Scra…