前言 问题：有朋友问起这究竟scrapy是广度优先还是深度优先？ 回答： 深度优先是指网络爬虫会从起始页开始，一个链接一个链接跟踪下去，处理完这条线路之后再转入下一个起始页，继续追踪链接 广度优先，有人也叫宽度优先，是指…