我正在使用数组来存储URL,我需要消除在数组中出现多次的URL,因为我不需要再次抓取相同的URL： self.level = [] # array where the URL are present for link i…

我想使用scrapy下载整页内容. 使用硒这很容易： import os,sys reload(sys) sys.setdefaultencoding('utf8') from selenium import webdr…