我开通了公众号【智能制造专栏】,以后技术类文章会发在专栏。用Python写爬虫是很方便的,最近看了xlzd.me的文章,他的文章写的很到位,提供了很好的思路。因为他的文章部分代码省略了。下面是基于他的文章的三个代码片段:…
标签:beautifulsoup
CTS的log分析
什么是CTS?Compatibility Test Suite CTS测试完会生成XML文件,这个XML人工根据Fail提交bug较麻烦,故根据此用python写了一个分析工具,先挖个坑,先贴核心代码: from bs4…
二、scrapy框架中(pipelines、settings、iterms都是干嘛用的?)
(一)scrapy 与 requsts与beautifulsoup的区别是什么呢? 个人粗暴的认为: 1、scrapy最牛X,大框架,大工程,往里可以添加好多库,内置css和xpath selector,非常方便。 2、…