预加载 现在的网络情况虽然很乐观,但是 defer和async 当浏览器碰到 script 脚本的时候: <script src="script.js"></script> 没有 defer 或 …
标签:link
Scrapy爬取规则(Crawling rules)如何应用
Scrapy官网上对rules的介绍不多,短短的几行关于类的参数说明,再加上一个代码示例。先把几个要点列出来: class scrapy.contrib.spiders. Rule (link_extractor,cal…
20181009_Scrapy源码第四天——selenium动态页面抓取
今天只是记录一下新看的内容,主要是有关selenium动态页面抓取的。 python+scrapy+selenium爬虫 https://blog.csdn.net/uselym/article/details/5252…
Sqlite 源码分析 -- 获取数据库、创建连接池、建立主连接 (API 24)
一、SQLiteOpenHelper 调用入口 /** * Open the database according to the flags {@link #OPEN_READWRITE} * {@link #OPEN_…
Spark 2.3.0测试笔记一:Shuffle到胃疼
1 前言 最近有想法将生产用的spark2.1.x版本的基线上调至spark2.3系列,在此基础上维护一个相对稳定的生产版本,以满足用户日益增长的新特性和性能的需求。 2 测试数据 benchmark scale fil…