记录puppeteer爬虫遇到的坑 1. page.$(selector)中,selector不精确 2. page.goto(url[, options]),跳转多个页面卡死的情况 page.$(selector)中,…
分类:nodejs爬虫
puppeteer爬虫——爬取豆瓣电影
具体使用请参看 Puppeteer官网 puppeteer爬虫和一般爬虫的区别 爬虫是一个模拟人类请求网站行为的程序。很多爬虫程序是通过请求http获取数据,用puppeteer做爬虫是通过DevTool协议控制Chro…
node:爬虫爬取网页图片
媒介 周末本身在家闲着没事,刷着微信,玩着手机,发明本身的微信头像该换了,就去网上找了一下头像,看着图片,本身就想着作为一个码农,能够把这些图片都爬取下来做成一个微信小顺序,说干就干,相识一下基础都晓得怎样做了,整顿分享…