0110编程-Python的Requests的图片抓取和代理使用

2019年5月5日 160次阅读 来源: zhyuzh3d

点击这里进入人工智能嘚吧嘚目录，观看全部文章

图片抓取与存储

注意文件名和存储位置。

import requests
url='https://img3.doubanio.com/view/photo/s_ratio_poster/public/p480747492.webp'
res=requests.get(url)
img=res.content
with open( 'data/test.webp','wb' ) as f:
    f.write(img)
print('OK')

代理使用

可以使用西刺免费代理IP获得代理地址和端口号，注意经常不稳定无法连接，还要注意优先改为http而不是https。

import requests
from bs4 import BeautifulSoup
import time

url='https://movie.douban.com/top250'
proxy = {
    'http': 'http://119.101.113.239:9999'
}
header = {
    'User-agent': 'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)',
}
res = requests.get(url,headers=header, proxies=proxy)
soup = BeautifulSoup(res.text)
movies = soup.find_all('div', 'info')
print(movies[0])

点击这里进入人工智能DBD嘚吧嘚目录，观看全部文章

每个人的智能新时代

如果您发现文章错误，请不吝留言指正；
如果您觉得有用，请点喜欢；
如果您觉得很有用，欢迎转载~

END

    原文作者：zhyuzh3d
    原文地址: https://www.jianshu.com/p/8c57157ad0cc
    本文转自网络文章，转载此文章仅为分享知识，如有侵权，请联系博主进行删除。
点赞