使用requests抓取图片破解防盗链
最近在写爬虫时抓取图片被防盗链了,解决方法是增加请求头的请求来源
requests
headers = {'Referer': 'http://www.testdemo.com'}
pic = requests.get('http://www.
testdemo.com/pic.jpg', headers=headers)
因为一些网站在解决盗链问题时是根据Referer的值来判断的,所以在请求头上添加Referer属性就好(可以填爬取网站的地址)。
另外Referer携带的数据 是用来告诉服务器当前请求是从哪个页面请求过来的。