发现一个好看的手机壁纸网站，撸代码的手已经饥渴难耐了

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。

最近有同学的爬虫代码出了bug&＃xff0c;给问我怎么改

于是就发现了这个好看的手机壁纸网站。

看到那么多好看的壁纸&＃xff0c;我的爬虫已经饥渴难耐了

受害网址

http://m.bcoderss.com/

为了良性爬取&＃xff0c;这个代码就不完整的展示出来了

部分爬虫代码

导入工具

from urllib import parse
import requests
import parsel
import re

解析网站&＃xff0c;爬取数据

for page in range(1, 10):print(&＃39;正在爬取第{}页壁纸&＃39;.format(page))url &＃61; &＃39;http://m.bcoderss.com/tag/{}/page/{}/&＃39;.format(name, page)headers &＃61; {&＃39;COOKIE&＃39;: &＃39;UM_distinctid&＃61;1747c5616688f-0da459aa281e74-3962420d-1fa400-1747c56166982d; CNZZDATA1278590218&＃61;744878758-1599811024-%7C1599811024&＃39;,&＃39;User-Agent&＃39;: &＃39;Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36&＃39;}response &＃61; requests.get(url&＃61;url, headers&＃61;headers)selector &＃61; parsel.Selector(response.text)img_url &＃61; selector.css(&＃39;#main a::attr(href)&＃39;).getall()

设置爬取类目

string &＃61; input(&＃39;请输入你要爬取的类目&＃xff1a;&＃39;)
name &＃61; parse.unquote(string)

保存图片

path &＃61; &＃39;C:\\Users\\Administrator\\Desktop\\手机壁纸\\&＃39; &＃43; new_title &＃43; &＃39;.jpg&＃39;with open(path, mode&＃61;&＃39;wb&＃39;) as f:f.write(data_response.content)print(title)

运行代码&＃xff0c;效果如下图

本文首发于python黑洞网&＃xff0c;csdn同步更新