Python如何爬取高清桌面壁纸
发表于:2024-10-21 作者:千家信息网编辑
千家信息网最后更新 2024年10月21日,Python如何爬取高清桌面壁纸,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。直接运行即可,效果图:代码如下导入工具import r
千家信息网最后更新 2024年10月21日Python如何爬取高清桌面壁纸
Python如何爬取高清桌面壁纸,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。
直接运行即可,效果图:
代码如下
导入工具
import requests,osfrom pyquery import PyQuery as pqimport time
请求、解析网页数据,保存数据
headers = { 'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_4) AppleWebKit/537.36 ' '(KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36'}# 这里我使用了代理 你可以去掉这个代理IP 我是为了后面大规模爬取做准备的proxies = { 'https': '218.75.69.50:39590'} # 请求网页 获取源码def start_request(url): r = requests.get(url, headers=headers, proxies=proxies) # 这个网站页面使用的是GBK编码 这里进行编码转换 r.encoding = 'GBK' html = r.text return html # 解析网页 获取图片def parse(text,i): doc = pq(text) # 锁定页面中的img标签 images = doc('div.list ul li img').items() x = 1 for image in images: # 获取每一张图片的链接 img_url = image.attr('src') # 获得每张图片的二进制内容 img = requests.get(img_url, headers=headers, proxies=proxies).content # 定义要存储图片的路劲 # 创建目录 dir_path = os.path.dirname(os.path.abspath(__file__)) + "\\image\\" imagspath = dir_path+'/imgs'+str(i) # 创建目录 if not os.path.exists(imagspath): os.makedirs(imagspath) path = imagspath+"\\" + str(x) + ".jpg" # 将图片写入指定的目录 写入文件用"wb" with open(path, 'wb') as f: f.write(img) time.sleep(1) print("正在下载第{}页{}张图片".format(i,x)) x += 1 print("写入完成") def main(): url = "http://www.netbian.com" text = start_request(url) parse(text,1) #爬取指定范围页面 for i in range(2,100): urlnum = url + "/index_"+str(i)+".htm" textnum = start_request(urlnum) parse(textnum,i) if __name__ == "__main__": main()
关于Python如何爬取高清桌面壁纸问题的解答就分享到这里了,希望以上内容可以对大家有一定的帮助,如果你还有很多疑惑没有解开,可以关注行业资讯频道了解更多相关知识。
图片
目录
网页
问题
页面
壁纸
桌面
桌面壁纸
高清
内容
数据
更多
编码
代理
帮助
解答
易行
简单易行
二进制
代码
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
美国艺术教育软件开发
数据库教材 清华大学
深圳市云彩互联网科技怎么样
软件开发方法分几大类
网络安全诺顿
爱心家长数据库
智能软件开发培训
系统软件开发定制费用
数据库 数据分段
数据库 约束性条件
海南生鲜系统软件开发
数据库删除最后一条
商道高手有多少个服务器
东营职业学院计算机网络技术
服务器签章
数据库中的索引创建
网络服务器 框架
软件开发流程2018
国家初级网络安全工程师认证
天下3 79服务器
软件开发方法分几大类
智能软件开发培训
网络安全渠道安全
我的世界正版有哪些知名服务器
专业的程序员都用什么软件开发
校园网络安全改进
广州通软件开发有限公司
2k22显示与服务器连接错误
西安交大网络安全博士笔试
xml数据库模式规范化