爬虫如何随机生成请求头
发表于:2025-01-23 作者:千家信息网编辑
千家信息网最后更新 2025年01月23日,这篇文章主要介绍"爬虫如何随机生成请求头",在日常操作中,相信很多人在爬虫如何随机生成请求头问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"爬虫如何随机生成请求头"的疑惑
千家信息网最后更新 2025年01月23日爬虫如何随机生成请求头
这篇文章主要介绍"爬虫如何随机生成请求头",在日常操作中,相信很多人在爬虫如何随机生成请求头问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"爬虫如何随机生成请求头"的疑惑有所帮助!接下来,请跟着小编一起来学习吧!
1 #生成随机头 2 def randHeader(): 3 head_connection = ['Keep-Alive', 'close'] 4 head_accept = ['text/html, application/xhtml+xml, */*'] 5 head_accept_language = ['zh-CN,fr-FR;q=0.5', 'en-US,en;q=0.8,zh-Hans-CN;q=0.5,zh-Hans;q=0.3'] 6 head_user_agent = ['Mozilla/5.0 (Windows NT 6.3; WOW64; Trident/7.0; rv:11.0) like Gecko', 7 'Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/28.0.1500.95 Safari/537.36', 8 'Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; .NET4.0C; rv:11.0) like Gecko)', 9 'Mozilla/5.0 (Windows; U; Windows NT 5.2) Gecko/2008070208 Firefox/3.0.1',10 'Mozilla/5.0 (Windows; U; Windows NT 5.1) Gecko/20070309 Firefox/2.0.0.3',11 'Mozilla/5.0 (Windows; U; Windows NT 5.1) Gecko/20070803 Firefox/1.5.0.12',12 'Opera/9.27 (Windows NT 5.2; U; zh-cn)',13 'Mozilla/5.0 (Macintosh; PPC Mac OS X; U; en) Opera 8.0',14 'Opera/8.0 (Macintosh; PPC Mac OS X; U; en)',15 'Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.12) Gecko/20080219 Firefox/2.0.0.12 Navigator/9.0.0.6',16 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Win64; x64; Trident/4.0)',17 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0)',18 'Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; InfoPath.2; .NET4.0C; .NET4.0E)',19 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.1 (KHTML, like Gecko) Maxthon/4.0.6.2000 Chrome/26.0.1410.43 Safari/537.1 ',20 'Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; InfoPath.2; .NET4.0C; .NET4.0E; QQBrowser/7.3.9825.400)',21 'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:21.0) Gecko/20100101 Firefox/21.0 ',22 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.1 (KHTML, like Gecko) Chrome/21.0.1180.92 Safari/537.1 LBBROWSER',23 'Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0; BIDUBrowser 2.x)',24 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/536.11 (KHTML, like Gecko) Chrome/20.0.1132.11 TaoBrowser/3.0 Safari/536.11']25 26 header = {27 'Connection': head_connection[0],28 'Accept': head_accept[0],29 'Accept-Language': head_accept_language[1],30 'User-Agent': head_user_agent[random.randrange(0, len(head_user_agent))]31 }32 return header
到此,关于"爬虫如何随机生成请求头"的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注网站,小编会继续努力为大家带来更多实用的文章!
生成
爬虫
学习
更多
帮助
实用
接下来
文章
方法
机头
理论
知识
篇文章
网站
资料
跟着
问题
好用
实践
解答
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
手机的服务器在哪里找
图灵畅想互联网科技怎么样
传奇服务器登录引擎
无线网络安全手抄报党史
easymall商城数据库设计
荣城地产为什么招软件开发
j2me手机软件开发
赛罕区网络安全报警电话
snort 写入数据库
杭州珍林网络技术有限公司税号
计算机网络安全面试题
福州哪个服务器安全
手机运行的数据库软件有哪些
ar软件开发用的电脑
青岛网络安全产业基地中标
服务器lcd显示
网络安全人才爆发
直销软件开发费用
阿里云服务器申请步骤
上海康齐软件开发有限公司
中文科技数据库基础知识
数据库受限制的用户
数据库创建留言板
济南聚量网络技术有限公司云视通
软件开发赚吗
如何把流量服务器打开
数据库删不了
电信怎么加强网络安全
ar软件开发用的电脑
服务器管理器 哪里关