爬虫如何随机生成请求头
发表于:2024-09-22 作者:千家信息网编辑
千家信息网最后更新 2024年09月22日,这篇文章主要介绍"爬虫如何随机生成请求头",在日常操作中,相信很多人在爬虫如何随机生成请求头问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"爬虫如何随机生成请求头"的疑惑
千家信息网最后更新 2024年09月22日爬虫如何随机生成请求头
这篇文章主要介绍"爬虫如何随机生成请求头",在日常操作中,相信很多人在爬虫如何随机生成请求头问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"爬虫如何随机生成请求头"的疑惑有所帮助!接下来,请跟着小编一起来学习吧!
1 #生成随机头 2 def randHeader(): 3 head_connection = ['Keep-Alive', 'close'] 4 head_accept = ['text/html, application/xhtml+xml, */*'] 5 head_accept_language = ['zh-CN,fr-FR;q=0.5', 'en-US,en;q=0.8,zh-Hans-CN;q=0.5,zh-Hans;q=0.3'] 6 head_user_agent = ['Mozilla/5.0 (Windows NT 6.3; WOW64; Trident/7.0; rv:11.0) like Gecko', 7 'Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/28.0.1500.95 Safari/537.36', 8 'Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; .NET4.0C; rv:11.0) like Gecko)', 9 'Mozilla/5.0 (Windows; U; Windows NT 5.2) Gecko/2008070208 Firefox/3.0.1',10 'Mozilla/5.0 (Windows; U; Windows NT 5.1) Gecko/20070309 Firefox/2.0.0.3',11 'Mozilla/5.0 (Windows; U; Windows NT 5.1) Gecko/20070803 Firefox/1.5.0.12',12 'Opera/9.27 (Windows NT 5.2; U; zh-cn)',13 'Mozilla/5.0 (Macintosh; PPC Mac OS X; U; en) Opera 8.0',14 'Opera/8.0 (Macintosh; PPC Mac OS X; U; en)',15 'Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.12) Gecko/20080219 Firefox/2.0.0.12 Navigator/9.0.0.6',16 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Win64; x64; Trident/4.0)',17 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0)',18 'Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; InfoPath.2; .NET4.0C; .NET4.0E)',19 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.1 (KHTML, like Gecko) Maxthon/4.0.6.2000 Chrome/26.0.1410.43 Safari/537.1 ',20 'Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; InfoPath.2; .NET4.0C; .NET4.0E; QQBrowser/7.3.9825.400)',21 'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:21.0) Gecko/20100101 Firefox/21.0 ',22 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.1 (KHTML, like Gecko) Chrome/21.0.1180.92 Safari/537.1 LBBROWSER',23 'Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0; BIDUBrowser 2.x)',24 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/536.11 (KHTML, like Gecko) Chrome/20.0.1132.11 TaoBrowser/3.0 Safari/536.11']25 26 header = {27 'Connection': head_connection[0],28 'Accept': head_accept[0],29 'Accept-Language': head_accept_language[1],30 'User-Agent': head_user_agent[random.randrange(0, len(head_user_agent))]31 }32 return header
到此,关于"爬虫如何随机生成请求头"的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注网站,小编会继续努力为大家带来更多实用的文章!
生成
爬虫
学习
更多
帮助
实用
接下来
文章
方法
机头
理论
知识
篇文章
网站
资料
跟着
问题
好用
实践
解答
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
24小时网络安全事件
辰帆网络技术
网络安全宣传短视频天黑路滑
mysql数据库连接过程
魔兽 台服 服务器合并 历史
公司有必要安装数据库吗
服务器战争小说字数榜
管理软件开发工程师上升空间
gta5樱花都服务器
关于加强网络安全的调研报告
汕头支付软件开发收费
家庭服务器 影音管理
附加数据库10240
服务器机房强电弱电管理办法
网络安全网址检测
中电科网络安全技术有效公司
不会编程可以学软件开发吗
数据库搭建与管理
数字通信与网络技术苏
北京国企有没有招聘软件开发的
exl做数据库
奇偶商城哪家好 软件开发
沈阳兼职软件开发
国家密码管理局授权服务器
附加数据库10240
组态王无法创建opc服务器
数字通信与网络技术苏
app关服务器
倍福与数据库通讯
网络安全初中生文章