Python怎么爬取股票交易数据并可视化展示
发表于:2025-02-19 作者:千家信息网编辑
千家信息网最后更新 2025年02月19日,本篇内容介绍了"Python怎么爬取股票交易数据并可视化展示"的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有
千家信息网最后更新 2025年02月19日Python怎么爬取股票交易数据并可视化展示
本篇内容介绍了"Python怎么爬取股票交易数据并可视化展示"的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!
开发环境
解释器版本: python 3.8
代码编辑器: pycharm 2021.2
第三方模块
requests: pip install requests
csv
爬虫案例的步骤
1.确定url地址(链接地址)
2.发送网络请求
3.数据解析(筛选数据)
4.数据的保存(数据库(mysql\mongodb\redis), 本地文件)
爬虫程序全部代码
分析网页
打开开发者工具,搜索关键字,找到正确url
导入模块
import requests # 发送网络请求import csv
请求数据
url = f'https://xueqiu.com/service/v5/stock/screener/quote/list?page=1&size=30&order=desc&order_by=amount&exchange=CN&market=CN&type=sha&_=1637908787379'# 伪装headers = { # 浏览器伪装 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.45 Safari/537.36'}response = requests.get(url, headers=headers)json_data = response.json()
解析数据
data_list = json_data['data']['list']for data in data_list: data1 = data['symbol'] data2 = data['name'] data3 = data['current'] data4 = data['chg'] data5 = data['percent'] data6 = data['current_year_percent'] data7 = data['volume'] data8 = data['amount'] data9 = data['turnover_rate'] data10 = data['pe_ttm'] data11 = data['dividend_yield'] data12 = data['market_capital'] print(data1, data2, data3, data4, data5, data6, data7, data8, data9, data10, data11, data12) data_dict = { '股票代码': data1, '股票名称': data2, '当前价': data3, '涨跌额': data4, '涨跌幅': data5, '年初至今': data6, '成交量': data7, '成交额': data8, '换手率': data9, '市盈率(TTM)': data10, '股息率': data11, '市值': data12, } csv_write.writerow(data_dict)
翻页
对比1、2、3页数据url,找到规律
for page in range(1, 56): url = f'https://xueqiu.com/service/v5/stock/screener/quote/list?page={page}&size=30&order=desc&order_by=amount&exchange=CN&market=CN&type=sha&_=1637908787379'
保存数据
file = open('data2.csv', mode='a', encoding='utf-8', newline='')csv_write = csv.DictWriter(file, fieldnames=['股票代码','股票名称','当前价','涨跌额','涨跌幅','年初至今','成交量','成交额','换手率','市盈率(TTM)','股息率','市值'])csv_write.writeheader()file.close()
实现效果
数据可视化全部代码
导入数据
import pandas as pdfrom pyecharts import options as optsfrom pyecharts.charts import Bar
读取数据
data_df = pd.read_csv('data2.csv')df = data_df.dropna()df1 = df[['股票名称', '成交量']]df2 = df1.iloc[:20]print(df2['股票名称'].values)print(df2['成交量'].values)
可视化图表
c = ( Bar() .add_xaxis(list(df2['股票名称'])) .add_yaxis("股票成交量情况", list(df2['成交量'])) .set_global_opts( title_opts=opts.TitleOpts(title="成交量图表 - Volume chart"), datazoom_opts=opts.DataZoomOpts(), ) .render("data.html"))print('数据可视化结果完成,请在当前目录下查找打开 data.html 文件!')
效果展示
"Python怎么爬取股票交易数据并可视化展示"的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注网站,小编将为大家输出更多高质量的实用文章!
数据
股票
成交量
可视化
代码
名称
交易
内容
图表
地址
市值
市盈
市盈率
情况
成交额
效果
文件
更多
案例
模块
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
给笔记本装网吧服务器
医院网络安全等保验收资料
软件开发标书及预算
浙江互联网络技术信息
泰拉瑞亚无人管理开荒服务器
网络安全多久检测评估一次
数据库导入osm
gis怎么添加个人数据库
其他软件开发税负率
app软件开发解决方案价格
如何查看腾讯云服务器的ip地址
物联网软件开发程序员
新闻中的数据库技术应用
网络安全专题网络培训心得撰写
工控触摸屏那什么软件开发
网络安全风险检测结果
代理服务器在哪里关掉
煤炭企业网络安全等级保护建设
死科网络技术学院
网络安全检查讲话稿
国产pc 服务器cpu
海淀区实用软件开发报价
中国社会科学引文数据库检索
学计算机软件开发在哪学
亲家网络技术公司济南
上海华通电脑网络技术有限公司
成都服务器报废费用情况
山东春考网络技术类
二年级网络安全的手抄报怎么画
创建ambari数据库指令