东方财富网爬虫及可视化

最新推荐文章于 2024-03-30 13:15:46 发布

linker6619

最新推荐文章于 2024-03-30 13:15:46 发布

阅读量9k

点赞数 4

CC 4.0 BY-SA版权

文章标签： python 数据分析可视化

本文链接：https://blog.csdn.net/linker6619/article/details/105180782

本文介绍了如何使用selenium爬取东方财富网的大盘资金流向历史数据，并通过xpath获取表格信息。由于原始数据存在格式问题，采用Excel进行预处理，然后利用matplotlib进行数据可视化，虽然不熟悉股市数据，但观察到大部分流向为负值，可能表明大额资金流出。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

本次主要爬取东方财富网关于“大盘资金流向历史数据”的数据
在这里插入图片描述
根据日期及流入资金数据绘制折线图，尝试使用XHR或者bs抓取数据，无奈失败且比较麻烦，采用了selenium抓取的方法。
并使用xpath获取网页中的表格数据，需要提前安装谷歌浏览器及相关程序


from selenium import webdriver  #导入模块
import time
import csv  #存储数据
from lxml import etree

option = webdriver.ChromeOptions()   #网址获取
option.add_argument('headless')  #设置浏览器静默
driver = webdriver.Chrome(options=option)
driver.get('http://data.eastmoney.com/zjlx/zs399006.html')
time.sleep(2)

source = driver.page_source
mytree = etree.HTML(source)
tables = mytree.xpath("//table[@class='tab1']")#定位表格，返回列表
for i in range(len(tables)):#循环表格
    onetable = []
    trs = tables[i].xpath('.//tr')#取出所有tr标签
    for tr in trs:
        ui = []
        for td in tr:
            texts = td.xpath(

最低0.47元/天解锁文章