前言
最近开始学习基金💹,感觉需要收集一些数据统计分析才靠谱🤔毕竟给A股交学费的感觉可不好受😣
网上有很多公开的数据,我这里选择的是天天基金网进行爬取
页面分析
接口我分析过了,有些验证不太好获取数据,所以直接从html提取
在天天基金网中随便选择一款基金,然后点击进入历史数据页面
容易定位出日增长率的css选择器
还有翻页按钮
程序编写
使用selenium打开chrome浏览器进行爬取,全代码如下
from selenium import webdriver
from selenium.common.exceptions import TimeoutException, StaleElementReferenceException
browser = webdriver.Chrome()
browser.get('http://fundf10.eastmoney.com/jjjz_005827.html')
next_page_input = browser.find_elements_by