【量化投资】04.使用python爬取股票基础数据

最新推荐文章于 2025-06-10 11:26:52 发布
最新推荐文章于 2025-06-10 11:26:52 发布
阅读量722 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： # Python 股票 投资 文章标签： 量化投资 数据获取 爬虫 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/MissYourKiss/article/details/113564791
本文介绍了一种从东方财富官网抓取A股股票列表及其基本信息的方法，并计划进一步结构化存储及多线程加速。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

【背景】

        之前的文章里推荐了好几个量化投资程序获取数据的方法，但是后来发现大多都有了限制，包括某share都得用积分才能使用，积分的获取非常麻烦。求人不如靠己！所以就开始自己一点点的自己想办法获取数据，并存储到本地。

        本次的目标是从东方财富的官网页面上抓取股票的基本数据，内容如下:

  • 本期
    • 获取A股所有的股票列表和一些基本信息，并保存到csv文件
    • 获取各股票的一些详细信息，并保存到csv文件
  • 计划
    • 后续将数据进行结构化保存到数据库
    • 后续改成多线程获取，加速爬取数据

为了帮朋友写个在github page上搭建一个自己的网站，所以就尝试使用hexo+github写了这篇文章。本篇文章的详细地址连接如下：

https://unclevicky.github.io/rabbitBear

使用Python爬虫爬取股票数据：实时数据与历史数据的获取与分析
2201_76125261的博客
03-24 1298
股票市场是全球经济的重要组成部分，获取准确、实时的股票数据对投资者、分析师和研究人员来说至关重要。我们将使用最新的技术来解决股票数据的爬取难题，并提供完整的代码实现。本文的重点包括：如何通过Python请求数据，如何处理动态数据源，如何克服反爬虫机制以及如何对数据进行存储和分析。股票数据的爬取不仅帮助我们实时掌握市场动态，还为后续的量化分析、模型构建提供了数据支持。Tushare是一个开源的金融数据接口，可以获取股票、期货、基金等市场的历史数据。当我们爬取到股票数据后，通常会进行数据清洗、处理和分析。
Python爬取股票实时数据：基于异步技术与数据存储的完整实战指南
最新发布
2201_76125261的博客
06-19 1109
本文将详细介绍如何使用Python构建一个高效的股票实时数据爬虫系统，涵盖从数据采集到存储的全流程。我们将使用最新的异步技术（aiohttp+asyncio）、高效解析库（BeautifulSoup4、pyquery）、反反爬策略以及多种数据存储方案（MySQL、MongoDB、CSV）。文章包含完整的代码实现和详细的技术解析，适合中高级Python开发者学习实战。关键词：Python爬虫、股票数据、异步爬取、数据存储、aiohttp、反反爬。
Python爬取股票信息，并可视化数据的示例
09-27
主要介绍了Python爬取股票信息，并可视化数据的示例，帮助大家更好的理解和使用python爬虫，感兴趣的朋友可以了解下
python爬股票信息_python爬取股票信息
weixin_39640085的博客
11-29 196
import requestsfrom bs4 import BeautifulSoupimport tracebackimport redef getHTMLText(url, code="utf-8"):try:r = requests.get(url)r.raise_for_status()r.encoding = codereturn r.textexcept:return ""def g...
python爬取股票数据——基础篇
白帽阿叁的博客
11-03 2952
这里需要注意，baostock爬取的股票复权数据采用的是涨跌幅复权法，这种方式计算的股票复权价与你的股票交易软件计算的结果是不同的。
小白学 Python 爬虫（25）：爬取股票信息
热门推荐
极客挖掘机
12-24 6万+
人生苦短，我用 Python 前文传送门： 小白学 Python 爬虫（1）：开篇 小白学 Python 爬虫（2）：前置准备（一）基本类库的安装 小白学 Python 爬虫（3）：前置准备（二）Linux基础入门 小白学 Python 爬虫（4）：前置准备（三）Docker基础入门 小白学 Python 爬虫（5）：前置准备（四）数据库基础 小白学 Python 爬虫（6）：前置准备（...
python爬取股票数据
weixin_37450657的博客
12-13 6696
pip install tushare，爬取银行股票数据对数据进行初步进行整理，用今日的收盘减去昨天的收盘值定义value表示涨跌，并绘图直观表示最近的股票走势图。其实也可以直接根据pchange>0来标签分类的 -_-import tushare as ts import pandas as pd import pandas as pd #获取中国银行历史数据 df_CB=ts.get_hist
Python爬虫实战：股票历史数据抓取与量化回测全流程详解
2201_76125261的博客
06-10 1192
我们以**东方财富网（eastmoney.com）和雪球网（xueqiu.com）**为主要目标，演示如何爬取A股历史行情。最常用的HTTP请求库，简单易用，适合静态页面数据请求。本文详细介绍了从股票历史数据抓取到简单回测的完整流程，代码示例基于最新技术，结构清晰，适合初学者和进阶者学习量化投资实战。希望对你入门Python爬虫和量化交易有所帮助！
Python量化金融-Python金融实务应用与数据分析课程 量化金融基础课 -量化因子 共31页.pdf
02-26
【课程列表】 Python课程1.2-Python基础知识（一）.pdf Python课程1.3-Python基础知识（二）.pdf Python课程1.4-Python基础金融分析应用.pdf ...量化金融基础课 -股票量化基本面投资.pdf 量化金融基础课 -量化因子.pdf
利用Python爬取东方财富网A股股票交易数据并保存为CSV文件
03-25
适合人群：熟悉Python基础语法并对金融数据有一定兴趣的投资者或者量化分析师。 使用场景及目标：旨在帮助个人快速收集市场公开资料作为后续研究或者实盘操作时的技术支持工具。使用者可以借此掌握某一时间段内的...
获取所有A股股票基础信息.rar
10-31
获取所有A股股票基础信息 股票代码 股票名称 两市三千多支都能拉下来
python 爬虫:爬取股票信息
only_tao的博客
02-22 1447
mooc 上的课程已有些年头了，其中许多内容早已经无法通过静态的手段进行爬取 因此这里换一个新的静态网站进行爬取，权当练习 爬取网址：证券之星 通过证券之星网站获取股票的名字及代码(主要是代码)，然后再通过其对应的超链接进行详细信息的获取，本来可以直接获取的，这里为了练习爬取多个网页就姑且这么做了 代码如下 # 所有的信息整合到了一个网址里，那么只需要对一个网站进行分析？！ import re import requests from bs4 import BeautifulSoup def getHt.
Python爬取所有股票数据并进行数据分析
m0_74942241的博客
10-26 3758
一、背景：作为一个程序员，总喜欢在股市里面晃荡，无奈总是当成韭菜收割了。每一次都是卖涨买跌，处处碰壁。但是作为一个有一定阅历的程序员本能告诉自己，只要掌握了大量的股票数据，就可以在信息渠道落后的情况下，分析出机构大概率的在布局哪些股票，从而在机构拉涨停之前，提前进入分一杯羹。于是，开始编写了爬取股票数据并进行数据分析的程序。二、环境：Anaconda3.3 python3.7.1三、目标：爬取所有股票每天每一分钟的数据，并且进行数据分析。
Python爬虫实战：爬取股票信息
xiangxueerfei的博客
03-18 3844
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取本次选题是先写好代码再写的文章，绝对可以用到页面元素解析，并且还需要对网站的数据加载有一定的分析，才能得到最终的数据，并且小编找的这两个数据源无 ip 访问限制，质量有保证，绝对是小白练手的绝佳之选。郑重声明： 本文仅用于学习等目的。① Python所有方向的学习路线图，清楚各个方向要学什么东西。
python爬虫项目（四）：爬取股票市场数据并构建自动化投资决策系统
sybh的博客
10-01 1673
通过上述步骤，我们成功构建了一个能够从股票市场爬取数据、进行技术分析和机器学习预测，并结合自动化交易策略的投资决策系统。在未来，可以结合更多的金融衍生品数据、市场情绪分析等进一步提升预测的准确性，构建一个更加复杂和全面的自动化投资系统。
用Python来爬取股票数据进行分析，冲一波！
xxue345678的博客
07-26 4251
最近手头有点紧，但是作为一个男人，身上怎么能够没有大把钞票呢？
python爬取股票数据——进阶篇
qq_41314882的博客
11-17 3428
当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。验证你的量化因子是否有效呀。Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。统一思想之后，接下来就该上手敲代码了。没错，如果你只需要一只或几只股票的历史数据，通达信更简便，但如果你的需求是全市场5000+的股票数据，通达信该如何应对？
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值