如何获取股票的大数据.如何用爬虫抓取股市数据并生成分析报表

一、如何获取实时的股票数据

结合自己在这些软件中编写的自编公式如果你只是需要进行实时选股，则可以采用通达信、指标，可实现实时的的股票监控。

二、如何快速取得股票交易历史数据

答:最直观的方法是直接到网站查看股票历史数据然后复制下来，比如到谷歌财经输入相应股票代码，点击“历史价格”，就可以看到该股票历史数据。

三、如何获取大数据

辅助收集 最有效的则是数据统计  有专业的团队收集  如现在的淘宝 在你点击某一商品时就会记录你的浏览项进行推选购物。

四、如何导出股票的全部行情数据

通达信软件数据导出的方法：    1、点击“系统/数据导出”，可惜导出的只有280个交易日的数据，即2010年2月以后的数据。
也就是仅导出了“当前屏幕数据”。
这样是不够的。
可选导出文件格式，txt,excel两者选其一。
    2、点击“系统/数据导出/高级导出”，选择几个股票，导出的是2007年之后的TXT格式数据，很高兴，多了很多，前进了一大步。
但还是不够的。
    3、点击“系统/盘后数据下载”，选中“日线和实时行情数据”，选日期1995年1月1日-至今，取消“下载所有A股类所有的数据”的对勾，点击“添加品种”，添入自己想要的几个股票，再点击“开始下载”。
    4、重复第2步，这样导出才是1995以来的全部日K线数据。
太高兴了。
    5、单支股票数据的导出：进入分析图，点右下“+”号，直到K线图不再增加K线，重复第1步。
如此导出的将包括当前屏幕上的技术指标数据。
但只能一次导出一支股票。
    打开导出的TXT文件，将数据复制导excel中，或者数据库中，就可以编程序分析了。

五、如何用爬虫抓取股市数据并生成分析报表

推荐个很好用的软件，我也是一直在用的，就是前嗅的ForeSpider软件，我是一直用过很多的采集软件，最后选择的前嗅的软件，ForeSpider这款软件是可视化的操作。
简单配置几步就可以采集。
如果网站比较复杂，这个软件自带爬虫脚本语言，通过写几行脚本，就可以采集所有的公开数据。
软件还自带免费的数据库，数据采集直接存入数据库，也可以导出成excel文件。
如果自己不想配置，前嗅可以配置采集模板，我的模板就是从前嗅购买的。
另外他们公司不光是软件好用，还有自己的数据分析系统，直接采集完数据后入库，ForeSpider内部集成了数据挖掘的功能，可以快速进行聚类分类、统计分析等，采集结果入库后就可以形成分析报表。
最主要的是他采集速度非常快，我之前用八爪鱼的软件，开服务器采，用了一个月采了100万条，后来我用ForeSpider。
笔记本采的，一天就好几百万条。
这些都是我一直用前嗅的经验心得，你不妨试试。
建议你可以下载一个免费版试一试，免费版不限制功能，没有到期时间。

参考文档