爬去股票数据

① 如何爬取新浪财经的多级数据

爬取新浪财经的多级数据可以按照以下步骤。
1、导入依赖的模块，需要导入的程序接口有request、pyquery和Pandas。
2、选择爬取数据，选取的数据为新浪财经的网页，进入微博-新浪财经的网页，点击鼠标右键，出现如图所示的对话框，点击检查。
3、点击Toggledevive键，将网页由PC显示，转换成手机显示模式以便于爬取网页内容，多数网站在PC端都建立了防爬措施。
4、进入网页的手机端后，点击Network。
5、从选择的网页中选取需要的内容进行爬取并输出。

② 爬取股票信息是网络爬虫的应用场景吗

网络爬虫可以用来爬取股票信息，因为股票信息可以在互联网上搜索并获取，网络爬虫可以自动收集这些信息。网络爬虫是一种自动地抓取互联网信息的程序，能够按照指定的规则自动地抓取网站上的信息，是一种常见的数据抓取技术。

③ 用Python能做哪些事情

Python作为一门胶水语言，其实能做的事非常多，下面我简单介绍一下，分为八个方面，主要内容如下：

数据处理

Python提供了大量用于数据处理和科学计算的库，像numpy,scipy,pandas等，对于矩阵计算、线性代数等，numpy可以快速计算并得到结果，pandas内置的DataFrame类型可以快速处理各种常见的文件，像CSV，Excel，JSon等，是数据分析的利器，在数据处理中经常使用：

可视化

Python数据可视化库也非常丰富，除了经常使用的matplotlib外，还有许多其他可视化库，像seaborn，pyecharts等，绘制的图形种类更丰富，更漂亮，代码量也更少，非常容易学习，对于日常作图制表来说，是一个非常不错的选择：

机器学习

现在机器学习正火，其实Python里面也有现成的机器学习模块可供学习—scikit-learn，对于常见的机器学习算法，像分类、回归、聚类、降维等，这个模块都有现成的代码可直接使用，非常方便，对于想入门机器学习的朋友来说，这是一个非常不错的选择：

神经网络

神经网络起源应该比较早了，目前在图像领域应用比较广泛，Python也有现成的神经网络模块可供使用，比较有名的就是谷歌开源的tensorflow，可以快速构建神经网氏轿络模型，并支持GPU计算，对于科研人员来说，是一个非常不错的选择，当然，除此之虚埋外，还有更高级的theano，keras等，使用也非常方便：

财经金融

对于想快速获取股票财经数据的朋友来说，Python也有现成的模块可供使用—tushare，一个免费、开源的财经数据接口包，可以快速获取国内股票数据，而且自动整合了数据爬取、清洗到加工的过程，使用起来非常不错，对于金融分析人员来说，是一个非常不错的工具：

爬虫

Python非常适合做网页爬虫，像常见的urllib，bs4，requests，lxml等模块，对于爬取大部分网页来说非常容易，请求解析于一身，可以快速获取到我们需要的数据，当然，为了提高开发效率，避免重复造轮子，Python也提供了一个非常受欢迎的爬虫框架—scrapy，可定制性更高，用户只需要添加少量代码，便可快速启动爬虫：

游戏开发

对于游戏开发来差核蚂说，Python也有一个专门的平台—pygame，专门用于游戏开发，对于开发小型游戏来说，这是一个非常不错的选择，摆脱了低级语言的束缚，代码量更少也更易学习，对于游戏感兴趣的朋友来说，这是一个非常不错的选择：

视频下载

对于视频下载来说，Python也有一个下载利器—you-get，可以免费快速的下载优酷、B站、美拍等网站视频，不需要登录，一键you-get就可以下载视频到本地，还支持在线播放功能，除此之外，还可以下载图片、音频等文件，是一个非常实用的工具：

目前，就分享这8个方便吧，比较实用也比较有趣，当然，还有许多其他方面的，像Web开发、桌面GUI、测试、运维、树莓派等，网上也有相关资料可供参考，感兴趣的朋友可以自己搜一下，希望以上分享的内容能对你有所帮助吧

④ 如何用python 爬虫抓取金融数据

获取数据是数据分析中必不可少的一部分，而网络爬虫是是获取数据的一个重要渠道之一。鉴于此，我拾起了Python这把利器，开启了网络爬虫之路。

本篇使用的版本为python3.5，意在抓取证券之星上当天所有A股数据。程序主要分为三个部分：网页源码的获取、所需内容的提取、所得结果的整理。

一、网页源码的获取

很多人喜欢用python爬虫的原因之一就是它容易上手。只需以下几行代码既可抓取大部分网页的源码。

为了减少干扰，我先用正则表达式从整个页面源码中匹配出以上的主体部分，然后从主体部分中匹配出每只股票的信息。代码如下。

pattern=re.compile('<tbody[sS]*</tbody>')
body=re.findall(pattern,str(content)) #匹配<tbody和</tbody>之间的所有代码pattern=re.compile('>(.*?)<')
stock_page=re.findall(pattern,body[0]) #匹配>和<之间的所有信息

其中compile方法为编译匹配模式，findall方法用此匹配模式去匹配出所需信息，并以列表的方式返回。正则表达式的语法还挺多的，下面我只罗列所用到符号的含义。

语法 说明

. 匹配任意除换行符“ ”外的字符

* 匹配前一个字符0次或无限次

？ 匹配前一个字符0次或一次

s 空白字符：[<空格> fv]

S 非空白字符：[^s]

[...] 字符集，对应的位置可以是字符集中任意字符

(...) 被括起来的表达式将作为分组，里面一般为我们所需提取的内容

正则表达式的语法挺多的，也许有大牛只要一句正则表达式就可提取我想提取的内容。在提取股票主体部分代码时发现有人用xpath表达式提取显得更简洁一些，看来页面解析也有很长的一段路要走。

三、所得结果的整理

通过非贪婪模式(.*?)匹配>和<之间的所有数据，会匹配出一些空白字符出来，所以我们采用如下代码把空白字符移除。

stock_last=stock_total[:] #stock_total：匹配出的股票数据for data in stock_total: #stock_last：整理后的股票数据
if data=='':
stock_last.remove('')

最后，我们可以打印几列数据看下效果，代码如下

print('代码',' ','简称',' ',' ','最新价',' ','涨跌幅',' ','涨跌额',' ','5分钟涨幅')for i in range(0,len(stock_last),13): #网页总共有13列数据
print(stock_last[i],' ',stock_last[i+1],' ',' ',stock_last[i+2],' ',' ',stock_last[i+3],' ',' ',stock_last[i+4],' ',' ',stock_last[i+5])

⑤ java 如何实现 获取实时股票数据

一般有三种方式：

1. 网页爬虫。采用爬虫去爬取目标网页的股票数据，去GitHub或技术论坛（如CSDN、51CTO）上找一下别人写的爬虫集成到项目中。

2. 请求第三方API。会有专门的公司（例如网络API市场）提供股票数据，你只需要去购买他们的服务，使用他们提供的SDK，仿照demo开发实现即可。如下图所示：

⑥ 学python能做什么

Python第三方模块众多，下面我介绍一些比较实用而又有趣的模块，主要分为爬虫、数据处理、可视化、机器学习、神经网络、股票财经、游戏这7个方面，主要内容如下：

1.爬虫：
相信大部分人都用Python爬过数据，目前来说，比较流行的框架是scrapy，对爬取数据来说，简单方便了不少，只需要自己添加少量的代码，框架便可启动开始爬取，当然，还有简单地爬虫包，像requests+BeautifulSoup，对于爬取简单网页来说，也足够了：

如果你想要学好Python最好加入一个好的学习环境，可以来这个Q群，首先是629，中间是440，最后是234，这样大家学习的话就比较方便，还能够共同交流和分享资料

2.数据处理：
numpy,scipy,pandas这些包对于处理数据来说非常方便，线性代数、科学计算等，利用numpy处理起来非常方便，pandas提供的DataFrame类可以方便的处理各种类型的文件，像excel,csv等，是分析数据的利器：

3.可视化：
这里的包其实也挺多的，除了我们常用的matplotlib外，还有seaborn,pyecharts等，可以绘制出各种各样类型的图形，除了常见的线图、饼图和柱状图外，还可以绘制出地图、词云图、地理坐标系图等，美观大方，所需的代码量还少，更容易上手：

4.机器学习：
说起python机器学习，大部分人都应该scikit-learn这个包，常见的机器学习算法，像回归、分类、聚类、降维、模型选择等，这里都有现成的代码可供利用，对于这机器学习方面感兴趣的人来说，这是一个入门机器学习的好包：

5.神经网络：
说起神经网络，大部分人都应该会想起深度学习，对应的就会想到谷歌目前非常流行的深度学习框架—tensorflow，tesndorflow可被用于语音识别和图像识别等众多领域，其发展前景光明，对于这方面感兴趣的科研人员来说，是一个很不错的工具，当然，还有基于tensorflow的theano,keras等，都是学习神经网络的不错选择：

6.股票财经：
对于股票和财经比较感兴趣的朋友来说，python也提供了现成的库来获取和分析股票财经数据—tushare，tushare是一个免费、开源的python财经数据接口包，可以快速的获取到国内大部分股票数据，对于金融分析人员来说，可以说是一个利器，降低了许多任务量：

7.游戏：
Python专门为游戏开发提供了一个平台—Pygame，对于想快速开发小型游戏的用户来说，是一个很不错的选择，简单易学、容易上手，脱离了低级语言的束缚，使用起来也挺方便的：

⑦ 如何使用Python获取股票分时成交数据

可以使用爬虫来爬取数据，在写个处理逻辑进行数据的整理。你可以详细说明下你的需求，要爬取的网站等等。
希望我的回答对你有帮助

⑧ 怎么学python爬取财经信息

本程序使用Python 2.7.6编写，扩展了Python自带的HTMLParser，自动根据预设的股票代码列表，从Yahoo Finance抓取列表中的数据日期、股票名称、实时报价、当日变化率、当日最低价、当日最高价。

由于Yahoo Finance的股票页面中的数值都有相应id。

例如纳斯达克100指数ETF（QQQ）
其中实时报价的HTML标记为

[html]view plain

• <spanid="yfs_l84_qqq">87.49</span>

而标普500指数ETF（SPY）


其中实时报价的HTML标记为

[html]view plain

• <spanid="yfs_l84_spy">187.25</span>

因此本数据抓取程序根据相应的id字符串来查找数据。具体来说就是先继承HTMLParser，然后在自定义的子类中重载handle_data(self, data)方法，查找包含相应id字符串（例如实时报价的id字符串为"yfs_l84_"+股票代码）的HTML标记，并输出这个HTML标记中的数据（例如qqq的<span id="yfs_l84_qqq">87.49</span>，其中的数据87.49就是实时报价。）

样本输出：

数据依次是

数据日期 股票代码 股票名称 实时报价 日变化率 日最低价 日最高价

[python]view plain

• 05/05/(IBB)233.281.85%225.34233.28

• 05/05/(SOCL)17.480.17%17.1217.53

• 05/05/(PNQI)62.610.35%61.4662.74

• 05/05/2014xsdSPDRS&PSemiconctorETF(XSD)67.150.12%66.2067.41

• 05/05/2014itaiSharesUSAerospace&Defense(ITA)110.341.15%108.62110.56

• 05/05/2014iaiiSharesUSBroker-Dealers(IAI)37.42-0.21%36.8637.42

• 05/05/(VBK)119.97-0.03%118.37120.09

• 05/05/2014qqqPowerSharesQQQ(QQQ)87.950.53%86.7687.97

• 05/05/2014ewiiSharesMSCIItalyCapped(EWI)17.86-0.56%17.6517.89

• 05/05/(DFE)62.33-0.11%61.9462.39

• 05/05/(PBD)13.030.00%12.9713.05

• 05/05/(EIRL)38.52-0.16%38.3938.60