① 如何用爬虫抓取股市数据并生成分析报表
1. 关于数据采集
股票数据是一种标准化的结构数据，是可以通过API接口访问的（不过一般要通过渠道，开放的API有一定的局限性）。也可以通过爬虫软件进行采集，但是爬虫软件采集数据不能保证实时性，根据数据量和采集周期，可能要延迟几十秒到几分钟不等。我们总结了一套专业的爬虫技术解决方案(Ruby + Sidekiq)。能够很快实现这个采集，也可以后台可视化调度任务。
2. 关于展现
网络股票数据的展现，网页端直接通过HTML5技术就已经足够，如果对界面要求高一点，可以采用集成前端框架，如Bootstrap；如果针对移动端开发， 可以使用Ionic框架。
3. 关于触发事件
如果是采用Ruby on Rails的开发框架的话，倒是很方便了，有如sidekiq, whenever这样子的Gem直接实现任务管理和事件触发。
② 如何编程从免费股票软件中提取实时数据
自己写程序的话，一种方法是从已提供的信息源，例如webservice获取数据。还有种办法就是去连接提供即时信息的网页硬解析。
代码举例如下：
Created on Thu Jul 23 09:17:27 2015
@author: jet
"""
DAY_PRICE_COLS = ['date', 'open', 'high', 'close', 'low', 'volume',
'chg', '%chg', 'ma5', 'ma10', 'ma20',
'vma5', 'vma10', 'vma20', 'turnover']
DAY_PRICE_URL = '%sapi.finance.%s/%s/?code=%s&type=last'
INDEX_KEY = ['SH', 'SZ', 'HS300', 'SZ50', 'GEB', 'SMEB']
INDEX_LIST = {'SH': 'sh000001', 'SZ': 'sz399001', 'HS300': 'sz399300',
'SZ50': 'sh000016', 'GEB': 'sz399006', 'SMEB': 'sz399005'}
INDEX_DAY_PRICE_COLS= ['date', 'open', 'high', 'close', 'low', 'volume',
'chg', '%chg', 'ma5', 'ma10', 'ma20',
'vma5', 'vma10', 'vma20']
K_TYPE_KEY = ['D', 'W', 'M']
K_TYPE_MIN_KEY = ['5', '15', '30', '60']
K_TYPE = {'D': 'akdaily', 'W': 'akweekly', 'M': 'akmonthly'}
MIN_PRICE_URL = '%sapi.finance.%s/akmin?scode=%s&type=%s'
PAGE_TYPE = {'http': 'http://', 'ftp': 'ftp://'}
PAGE_DOMAIN = {'sina': 'sina.com.cn', 'ifeng': 'ifeng.com'}
URL_ERROR_MSG = '获取失败，请检查网络状态，或者API端口URL已经不匹配！'
get_hist_data.py
# -*- coding: utf-8 -*-
"""
Created on Thu Jul 23 09:15:40 2015
@author: jet
"""
import const as ct
import pandas as pd
import json
from urllib2 import urlopen,Request
def get_hist_data(code = None, start = None, end = None, ktype = 'D'):
"""
功能:
获取个股历史交易数据
--------
输入:
--------
code:string
股票代码 比如:601989
start:string
开始日期 格式:YYYY-MM-DD 为空时取到API所提供的最早日期数据
end:string
结束日期 格式:YYYY-MM-DD 为空时取到最近一个交易日数据
ktype:string(default=D, 函数内部自动统一为大写)
数据类型 D=日K线，W=周K线，M=月K线，5=5分钟，15=15分钟
30=30分钟，60=60分钟
输出:
--------
DataFrame
date 日期
open 开盘价
high 最高价
close 收盘价
low 最低价
chg 涨跌额
p_chg 涨跌幅
ma5 5日均价
ma10 10日均价
ma20 20日均价
vma5 5日均量
vma10 10日均量
vma20 20日均量
turnover换手率(指数无此项)
"""
code = code_to_APIcode(code.upper())
ktype = ktype.upper()
url = ''
url = get_url(ktype, code)
print(url)
js = json.loads(ping_API(url))
cols = []
if len(js['record'][0]) == 14:
cols = ct.INDEX_DAY_PRICE_COLS
else:
cols = ct.DAY_PRICE_COLS
df = pd.DataFrame(js['record'], columns=cols)
if ktype in ct.K_TYPE_KEY:
df = df.applymap(lambda x:x.replace(u',', u''))
for col in cols[1:]:
df[col]=df[col].astype(float)
if start is not None:
df = df [df.date >= start]
if end is not None:
df = df[df.date <= end]
df = df.set_index('date')
return df
def code_to_APIcode(code):
"""
功能：
验证输入的股票代码是否正确，若正确则返回API对应使用的股票代码
"""
print(code)
if code in ct.INDEX_KEY:
return ct.INDEX_LIST[code]
else:
if len(code) != 6:
raise IOError('code input error!')
else:
return 'sh%s'%code if code[:1] in ['5', '6'] else 'sz%s'%code
def get_url(ktype, code):
"""
功能：
验证输入的K线类型是否正确，若正确则返回url
"""
if ktype in ct.K_TYPE_KEY:
url = ct.DAY_PRICE_URL % (ct.PAGE_TYPE['http'], ct.PAGE_DOMAIN['ifeng'],
ct.K_TYPE[ktype], code)
return url
elif ktype in ct.K_TYPE_MIN_KEY:
url = ct.MIN_PRICE_URL % (ct.PAGE_TYPE['http'], ct.PAGE_DOMAIN['ifeng'],
code, ktype)
return url
else:
raise IOError('ktype input error!')
def ping_API(url):
"""
功能：
向API发送数据请求，若链接正常返回数据
"""
text = ''
try:
req = Request(url)
text = urlopen(req,timeout=10).read()
if len(text) < 15:
raise IOError('no data!')
except Exception as e:
print(e)
else:
return text
#测试入口
print(get_hist_data('601989','2015-07-11','2015-07-22'))
③ 如何获取实时的股票数据
估计你是盘中炒股需要吧？多数股票软件都有公式系统，例如大智慧、同花顺、通达信，都有公式系统，在公式系统中编写自己的公式，就可以得到自己需要的实时的股票数据了。这些都是免费的。
如果是公司，有专门提供股票行情API接口的，例如微盛的金融实时行情API接口，但这种接口需要程序员才能使用，比较专业。
④ 如何stata中把股票代码调整为六位数
调整类型即可。
每年有不胜枚举的投资者在ST股票上投资失败，但是股票ST股票的具体内容不为人知，请允许我向你们介绍一下。
千万要坚持看下去，如果不特别重视第三点，很有可能会造成严重错误。
在我们详细讲解股票ST之前，先给大家分享今日机构的牛股名单，趁还没被删前，赶紧戳下面链接领取：速领！今日机构牛股名单新鲜出炉！
（1）股票ST是什么意思？什么情况下会出现？
ST指的就是Special Treatment，指的是沪深两市交易所给那些运营出现异常的公司实行的特别处理，会在股票名称前添加一个“ST”作为标志，俗称戴帽，用这个来告知每个投资者需要小心这种股票。
如果一个企业持续亏损了三年，就会替换成“*ST”，也就是说它的个股有退市的风险，所以遇到这样的股票千万要警惕。
这样的上市公司不仅要带帽，还要经历为期一年的考察期，处于考察期的上市公司，这一年以内，股价的日涨跌幅被限制为5%。
在2019年时一场有名的案例就是康美药业的300亿财务造假，往日的A股大白马在案件发生过后变成了ST康美，连续收获15个跌停板和蒸发超374亿的市值，全都是在案件之后。
（2）股票 ST如何摘帽？
如果在考察期间的上市公司年度财务状况恢复了正常、那么审计结果就表明财务异常的状况已经消除，公司的净利润在扣除了经常性损益后仍为正值，而且公司还可以持续运转正常，在这种情况下，就可以向交易所申请撤销特别处理。
我们俗称的“摘帽”，也就是在通过审批后撤销掉股票名称前的ST标记。
通常情况下，被迎来的上涨行情是在摘帽之后，这类股票可以多加关注，赚点小钱也是可以的，如何才能第一时间获得这些摘帽信息呢？这个投资日历可以帮到你，将会在每一天都提醒哪些股票进行分红、分股、摘牌等信息，下面的链接可以帮助你获取：专属沪深两市的投资日历，掌握最新一手资讯
（3）对于ST的股票该怎么操作？
在自己手头里的股票运气不好变成了ST股票，那必须重点关注5日均线，接下来就要把止损位设置在5日均线下方，万一股价真的跌破5日均线，这个时候选择清仓出局是最合适的，这样后期持续跌停的时候就不会被套牢了。
另外不建议投资者去建仓带ST标记的股票，因为每个交易日，这一类股票的最大涨跌幅只有5%，操作难度相对较大，难以掌握投资节奏。
如果你不知道怎么操作更好，这款股票神器请收下，填上股票代码，你就可以看到股票的相关信息了：【免费】测一测你的股票当前估值位置？
应答时间：2021-09-23，最新业务变化以文中链接内展示的数据为准，请点击查看
⑤ 谁会使用R软件或者stata等分析一段时间内股票的数据，要求如下
可以的，你的问题都是可以做，但是非常费时间，要具体详谈
我替别人做这类的数据分析蛮多的
⑥ 股市数据如何获取
股市的数据通过炒股软件，每天就可以自动收取
⑦ 怎么抓取股票数据
那么中国股市的数据有没有呢？答案是肯定的，不过要按照下面的参数做些调整，下面提供全球证券交易所的资料。
上证股票是股票代码后面加上.ss，深证股票是股票代码后面加上.sz
例如：000001 = 000001.sz
深市数据链接：http://table.finance.yahoo.com/table.csv?s=000001.sz
上市数据链接：http://table.finance.yahoo.com/table.csv?s=600000.ss
上证综指代码：000001.ss，深证成指代码：399001.SZ，沪深300代码：000300.ss
下面就是世界股票交易所的网址和缩写，要查找哪个股票交易所的数据，就按照上面的格式以此类推。
上海交易所=cn.finance.yahoo.com,.SS,Chinese,sl1d1t1c1ohgv
深圳交易所=cn.finance.yahoo.com,.SZ,Chinese,sl1d1t1c1ohgv
美国交易所=finance.yahoo.com,,United States,sl1d1t1c1ohgv
加拿大=ca.finance.yahoo.com,.TO,Toronto,sl1d1t1c1ohgv
新西兰=au.finance.yahoo.com,.NZ,sl1d1t1c1ohgv
新加坡=sg.finance.yahoo.com,.SI,Singapore,sl1d1t1c1ohgv
香港=hk.finance.yahoo.com,.HK,Hong Kong,sl1d1t1c1ohgv
台湾=tw.finance.yahoo.com,.TW,Taiwan,sl1d1t1c1ohgv
印度=in.finance.yahoo.com,.BO,Bombay,sl1d1t1c1ohgv
伦敦=uk.finance.yahoo.com,.L,London,sl1d1t1c1ohgv
澳洲=au.finance.yahoo.com,.AX,Sydney,sl1d1t1c1ohgv
巴西=br.finance.yahoo.com,.SA,Sao Paulo,sl1d1t1c1ohgv
瑞典=se.finance.yahoo.com,.ST,Stockholm,sl1d1t1c1ohgv
以上方法只能提供历史数据，实时数据不能抓取，此方法由ArthurXF提供
⑧ 如何截获股票数据
1. 如果开着QQ，按键盘的 ctrl+Alt+A 组合键后，鼠标会变成彩色，可以任意选择抓取图像，然后点保存就可以。
2. 按键盘中间那组键中的“Print Screen ”抓图键，就可以把当前图像复制下来，然后，打开Windows自带的画图程序，Ctrl+V粘贴，然后保存就可以。
⑨ 请教股票日交易数据的stata处理
可以做时间序列的分析