⑴ 如何用爬蟲抓取股市數據並生成分析報表
1. 關於數據採集
股票數據是一種標准化的結構數據，是可以通過API介面訪問的（不過一般要通過渠道，開放的API有一定的局限性）。也可以通過爬蟲軟體進行採集，但是爬蟲軟體採集數據不能保證實時性，根據數據量和採集周期，可能要延遲幾十秒到幾分鍾不等。我們總結了一套專業的爬蟲技術解決方案(Ruby + Sidekiq)。能夠很快實現這個採集，也可以後台可視化調度任務。
2. 關於展現
網路股票數據的展現，網頁端直接通過HTML5技術就已經足夠，如果對界面要求高一點，可以採用集成前端框架，如Bootstrap；如果針對移動端開發， 可以使用Ionic框架。
3. 關於觸發事件
如果是採用Ruby on Rails的開發框架的話，倒是很方便了，有如sidekiq, whenever這樣子的Gem直接實現任務管理和事件觸發。
⑵ 如何獲取實時的股票數據
如果你只是需要進行實時選股，則可以採用通達信、大智慧、同花順等看盤軟體。通達信、大智慧等軟體中有一個「鷹眼盯盤」的功能（各家叫法不同，但意思一樣的），結合自己在這些軟體中編寫的自編公式、指標，可實現實時的的股票監控。
如果你需要的是實時獲取股票數據，則有專門的股票實時行情API介面，例如微盛的股票實時API介面，通過這樣的介面，編程即可取得實時的股票數據。
⑶ 如何獲取實時的股票數據
要跟供應商協商得到他的介面才能得到實時股票行情數據；
股票實時行情，可以通過兩個方法來進行查看：
第一種，在網路搜索頁面直接輸入股票代碼，如：000717，網路輸入後，即可在搜索結果中看到，其中分時，就是該股票在當天的實時走向。
第二種，通過炒股軟體，如東財，同花順等，在開啟後，直接輸入，股票代碼，如600854，點擊回車。進入的第一個頁面就是該股票在當天的實時行情。
同時在股票軟體的分時成交界面，可以查看到每一分鍾的成交價和手數。股票行情趨勢判斷必要時也需要結合分時成交界面的數據來進行判斷。
查看其它股票的行情也是一樣的道理，直接鍵入該股票的代碼就可以查看到該股票當天或某個時間段內的行情。當然，精準的行情走勢、趨勢，是需要結合多種指標來共同進行分析的。
⑷ 如何編程從免費股票軟體中提取實時數據
自己寫程序的話，一種方法是從已提供的信息源，例如webservice獲取數據。還有種辦法就是去連接提供即時信息的網頁硬解析。
代碼舉例如下：
Created on Thu Jul 23 09:17:27 2015
@author: jet
"""
DAY_PRICE_COLS = ['date', 'open', 'high', 'close', 'low', 'volume',
'chg', '%chg', 'ma5', 'ma10', 'ma20',
'vma5', 'vma10', 'vma20', 'turnover']
DAY_PRICE_URL = '%sapi.finance.%s/%s/?code=%s&type=last'
INDEX_KEY = ['SH', 'SZ', 'HS300', 'SZ50', 'GEB', 'SMEB']
INDEX_LIST = {'SH': 'sh000001', 'SZ': 'sz399001', 'HS300': 'sz399300',
'SZ50': 'sh000016', 'GEB': 'sz399006', 'SMEB': 'sz399005'}
INDEX_DAY_PRICE_COLS= ['date', 'open', 'high', 'close', 'low', 'volume',
'chg', '%chg', 'ma5', 'ma10', 'ma20',
'vma5', 'vma10', 'vma20']
K_TYPE_KEY = ['D', 'W', 'M']
K_TYPE_MIN_KEY = ['5', '15', '30', '60']
K_TYPE = {'D': 'akdaily', 'W': 'akweekly', 'M': 'akmonthly'}
MIN_PRICE_URL = '%sapi.finance.%s/akmin?scode=%s&type=%s'
PAGE_TYPE = {'http': 'http://', 'ftp': 'ftp://'}
PAGE_DOMAIN = {'sina': 'sina.com.cn', 'ifeng': 'ifeng.com'}
URL_ERROR_MSG = '獲取失敗，請檢查網路狀態，或者API埠URL已經不匹配！'
get_hist_data.py
# -*- coding: utf-8 -*-
"""
Created on Thu Jul 23 09:15:40 2015
@author: jet
"""
import const as ct
import pandas as pd
import json
from urllib2 import urlopen,Request
def get_hist_data(code = None, start = None, end = None, ktype = 'D'):
"""
功能:
獲取個股歷史交易數據
--------
輸入:
--------
code:string
股票代碼 比如:601989
start:string
開始日期 格式:YYYY-MM-DD 為空時取到API所提供的最早日期數據
end:string
結束日期 格式:YYYY-MM-DD 為空時取到最近一個交易日數據
ktype:string(default=D, 函數內部自動統一為大寫)
數據類型 D=日K線，W=周K線，M=月K線，5=5分鍾，15=15分鍾
30=30分鍾，60=60分鍾
輸出:
--------
DataFrame
date 日期
open 開盤價
high 最高價
close 收盤價
low 最低價
chg 漲跌額
p_chg 漲跌幅
ma5 5日均價
ma10 10日均價
ma20 20日均價
vma5 5日均量
vma10 10日均量
vma20 20日均量
turnover換手率(指數無此項)
"""
code = code_to_APIcode(code.upper())
ktype = ktype.upper()
url = ''
url = get_url(ktype, code)
print(url)
js = json.loads(ping_API(url))
cols = []
if len(js['record'][0]) == 14:
cols = ct.INDEX_DAY_PRICE_COLS
else:
cols = ct.DAY_PRICE_COLS
df = pd.DataFrame(js['record'], columns=cols)
if ktype in ct.K_TYPE_KEY:
df = df.applymap(lambda x:x.replace(u',', u''))
for col in cols[1:]:
df[col]=df[col].astype(float)
if start is not None:
df = df [df.date >= start]
if end is not None:
df = df[df.date <= end]
df = df.set_index('date')
return df
def code_to_APIcode(code):
"""
功能：
驗證輸入的股票代碼是否正確，若正確則返回API對應使用的股票代碼
"""
print(code)
if code in ct.INDEX_KEY:
return ct.INDEX_LIST[code]
else:
if len(code) != 6:
raise IOError('code input error!')
else:
return 'sh%s'%code if code[:1] in ['5', '6'] else 'sz%s'%code
def get_url(ktype, code):
"""
功能：
驗證輸入的K線類型是否正確，若正確則返回url
"""
if ktype in ct.K_TYPE_KEY:
url = ct.DAY_PRICE_URL % (ct.PAGE_TYPE['http'], ct.PAGE_DOMAIN['ifeng'],
ct.K_TYPE[ktype], code)
return url
elif ktype in ct.K_TYPE_MIN_KEY:
url = ct.MIN_PRICE_URL % (ct.PAGE_TYPE['http'], ct.PAGE_DOMAIN['ifeng'],
code, ktype)
return url
else:
raise IOError('ktype input error!')
def ping_API(url):
"""
功能：
向API發送數據請求，若鏈接正常返回數據
"""
text = ''
try:
req = Request(url)
text = urlopen(req,timeout=10).read()
if len(text) < 15:
raise IOError('no data!')
except Exception as e:
print(e)
else:
return text
#測試入口
print(get_hist_data('601989','2015-07-11','2015-07-22'))
⑸ 如何獲取實時的股票數據
估計你是盤中炒股需要吧？多數股票軟體都有公式系統，例如大智慧、同花順、通達信，都有公式系統，在公式系統中編寫自己的公式，就可以得到自己需要的實時的股票數據了。這些都是免費的。
如果是公司，有專門提供股票行情API介面的，例如微盛的金融實時行情API介面，但這種介面需要程序員才能使用，比較專業。
⑹ 如何通過軟體抓取新浪財經里單只股票數據
如果你是准備抓歷史數據，那還不如直接使用免費的wdz程序，滬深1990年至今的全部日線歷史；2000年至今十幾年的5分鍾數據都可以直接輸出，而且可轉化為各種格式。根本不用去新浪中抓取。
⑺ 如何獲取實時的股票數據
要跟供應商協商得到他的介面才能得到實時股票行情數據；
股票實時行情，可以通過兩個方法來進行查看：
第一種，在網路搜索頁面直接輸入股票代碼，如：000717，網路輸入後，即可在搜索結果中看到，其中分時，就是該股票在當天的實時走向。
第二種，通過炒股軟體，如東財，同花順等，在開啟後，直接輸入，股票代碼，如600854，點擊回車。進入的第一個頁面就是該股票在當天的實時行情。
同時在股票軟體的分時成交界面，可以查看到每一分鍾的成交價和手數。股票行情趨勢判斷必要時也需要結合分時成交界面的數據來進行判斷。
查看其它股票的行情也是一樣的道理，直接鍵入該股票的代碼就可以查看到該股票當天或某個時間段內的行情。當然，精準的行情走勢、趨勢，是需要結合多種指標來共同進行分析的。
⑻ 如何獲取股票實時數據
開戶之後，安裝券商推薦的APP即可實時掌握股票數據。
⑼ 請問用C#如何提取新浪等網站的股票實時動態行情數據
找到一個利用webservice的方法，希望能夠幫助你
聲明: 這篇文章適合在C#命令行編譯器下的開發借鑒,對於已經裝了MS.NET的朋友,開發客戶端時將會更容易一些,我隨後對登出我自己的開發程序,這篇文章為我摘錄的.摘錄URL:http://www.knowsky.com/2016.html
(一)
Web Services，即Web服務，是微軟.NET戰略中非常重要的一個概念。它的目的是將Web站點轉變為集組織、應用、服務以及設備於一體的可設計Web站點，使Web站點不再處於被動的地位。
本文將介紹如何建立和使用一個在.NET 平台上提供股票報價的Web服務。我們將使用Yahoo的一項以CSV（以逗號分隔的值）的格式提供股票報價的免費服務，將其包含在我們的web 服務中。
注意：這個報價服務常式的運行大約延遲15分鍾，只用於教學目的。
建立Web服務
下面將採用逐步講解代碼的形式來幫助你理解在.NET 中Web服務的編程模式。我們可以使用notepad等任何文本編輯器來編寫 這里的Web服務常式代碼，最後將文件存儲為StockQuote.asmx。請注意：所有的Web服務文件保存時都使用擴展名 *.asmx。
＜%@ WebService Language="C#" class="DailyStock" %＞
代碼的第一行定義了一個 Web 服務，使用的語言是C#。class屬性用來指示Web服務應該調用和使用的類。如果在Web服務中使用了許多類，那麼就應該用這個屬性來表明Web服務應該首先調用的類。
using System ;
using System.Web.Services ;
using System.Net ;
using System.IO ;
using System.Text ;
以上代碼負責引入必要的名稱空間。 請記住永遠都要引入System.Web.Services這個名稱空間。根據類的需要，再引入保留的名稱空間。
public class DailyStock : WebService
{
......
....
}
這里我們將公共類定義為 DailyStock，它擴展了 System.Web.Services.WebService 類。所有想暴露為 Web服務的類都應該擴展System.Web.Services.WebServices類。 另外，Web 服務的存取修飾語永遠都是public。
[WebMethod]
public string GetQuote(string symbol)
{
........
........
}
以上我們定義了一個公共Web方法 GetQuote。同類的定義一樣，Web 方法也都要用 public這個修飾語來聲明。 [WebMethod] 屬性呈現出將要被用在Web服務中的一些潛在方法，希望客戶存取的所有方法都應該用[WebMethod] 屬性進行標記。GetQuote方法接受一個字元串輸入參數，它包含了使用者所需要的報價符號。這個方法返回一個字元串，其中包含股票報價或錯誤
string ret;
try
{
// The Path to the Yahoo Quotes Service
string fullpath = @"http://
// Create a HttpWebRequest object on the Yahoo url
HttpWebRequest webreq = (HttpWebRequest)WebRequestFactory.Create(fullpath);
// Get a HttpWebResponse object from the Yahoo url
HttpWebResponse webresp = (HttpWebResponse)webreq.GetResponse();
// Create a StreamReader object and pass the Yahoo Server stream as a parameter
StreamReader strm = new StreamReader(webresp.GetResponseStream(), Encoding.ASCII);
// Read a single line from the stream (from the server)
// We read only a single line, since the Yahoo server returns all the
// information needed by us in just one line.
ret= strm.ReadLine();
// Close the stream to the server and free the resources.
strm.Close();
}
catch(Exception)
{
// If exception occurred inform the user
ret="Exception Occurred" ;
}
file://Return the Quote or Exception
return ret ;
以上是GetQuote 方法的內容。這里使用一個 try-catch模塊來截獲從Yahoo中得到股票報價的過程中可能發生的錯誤。在 try-catch模塊內部聲明了一個字元串變數，這個變數中保存著獲取yahoo服務的完整路徑，用戶提供的symbol字元串變數被加到這個連接字元串上。
路徑建立好之後，就要從連接字元串中構造一個 HttpWebRequest對象和一個 HttpWebResponse 對象。接著，用StreamReader打開一個到Yahoo
(二)
配置Web服務
配置Web 服務與一個配置ASP.NET應用程序相同。如果自己有Web伺服器，那麼就創建一個稱為stockquote 的虛擬目錄，然後將 StockQuote.asmx復制到這個目錄中。如此就完成了Web 服務的配製。要調用Web服務，首先啟動瀏覽器，然後鍵入Web 服務的路徑，如 http://localhost/stockquote/StockQuote.asmx，接著看到的頁面就是由Web服務運行時間環境自動生成的結果。在文本框中鍵入符號，例如AOL 或 MS，再點擊invoke按鈕，這時就會彈出一個新的窗口，在其中向你顯示了Web服務的輸出信息。
使用Web服務
基本上有兩種使用Web 服務的方法。可以通過瀏覽器直接調用 Web 服務，並按照上面介紹的方法來使用它。或者，也可以在應用程序使用它。下面就看看如何建立一個Web 應用程序和一個控制台應用程序，通過它們來使用Web服務。當然，也可以使用Win Form 應用程序作為替代來使用Web 服務。
獲取服務的描述
為了與Web服務進行通信，客戶應該知道這個Web服務支持哪種方法以及如何與它們進行通信。.NET 上的Web服務自動用SDL（服務描述語言）產生一個 XML格式文檔，這樣就使客戶能夠獲取與Web服務通信時所需要的信息。 在Web 服務URL之後附加 ?SDL 使Web服務生成客戶能夠使用的SDL文檔。要查閱這里接受的Web 服務的SDL，可以在瀏覽器中鍵入http://localhost/stockquote/StockQuote.asmx?SDL。
(三)
構造代理庫
.NET 平台上的應用程序可以使用代理庫來調用Web服務上的方法，這樣使用Web服務就非常容易。生成代理庫的第一步是從SDL中生成一個Web服務的代理類。.NET SDK提供了一個叫做WebServiceUtil.exe的工具，它能夠幫助我們生成一個代理類。要生成Web服務的代理類，首先進入命令行環境，然後轉到將要開發客戶應用程序的那個目錄，接著輸入以下命令：
WebServiceUtil /c:proxy /pa:http://localhost/stockquote/StockQuote.asmx?SDL /n:Quotes
以上命令執行後，會在運行這個命令的目錄中生成一個 C# 源代碼文件，叫做 DailyStock.cs （要記住Web服務類的名稱也是 DailyStock,）。現在來看這些自變數的含義：
l /c:proxy：告訴WebServiceUtil生成一個代理類
l /pa:http://localhost/stockquote/StockQuote.asmx?SDL：向SDL提供Web服務的路徑。如果已經將Web服務的SDL 保存到了硬碟上，我們甚至可以提供SDL文件的本地路徑。
l /n:Quotes：告訴WebServiceUtil將代理類放在 Quotes名稱空間。這樣做的目的是為了更容易地管理和使用代理庫。
代理庫准備好之後，我們使用C# 編譯器從上面步驟中剛創建的代理類中生成一個代理庫：
csc /target:library /r:System.dll;System.Web.Services.dll;System.Net.dll;
System.IO.dll;System.Xml.Serialization.dll DailyStock.cs
生成代理庫的時候，我們使用了 /target:library開關以表示想要輸出一個庫文件。我們還引用一些曾經在Web服務中使用過的集合。編譯器將在運行命令所在目錄中生成一個名為DailyStock.dll 的dll 庫。
(四)
創建 Web應用程序用戶
下面創建一個Web應用程序StockConsumer.aspx，它作為這個StockQuote（股票報價） Web服務的第一個用戶。
＜%@ Page language="C#" %＞
＜%@ Import Namespace="System.Xml" %＞
＜%@ Import Namespace="Quotes" %＞
以上引入必要的名稱空間。要記住也要引入 Quotes名稱空間，它是代理庫的名稱空間。
＜html＞
＜head＞
＜script runat=server＞
// Wire up the onClick event for a button
protected void button1_Click(object sender, EventArgs e)
{
file://Create a object of the class DailyStock (the proxy class)
DailyStock ds = new DailyStock();
// Call the GetQuote method of the proxy class DailyStock and
// pass the symbol string from the textbox
string res = ds.GetQuote(symbol.Text);
// The returned string has values which are separated
// by commas.
// Hence we split the returned string into parts
char[] splitter = {','} ;
string[] temp = res.Split(splitter);
// Check if the string array returned has more than one
// elements since if there are less than one elements
// then an exception must have been returned
if(temp.Length >1)
{
// The WebService returns a lot of information about the
// stock. We only show the relevant portions
// Set the label to current Index
curindex.Text = "Current Index :"+temp[1];
// Set the label to current Date Time
curdate.Text ="Last Update on"+temp[2]+" at "+temp[3];
}
else
{
error.Text = "Error :"+res ; file://set the error label
}
}
＜/script＞
以上ASP.NET頁面代碼中，首先對Web 服務DailyStock進行例示。由於已經生成了代理庫，因此Web服務的調用方法與其它任何庫的調用方法都相同。調用DailyStock 類的GetQuote()方法後，將返回一個字元串，其中包含了以逗號分隔的列表符號的完整信息。
我們將限制顯示給客戶的信息為只顯示當前指數和所報告指數的日期/時間。為了將字元串分成若干不同的部分，這里使用了字元串類的Split方法，在出現逗號的地方將字元串分割成部分。並且，將分割開的字元串組成數組之後，再使用相關的數值為Web頁面設置不同的標簽。
代碼的其餘部分
＜body＞
＜center＞
＜h2＞.NET101 Stock Quote Consumer ＜/h2＞
＜form runat=server ＞
＜table border=1 celspacing=1＞
＜tr＞＜th＞Please enter the symbol below＜/th＞＜/tr＞
＜tr＞＜td＞
＜asp:textbox id=symbol runat=server /＞
＜asp:button id=button1 text="Get Quote" onClick="button1_Click" runat=server /＞
＜/td＞＜/tr＞
＜tr＞＜td＞＜asp:label id=curindex runat=server /＞＜/td＞＜/tr＞
＜tr＞＜td＞＜asp:label id=curdate runat=server /＞＜/td＞＜/tr＞
＜tr＞＜td＞＜asp:label id=error runat=server /＞＜/td＞＜/tr＞
＜/table＞
＜/form＞
＜/center＞
＜/body＞
＜/html＞
(五)
小結
下面總結一下配置Web應用程序的步驟：
l 創建一個叫做StockConsumer的虛擬目錄
l 將 StockConsumer.aspx 文件復制到這個虛擬目錄下
l 在wwwroot 文件夾中創建一個 bin 虛擬目錄
l 設置bin目錄以執行代碼的許可權
l 將代理 dll 文件DailyStock.dll復制到這個目錄下，ASP.NET 運行時間引擎會自動從Bin目錄中選擇對外部庫的引用。這里的例子中，這個外部庫是DailyStock.dll。
現在調用文件 http://localhost/StockConsumer/StockConsumer.aspx，然後鍵入股票的符號，點擊 "Get Quote"（獲取報價）按鈕，就能看到正在使用的Web服務了。注意：Web服務應該能夠使用yahoo伺服器，否則它就會返回一個錯誤信息。
⑽ 股市數據如何獲取
股市的數據通過炒股軟體，每天就可以自動收取