1. 大數據如何採集
1、離線採集：工具：ETL；在數據倉庫的語境下，ETL基本上就是數據採集的代表，包括數據的提取（Extract)、轉換(Transform)和載入(Load)。在轉換的過程中，需要針對具體的業務場景對數據進行治理，例如進行非法數據監測與過濾、格式轉換與數據規范化、數據替換、保證數據完整性等。2、實時採集：工具：Flume/Kafka；實時採集主要用在考慮流處理的業務場景，比如，用於記錄數據源的執行的各種操作活動，比如網路監控的流量管理、金融應用的股票記賬和web伺服器記錄的用戶訪問行為。在流處理場景，數據採集會成為Kafka的消費者，就像一個水壩一般將上游源源不斷的數據攔截住，然後根據業務場景做對應的處理（例如去重、去噪、中間計算等），之後再寫入到對應的數據存儲中。這個過程類似傳統的ETL，但它是流式的處理方式，而非定時的批處理Job，些工具均採用分布式架構，能滿足每秒數百MB的日誌數據採集和傳輸需求3、互聯網採集：工具：Crawler,DPI等；Scribe是Facebook開發的數據(日誌)收集系統。又被稱為網頁蜘蛛，網路機器人，是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本，它支持圖片、音頻、視頻等文件或附件的採集。
2. 如何用爬蟲抓取股市數據並生成分析報表
1. 關於數據採集
股票數據是一種標准化的結構數據，是可以通過API介面訪問的（不過一般要通過渠道，開放的API有一定的局限性）。也可以通過爬蟲軟體進行採集，但是爬蟲軟體採集數據不能保證實時性，根據數據量和採集周期，可能要延遲幾十秒到幾分鍾不等。我們總結了一套專業的爬蟲技術解決方案(Ruby + Sidekiq)。能夠很快實現這個採集，也可以後台可視化調度任務。
2. 關於展現
網路股票數據的展現，網頁端直接通過HTML5技術就已經足夠，如果對界面要求高一點，可以採用集成前端框架，如Bootstrap；如果針對移動端開發， 可以使用Ionic框架。
3. 關於觸發事件
如果是採用Ruby on Rails的開發框架的話，倒是很方便了，有如sidekiq, whenever這樣子的Gem直接實現任務管理和事件觸發。
3. 對於股票數據可以從什麼維度進行採集
對於股票數據可以從大盤信息,行業信息,個股信息三個維度進行採集。大盤信息，大盤的好壞會直接影響個股的走勢,大盤的資金面對投資者來說十分重要；股票數據一定要看行業信息，分析板塊指數不僅可以發現上漲或者待上漲的板塊，而且可以篩選出領漲個股及時買進；個股上信息要用到一些技術指標，其中最重要的是K線圖和量線圖，通過這幾個不同維度的分析後,我們就可以對股票數據有一個全面系統的了解。
4. 什麼是大數據概念股票
大數據概念股票指的是與大數據產業緊密相關的股票，這些公司主要涉及大數據的採集、存儲、處理、分析和應用等業務。
以下是關於大數據概念股票的詳細解釋：
隨著互聯網、雲計算和物聯網技術的飛速發展，大數據產業正逐漸成為全球范圍內重要的新興產業之一。大數據概念股票涉及的公司主要集中在以下幾個方面：
1.數據採集與整合領域。在這一領域，大數據的概念主要是指海量的數據資源。因此，一些從事數據採集和整合的公司，如搜索引擎巨頭和數據集成服務商等，都與大數據密切相關。他們的股票也被歸為大數據概念股票。
2.數據存儲與管理領域。隨著數據量的不斷增加，數據的存儲和管理變得尤為重要。因此，那些提供大規模數據存儲解決方案和高效數據管理工具的公司的股票也屬於大數據概念股票。
3.數據處理與分析領域。數據處理和分析是大數據應用的核心環節，涉及數據挖掘、機器學習等技術。在這一領域的公司，如數據分析服務商和雲計算服務商等，其股票也屬於大數據概念股票。
4.大數據應用領域。大數據的應用范圍非常廣泛，包括金融、醫療、零售等多個行業。因此，那些利用大數據提供定製化服務或創新產品的公司的股票，也被視為大數據概念股票。
總的來說，大數據概念股票是與大數據產業緊密相連的，涉及大數據的採集、存儲、處理、分析和應用等各個環節。由於大數據產業的快速發展和廣闊的市場前景，這些股票在股市中通常受到廣泛關注。
投資者在選擇大數據概念股票時，應關注相關公司的技術實力、市場佔有率和業務模式等關鍵因素，以做出明智的投資決策。同時，也要留意市場的動態變化和相關政策風險，以規避投資風險。
5. 股票最簡單的估值方法
無論是買錯了股票，還是買錯了價格，都是很頭疼的事情。再好的公司股價也是被高估的。如果你買了一個被低估的價格，你不僅可以得到亞紅外，還有股票的差價。但如果選擇了高估的價格，就只能無奈地當「股東」了。巴菲特在買股票的時候經常會預估一家公司股票的價值，以免自己買的股票配不上這個價格。那就很多了，那麼如何估計公司股票的價值呢？那我就列舉幾個重點，詳細說說。正文開始前，先給大家一波福利——機構評選的牛股名單新鮮出爐。路過不要錯過【絕密】機構推薦的牛股名單泄露。限速就能拿到！!!
1.估值是多少？
估值是指估計公司股票的價值。就像貿易商進貨要計算商品成本一樣，他們可以算出自己要賣什麼價格，要賣多久才能把錢拿回來。這就相當於大家都買了一隻股票，按市價買了這只股票，我們多久才能回本賺錢等等。但是，股票有很多種，就像大型超市裡的東西一樣。不知道哪個便宜哪個好。但是根據他們現在的價格，有辦法估計值不值得買，有沒有收益。
二、如何給公司估值？
我們需要參考很多數據來判斷估值。這里有三個對你更重要的指標:
1.價格收益比率
公式:市盈率=每股價格/每股收益。具體分析時盡量對比公司所在行業的平均市盈率。
2、PEG
公式:PEG =PE/(凈利潤增長率*100)。當PEG小於1或更小時，也就是說，當前股價正常或被低估，而大於1的則被高估。
3.市凈率
公式:市凈率=每股價格/每股凈資產。這種估值方法非常適合一些大的或者比較穩定的公司。一般市凈率越低，投資價值越高。但市凈率一旦跌破1，就意味著公司股價已經跌破凈資產，投資者要小心了。
我舉一個實際的例子來說明:福耀玻璃
眾所周知，福耀玻璃是目前汽車玻璃行業的大型龍頭企業，各大汽車品牌使用的玻璃一般都屬於它。目前汽車行業對其營收影響最大，相對穩定。然後，從剛才說的三個標准，評價這個公司是什麼樣子的！
①市盈率:目前其股價為47.6元，預測2021年每股收益1.5742元。市盈率=47.6元/1.5742元=約30.24。20~30很正常。不難看出現在的股價有點高，但是更好的評價標准還是要看其公司的規模和覆蓋面。
②PEG:從盤口信息可以看出，福耀玻璃的PE為34.75，然後根據公司的研究報告，凈利潤率為83.5%，可以得到PEG = 34.5/(83.5% * 100)= 0.41左右。
③市凈率:首先打開股票交易軟體，按F10，得到每股凈資產。結合股價可以得到47.6/8.9865的市凈率=約5.29。
第三，估值的評估要基於多方面。
錯誤的選擇是用公式計算！炒股的意義在於公司未來的收益。即使公司現在估值過高，也不代表未來也會如此。這也是基金經理追捧白馬股的原因。此外，上市公司的行業增長空間和市值增長空間也至關重要。如果很多銀行按照上面的方法來衡量，肯定會被誤判和低估。然而，他們的股價為什麼漲不起來？最重要的原因是他們的成長和市值空間幾乎飽和。更多行業質量分析報告可點擊下方鏈接獲取:最新行業研究報告免費分享。除了行業，可以從以下幾個方面看一下:1。對市場份額和競爭率有大致了解；2.了解未來的戰略規劃和公司的發展天花板。這是我總結的方法和技巧。希望對大家有所裨益。謝謝大家！如果你實在沒時間深入研究這個，可以直接點擊這個鏈接，輸入你喜歡的股票，獲得股票診斷報告！【免費】測試你的股票目前的估值位置？