Ⅰ 大全!Python爬取芒果TV、騰訊視頻、B站、愛奇藝、知乎、微博彈幕!
大家好~ 我是菜鳥哥!今天講解如何用python爬取芒果TV、騰訊視頻、B站、愛奇藝、知乎、微博等平台的彈幕和評論,這類爬蟲結果用於娛樂、輿情分析。
本文提供六個平台的十個爬蟲案例,感興趣的朋友可按平台順序查看。完整源碼已提供。
以芒果TV為例,以電影《懸崖之上》為例,講解如何爬取彈幕和評論。芒果TV的彈幕數據通過開發者工具抓包獲得,視頻每播放一分鍾更新一次數據包。評論數據在網頁底部,通過抓包分析得到。
騰訊視頻以電影《革命者》為例,彈幕數據同樣通過開發者工具抓包獲得,視頻每播放30秒更新一次數據包。評論數據在網頁底部,通過抓包分析得到。
B站以視頻《「這是我見過最拽的一屆中國隊奧運冠軍」》為例,彈幕數據通過點擊彈幕列錶行展開,查看歷史彈幕獲得。評論數據在網頁下方,通過抓包分析得到。
愛奇藝以電影《哥斯拉大戰金剛》為例,彈幕數據通過開發者工具抓包獲得,視頻每60秒更新一次數據包。評論數據在網頁下方,通過抓包分析得到。
知乎以熱點話題《如何看待網傳騰訊實習生向騰訊高層提出建議頒布拒絕陪酒相關條令?》為例,爬取回答內容。知乎的回答內容為動態載入,通過抓包分析得到。
微博以熱搜《霍尊手寫道歉信》為例,爬取評論內容。微博評論為動態載入,通過抓包分析得到。
以上便是今天的全部內容,完整源碼已提供。如果你喜歡今天的內容,希望你能在下方點個贊和在看支持我,謝謝!
Python資料免費領取