網(wǎng)絡(luò)爬蟲(又稱為網(wǎng)頁蜘蛛,網(wǎng)絡(luò)機器人,在FOAF社區(qū)中間,更經(jīng)常的稱為網(wǎng)頁追逐者),是一種按照一定的規(guī)則,自動地抓取萬維網(wǎng)信息的程序或者腳本。另外一些不常使用的名字還有螞蟻、自動索引、模擬程序或者蠕蟲。
一、爬取數(shù)據(jù)
在此順便提一下,可以到公眾號菜單欄的學(xué)習(xí)福利里面逛逛。里面有些教程還是挺不錯的。兩個可以替代Python里urlib和re正則表達式的庫,它們分別叫做requests和Ixml。
第一個庫挺不錯的,現(xiàn)在在獲取網(wǎng)頁源代碼時,我都用這個庫,大家如果有不懂的可以看看那個網(wǎng)站。第二個庫由于我是用3.4版本的Python,折騰了很久沒折騰進去,于是我發(fā)現(xiàn)了另一個不錯的庫BeautifulSoup,詳細教程參考: Python爬蟲入門八之Beautiful Soup的用法
有了requests和Beautifulsoup,基本上可以實現(xiàn)我想要的很多功能了。我便做了一一個抓取分級基金數(shù)據(jù)的爬蟲:
二、分析并推送
其實在此分析其實還談不上,頂多算是篩選。(不過我相信隨著 我數(shù)學(xué)能力提升會能有進一步的分析的,美好的祝愿。。。)篩選很簡單,就是漲幅或收益率等等滿足一定條件就保留下來,保留下來干嘛?推送啊! ! !
將保存下來的數(shù)據(jù)通過郵件發(fā)送到自己的郵箱,手機上下載個軟件,一切就大功告成了!
至此當(dāng)時學(xué)習(xí)Python的目的就達到了,當(dāng)時激動地要炸了
不過....那么好玩的東西,怎么能這么快就結(jié)束了?再折騰吧!
三、簡單的界面
。Python好像不能直接弄成exe可執(zhí)行文件,不能每次運行都開Python的窗口啊!強迫癥怎么能忍! 1上網(wǎng)搜搜發(fā)現(xiàn)有諸如py2exe的包可以轉(zhuǎn)換,可是老子是3.4版本啊! 折騰半天沒搞定,算了!我不是會點VB嗎,用那個吧。于是連界面都有了
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機、免備案服務(wù)器”等云主機租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。
網(wǎng)頁名稱:Python爬蟲可以應(yīng)用在哪些地方-創(chuàng)新互聯(lián)
本文來源:http://jinyejixie.com/article44/dcjjhe.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供全網(wǎng)營銷推廣、網(wǎng)站設(shè)計公司、定制開發(fā)、電子商務(wù)、網(wǎng)站制作、企業(yè)網(wǎng)站制作
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)