Unsplash是個高清攝影圖片的網(wǎng)站,里面的照片非常精美,分辨率也很高。最重要的是,所有的照片都沒有版權(quán),無須向原作者申請授權(quán),即可任意使用。
最近閑暇的時候?qū)懥藗€爬蟲爬了下Unsplash上的那些高贊的壁紙,爬蟲原理非常簡單,就是爬取所有的壁紙,然后篩選那些贊數(shù)高的圖片。
第一步我們爬取Unsplash所有的壁紙圖片信息,并存入MongoDB。
代碼如下:
爬下來的數(shù)據(jù)里面包含了幾個重要的字段。
我們最關(guān)心的就是likes這個字段,這個里面存了圖片的贊數(shù),后續(xù)我們篩選高贊圖片的時候會用到。
還有兩個字段分別是width和height,這是圖片的寬度和高度,因為我們這里關(guān)注的是桌面壁紙,所以只關(guān)心寬度大于高度的那些壁紙。
爬完圖片信息后,接下來我們從數(shù)據(jù)庫篩選高贊圖片。
代碼如下:
這里我們會根據(jù)圖片信息里的URL去下載圖片。需要注意的是,如果過于頻繁地爬取Unsplash,會導(dǎo)致爬蟲被封,所以這里每次下載完都會睡個10秒鐘。
以上,就可以爬取出精美的高清壁紙啦。
作者沈仲強,資深Python程序員,先后供職于Morgan Stanley和ebay,擅長爬蟲、Web開發(fā)、數(shù)據(jù)分析。
(鄭重聲明:本文版權(quán)歸原作者沈仲強所有,轉(zhuǎn)載文章僅為傳播更多信息之目的,如有侵權(quán),請聯(lián)系我們刪除;如作者信息標(biāo)記有誤,請聯(lián)系我們修改。)
分享名稱:程序員一鍵獲得高清壁紙的代碼
轉(zhuǎn)載源于:http://jinyejixie.com/news30/115880.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供定制網(wǎng)站、網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計公司、關(guān)鍵詞優(yōu)化、靜態(tài)網(wǎng)站、域名注冊
廣告
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源:
創(chuàng)新互聯(lián)