下面將討論數(shù)據(jù)科學(xué)的前景，以及推動(dòng)我們的工具發(fā)展的力量。

下面將回顧我在數(shù)據(jù)科學(xué)中經(jīng)常使用的工具——Jupyter Notebook，

我想看看在過去的幾年里，數(shù)據(jù)科學(xué)的實(shí)踐是如何變化的。然后，我將強(qiáng)調(diào)三種主要力量，它們改變了我今天使用Notebook的方式。

數(shù)據(jù)科學(xué)領(lǐng)域正在迅速變化。我們現(xiàn)在已經(jīng)進(jìn)入了這樣一個(gè)時(shí)代:“21世紀(jì)最性感的工作”和“數(shù)據(jù)是新石油”之類的說法已經(jīng)過時(shí)，取而代之的是更現(xiàn)實(shí)的業(yè)務(wù)問題和基于技術(shù)的挑戰(zhàn)。我認(rèn)為這種變化是雙重的:我們現(xiàn)在需要支持(1)生產(chǎn)分析和實(shí)驗(yàn)的需求，以及(2)快速采用云技術(shù)。

第一，生產(chǎn)的需要。在軟件工程的生命周期中，創(chuàng)建數(shù)據(jù)產(chǎn)品或者部署實(shí)驗(yàn)工件，這些年來都在增長(zhǎng)。隨著機(jī)器學(xué)習(xí)工程師和數(shù)據(jù)科學(xué)軟件開發(fā)人員的崛起，越來越多的工程類工作被采用，這就是明證。此外，分析不再局限于出版物或圖表，因?yàn)楝F(xiàn)在對(duì)復(fù)制實(shí)驗(yàn)和部署人工制品的需求越來越大。

接下來，數(shù)據(jù)的指數(shù)增長(zhǎng)需要采用云技術(shù)。我們不能僅僅使用我們自己的筆記本電腦來加載Pandas的1TB數(shù)據(jù)集!Docker和Kubernetes等工具的流行使我們能夠以前所未有的水平擴(kuò)展數(shù)據(jù)處理工作負(fù)載。采用云意味著我們?cè)诠芾砉ぷ髫?fù)載時(shí)要考慮可伸縮性、資源供應(yīng)和基礎(chǔ)設(shè)施。然而，之前的Jupyter Notebook生態(tài)系統(tǒng)，盡管它是數(shù)據(jù)科學(xué)家工具箱中的一個(gè)重要部分，并不意味著有相應(yīng)的變化:

正如我所說的，我們所知道的Jupyter Notebook并不意味著這些變化。它們是用來探索的，不是用來生產(chǎn)的。它們應(yīng)該在一臺(tái)機(jī)器上運(yùn)行，而不是在集群中。然而，在過去的五年中，Jupyter Notebook的生態(tài)系統(tǒng)已經(jīng)發(fā)展壯大:我們現(xiàn)在有了JupyterLab、一些插件、用于其他語言的新內(nèi)核，以及可供我們使用的第三方工具。當(dāng)然，我們?nèi)匀豢梢酝ㄟ^在終端中輸入jupyter Notebook來運(yùn)行筆記本，但是現(xiàn)在已經(jīng)遠(yuǎn)遠(yuǎn)不止這些了!

這就引出了一個(gè)問題:是什么力量促使了這些變化?，我們?nèi)绾卫眠@個(gè)更大的筆記本生態(tài)系統(tǒng)來應(yīng)對(duì)當(dāng)今數(shù)據(jù)科學(xué)的變化?