歡迎光臨
每天分享高質量文章

Python完勝R語言,Hadoop被拋棄!2018 年資料科學和機器學習工具調查

程式猿(微訊號:imkuqin) 猿妹 編譯

連結:https://www.kdnuggets.com/2018/05/poll-tools-analytics-data-science-machine-learning-results.html

近日,資料科學網站KDnuggets釋出 2018年資料科學和機器學習工具調查結果。下麵一起來看看調查結果

最受青睞的分析、資料科學、機器學習工具

圖1:2018年的最受青睞的工具及其在2016 – 2017年調查中的份額 


*為了更有效的比較,KDnuggets重新計算了2016年,2017年問卷調查結果,排除了受訪者“單一”的選項。

下表是前11名的工具排行,其中每個工具至少有20%的份額:

表1:KDnuggets2018年頂級分析/資料科學/ ML軟體調查

在這裡,“2018%share”是指使用該工具的受訪者百分比,“ %change 2018 VS 2017”是表示2017年調查的變化 ,用綠色表示增長幅度達到10%以上,紅色表示下降幅度達到10%以上。

今年,每名受訪者的平均使用工具數量為7個,略高於2017年投票中的6.75(不包括單一工具回覆)。 

與2017年軟體投票相比,今年前11名中,出現了一個新面孔Keras,Keras取代了去年Knime的位置。下麵是針對以上資料的一些觀察發現:

Python消滅了R

到2017年,Python已經擁有超過50%的份額,如今已經將其份額提高到66%,而在我們此次的調查中,R份額首次出現下降,而且是一下子降到50%以下。 

RapidMiner激增

在過去的幾次調查中,RapidMiner一直是最大的資料科學平臺之一,它的份額從2017年的33%大幅增加到50%左右。 

這樣的增長速度是否是因為廠商的推廣帶來的呢?RapidMiner創始人兼總裁Ingo Mierswa的表示: 

與許多供應商一樣,RapidMiner透過多種渠道向用戶推廣KDnuggets問卷調查,之前我們也做過同樣的推廣,但與之前不同的是,首先今年得到了更好的回應,超過400位使用者親自回覆了郵件,更重要的是,最近一年裡,RapidMiner的月活躍使用者增長了300% ,因此可以向更多的使用者發送了關於KDnuggets問卷調查的郵件。

SQL是穩定的

SQL(包括Spark SQL和SQL to Hadoop工具在內)在最近的3次調查中仍然佔有約40%的份額。所以,如果你是一位有抱負的資料科學家,學習SQL吧,它可能會對你很有用! 

趨勢

在調查中,使用率超過2%的新工具是Spark SQL,擁有11.7%的份額。 

下表列出了2018年份額增長20%以上的工具,併在2018年達到至少3%的份額。 

表 2:使用率增幅最大的主要分析/資料科學/機器學習工具

整合

值得一提的是,在2017年擁有2%以上份額的56個工具中,有19個(僅約三分之一)工具在2018年份額有所增加,而有37個的份額下降。結合Datawatch收購Angoss,Minitab收購Salford等近期的收購案可以表明,資料科學平臺的整合即將展開。 

2018年擁有3%以上份額,卻在2018年份額下降25%以上的工具見下表: 

表 3:使用率跌幅最大的主要分析/資料科學工具

深度學習工具

使用深度學習工具的受訪者比例保持穩定,2018年有33%的受訪者表示使用深度學習工具,2017年為32%,2016年為18%。 谷歌Tensorflow依然是最主要的平臺。 

頂級深度學習工具排名如下:

● Tensorflow, 29.9%

● Keras, 22.2%

● PyTorch, 6.4%

● Theano, 4.9%

● Other Deep Learning Tools, 4.9%

● DeepLearning4J, 3.4%

● Microsoft Cognitive Toolkit (Prev. CNTK), 3.0%

● Apache MXnet, 1.5%

● Caffe, 1.5%

● Caffe2, 1.2%

● TFLearn, 1.1%

● Torch, 1.0%

● Lasagne, 0.3%

大資料工具:Hadoop被拋棄

2018年,約33%的開發者使用Hadoop或Spark等大資料工具 – 與2017年大致相同,但Hadoop使用率顯著下降,下降幅度高達35%,以下是詳細資訊:

程式語言

Python似乎不僅超過了R,還包括大多數其他語言,目前Python和SQL,Java和C / C ++幾乎保持在相同水平。自從KDnuggets 進行這項調查以來,R第一次出現了下降。其他語言同樣也有所下降。 

以下是按熱門度排序的主要程式語言:

● Python, 65.6% (was 59.0% in 2017), 11% up

● R, 48.5% (was 56.6%), 14% down

● SQL, 39.6% (was 39.2%), 1% up

● Java, 15.1% (was 15.5%), 3% down

● Unix, shell/awk/gawk, 9.2% (was 10.8%), 15% down

● Other programming and data languages, 6.9%, (was 7.6%), -9% down

● C/C++, 6.8%, (was 7.1%), 3% down

● Scala, 5.9%, (was 8.3%), 29% down

● Perl, 1.0% (was 1.9%), 46% down

● Julia, 0.7% (was 1.2%), 45% down

● Lisp, 0.3% (was 0.4%), -25% down

● Clojure, 0.2% (was 0.3%), -38% down

● F, # 0.1% (was 0.5%), -73% down

完整結果和 3 年來的趨勢

以下表格展示了調查結果的細節(此處僅列出排名前 20 的工具):


●編號424,輸入編號直達本文

●輸入m獲取文章目錄

推薦↓↓↓

演演算法與資料結構

更多推薦18個技術類公眾微信

涵蓋:程式人生、演演算法與資料結構、駭客技術與網路安全、大資料技術、前端開發、Java、Python、Web開發、安卓開發、iOS開發、C/C++、.NET、Linux、資料庫、運維等。

贊(0)

分享創造快樂