共享經(jīng)濟(jì)下,作為一個(gè)優(yōu)秀的“碼農(nóng)”,有9個(gè)大數(shù)據(jù)處理編程語(yǔ)言你不得不知道。當(dāng)需要對(duì)巨大的數(shù)據(jù)集中進(jìn)行篩選時(shí),碼農(nóng)們都知道*的工具是什么。以下鄭州尚學(xué)堂Java培訓(xùn)專(zhuān)家推薦9個(gè)碼農(nóng)必備的大數(shù)據(jù)處理編程語(yǔ)言。
R語(yǔ)言
在語(yǔ)言名單中,如果R語(yǔ)言排第二,那就沒(méi)其他能排*。自1997年以來(lái),作為昂貴的統(tǒng)計(jì)軟件,如Matlab和SAS的免費(fèi)替代品,它漸漸風(fēng)靡全球。
在過(guò)去的幾年時(shí)間中,R語(yǔ)言已經(jīng)成為了數(shù)據(jù)科學(xué)的寵兒——數(shù)據(jù)科學(xué)現(xiàn)在不僅僅在統(tǒng)計(jì)學(xué)家中人盡皆知,而且也為華爾街交易員、生物學(xué)家、硅谷開(kāi)發(fā)者所家喻戶曉。各行各業(yè),如Google,F(xiàn)acebook,美國(guó)銀行,以及紐約時(shí)報(bào)都使用R語(yǔ)言,R語(yǔ)言正在商業(yè)用途上持續(xù)蔓延和擴(kuò)散。
話說(shuō)回來(lái),早在2010年,PaulButler就以R語(yǔ)言打造了全球的Facebook地圖而著名,這證明了該語(yǔ)言豐富的可視化功能。盡管他現(xiàn)在已經(jīng)不像以前那樣頻繁地使用R語(yǔ)言了?!癛正在一點(diǎn)點(diǎn)地過(guò)時(shí),因?yàn)樗木徛吞幚泶笮蛿?shù)據(jù)集的笨重?!蹦敲?,他使用什么代替呢?
Python
如果說(shuō)R語(yǔ)言是一個(gè)神經(jīng)質(zhì)又可愛(ài)的高手,那么Python是它隨和又靈活的表兄弟。作為一種結(jié)合了R語(yǔ)言快速對(duì)復(fù)雜數(shù)據(jù)進(jìn)行挖掘并構(gòu)建產(chǎn)品的更實(shí)用語(yǔ)言,Python迅速得到了主流的吸引力。Python是直觀的,并且比R語(yǔ)言更易于學(xué)習(xí),以及它的生態(tài)系統(tǒng)近年來(lái)急劇增長(zhǎng),使得它更能夠用于先前為R語(yǔ)言保留的統(tǒng)計(jì)分析。“這是這個(gè)行業(yè)的進(jìn)步。在過(guò)去的兩年時(shí)間中,從R語(yǔ)言到Python已經(jīng)發(fā)生了非常明顯的轉(zhuǎn)變?!薄 ≡跀?shù)據(jù)處理中,在規(guī)模和復(fù)雜性之間往往會(huì)有一個(gè)權(quán)衡,于是Python成為了一種折中方案。IPythonnotebook和NumPy可以用作輕便工作的一種暫存器,而Python可以作為中等規(guī)模數(shù)據(jù)處理的強(qiáng)大工具。豐富的數(shù)據(jù)社區(qū),也是Python的優(yōu)勢(shì),因?yàn)榭梢蕴峁┝舜罅康墓ぞ甙凸δ堋C绹?guó)銀行使用Python在銀行的基礎(chǔ)架構(gòu)中構(gòu)建新的產(chǎn)品和接口,同時(shí)也用Python處理財(cái)務(wù)數(shù)據(jù)?!癙ython廣泛而靈活,因此人們趨之若鶩?!辈贿^(guò),它并非*性能的語(yǔ)言,只能偶爾用于大規(guī)模的核心基礎(chǔ)設(shè)施。
Julia
雖然當(dāng)前的數(shù)據(jù)科學(xué)絕大多數(shù)是通過(guò)R語(yǔ)言、Python、Java、MatLab和SAS執(zhí)行的,但依然有其他的語(yǔ)言存活于夾縫中,Julia就是其中的后起之秀。
業(yè)界普遍認(rèn)為Julia過(guò)于晦澀難懂,但在談到它取代R和Python的潛力時(shí)會(huì)不由得眉飛色舞。Julia是一種高層次的、極度快速的表達(dá)性語(yǔ)言。它比R語(yǔ)言快,比Python更可擴(kuò)展,且相當(dāng)簡(jiǎn)單易學(xué)。
“它正在一步步成長(zhǎng)。最終,使用Julia,你就能夠辦到任何用R和Python可以做到的事情?!钡侵两駷橹?,年輕人對(duì)Julia依然猶豫不前。Julia數(shù)據(jù)社區(qū)還處于早期階段,想要和R語(yǔ)言和Python競(jìng)爭(zhēng),它還需要添加更多的軟件包和工具?!八€很年輕,但它正在掀起浪潮并且非常有前途?!?br />
Java
Java,以及基于Java的框架,被發(fā)現(xiàn)儼然成為了硅谷*的那些高科技公司的骨骼支架。“如果你去看Twitter、LinkedIn和Facebook,那么你會(huì)發(fā)現(xiàn),Java是它們所有數(shù)據(jù)工程基礎(chǔ)設(shè)施的基礎(chǔ)語(yǔ)言?!?br />
雖然,Java不能提供R和Python同樣質(zhì)量的可視化,并且它并非統(tǒng)計(jì)建模的*選擇,但是,如果你移動(dòng)到過(guò)去的原型制作并需要建立大型系統(tǒng),那么Java往往是你的*選擇。
Hadoop
一群基于Java的工具被開(kāi)發(fā)出來(lái)以滿足數(shù)據(jù)處理的巨大需求。Hadoop作為*的基于Java的框架用于批處理數(shù)據(jù)已經(jīng)點(diǎn)燃了大家的熱情。Hadoop比其他一些處理工具慢,但它出奇地準(zhǔn)確,因此被廣泛用于后端分析。
Hive
Hive,一個(gè)基于查詢并且運(yùn)行在頂部的框架,可以和Hadoop很好地結(jié)對(duì)工作。
Scala是另一種基于Java的語(yǔ)言,并且和Java相同的是,它正日益成為大規(guī)模機(jī)器學(xué)習(xí)或構(gòu)建高層次算法的工具。它富有表現(xiàn)力,并且還能夠構(gòu)建健壯的系統(tǒng)?!癑ava就像是建造時(shí)的鋼鐵,而Scala則像黏土,因?yàn)槟憧梢詫⒅湃敫G內(nèi)轉(zhuǎn)變成鋼鐵?!?br />
Kafka
那么,當(dāng)你需要快速實(shí)時(shí)地分析時(shí)又該怎么辦呢?Kafka會(huì)成為你的好朋友。它大概5年前就已經(jīng)出現(xiàn)了,但是直到最近才成為流處理的流行框架。
Kafka,誕生于LinkedIn內(nèi)部,是一個(gè)超快速的查詢消息系統(tǒng)。如果你問(wèn)Kafka的缺點(diǎn)?好吧,它太快了,在實(shí)時(shí)操作時(shí)會(huì)導(dǎo)致自身出錯(cuò),并且偶爾地會(huì)遺漏東西?!霸诰群退俣戎g有一個(gè)權(quán)衡,”“因此,硅谷所有的大型高科技公司都會(huì)使用兩條管道:Kafka或Storm用于實(shí)時(shí)處理,然后Hadoop用于批處理系統(tǒng),此時(shí)雖然是緩慢的,但超級(jí)準(zhǔn)確。”
Storm
Storm是用Scala編寫(xiě)的另一個(gè)框架,它在硅谷中因?yàn)榱魈幚矶艿搅舜罅康那嗖A。它被Twitter納入其中,勿庸置疑的,這樣一來(lái),Twitter就能在快速事件處理中得到巨大的裨益。
以上就是為大家介紹的大數(shù)據(jù)處理語(yǔ)言的優(yōu)缺點(diǎn)和受歡迎度。大數(shù)據(jù)人才的需求量不言而喻。鄭州尚學(xué)堂Java培訓(xùn)專(zhuān)家希望大家學(xué)好大數(shù)據(jù)語(yǔ)言,為自己的職場(chǎng)晉升做好準(zhǔn)備。