近日,據(jù)國外媒體報(bào)道,EMC旗下的Greenplum部門專注于數(shù)據(jù)分析軟件的開發(fā),Kaggle則是一家專注于統(tǒng)計(jì)歸納人才發(fā)現(xiàn)和部署的公司。二者如今展開了合作,力圖打造一個(gè)大數(shù)據(jù)工程師市場。這樣,一家沒有全職數(shù)據(jù)科學(xué)家的企業(yè)如今也可以把數(shù)據(jù)分析的工作眾包出去。
Kaggle會(huì)舉辦全球范圍的數(shù)據(jù)科學(xué)家競賽活動(dòng)。Greenplum的客戶可以通過一款叫做Chorus的產(chǎn)品來搜索和查看這些參賽者的個(gè)人檔案。然后,各企業(yè)可以挑選出合適的數(shù)據(jù)分析師,按小時(shí)支付酬勞為自己的企業(yè)解決數(shù)據(jù)問題。
Kaggle數(shù)據(jù)競賽主題覆蓋面很廣,從宇宙暗物質(zhì)發(fā)現(xiàn)到債券價(jià)格預(yù)測都有。除了解決特定的數(shù)據(jù)問題之外,Kaggle還能甄選出那些擅長解決問題的人。然后Kaggle針對一些大公司舉辦一些數(shù)據(jù)競賽,然后挑選出最為優(yōu)秀的數(shù)據(jù)人才進(jìn)行簽約。Kaggle會(huì)收取一定的費(fèi)用。
目前為止,Kaggle的注冊參賽者達(dá)55000人次,任何參賽者都可注冊受雇于Greenplum客戶的項(xiàng)目。由于本周二才剛發(fā)布,因此目前還不清楚多少人想要參與此項(xiàng)目。
Kaggle CEO安東尼-古德魯姆(Anthony Goldbloom)表示,“這種方式既能幫助企業(yè)解決問題,又能為數(shù)據(jù)師們找到雇主。此外,對我們的業(yè)務(wù)也有好處,F(xiàn)在的一些參與者由熱情吸引而來。如果還能夠幫他們賺取一定金錢,將會(huì)吸引更多的人參與進(jìn)來。”
Kaggle會(huì)為一些大型項(xiàng)目舉辦私下的競賽。古德魯姆期待Greenplum客戶需求能夠簡單一點(diǎn)。比如保險(xiǎn)公司通常會(huì)尋求改善職工獎(jiǎng)金系統(tǒng)的方法。針對特定項(xiàng)目舉辦競賽,Kaggle會(huì)收取每小時(shí)300美元到500美元不等的費(fèi)用和一定的傭金。
Greenplum聯(lián)合創(chuàng)始人兼高級產(chǎn)品副總裁Scott Yara表示,公司目前已經(jīng)有25名專職數(shù)據(jù)科學(xué)家,但是還遠(yuǎn)遠(yuǎn)不夠。“市場空缺很難填補(bǔ)。即使是世界上最大的公司也有很大的數(shù)據(jù)人才需求。”
Greenplum和Kaggle此次的合作可能是應(yīng)對市場上數(shù)據(jù)科學(xué)家短缺的一種解決方法。去年,麥肯錫全球研究院(Mckinsey Global Institute)指出,由于企業(yè)搜集的大數(shù)據(jù)正在以爆炸式的速度增長,美國市場對于熟練數(shù)據(jù)分析師的需求量達(dá)19萬人,而對精通數(shù)據(jù)的管理人才需求量則達(dá)到150萬人。
還有一些其他的大數(shù)據(jù)解決方案,包括打造基于算法和更好用戶界面的交易平臺市場來進(jìn)行數(shù)據(jù)自動(dòng)化流程處理。目前,在一些大公司和小型創(chuàng)業(yè)公司中這兩種方式都有所使用。