近日，據國外媒體報道，EMC旗下的Greenplum部門(mén)專(zhuān)注于數據分析軟件的開(kāi)發(fā)，Kaggle則是一家專(zhuān)注于統計歸納人才發(fā)現和部署的公司。二者如今展開(kāi)了合作，力圖打造一個(gè)大數據工程師市場(chǎng)。這樣，一家沒(méi)有全職數據科學(xué)家的企業(yè)如今也可以把數據分析的工作眾包出去。
Kaggle會(huì )舉辦全球范圍的數據科學(xué)家競賽活動(dòng)。Greenplum的客戶(hù)可以通過(guò)一款叫做Chorus的產(chǎn)品來(lái)搜索和查看這些參賽者的個(gè)人檔案。然后，各企業(yè)可以挑選出合適的數據分析師，按小時(shí)支付酬勞為自己的企業(yè)解決數據問(wèn)題。
Kaggle數據競賽主題覆蓋面很廣，從宇宙暗物質(zhì)發(fā)現到債券價(jià)格預測都有。除了解決特定的數據問(wèn)題之外，Kaggle還能甄選出那些擅長(cháng)解決問(wèn)題的人。然后Kaggle針對一些大公司舉辦一些數據競賽，然后挑選出最為優(yōu)秀的數據人才進(jìn)行簽約。Kaggle會(huì )收取一定的費用。
目前為止，Kaggle的注冊參賽者達55000人次，任何參賽者都可注冊受雇于Greenplum客戶(hù)的項目。由于本周二才剛發(fā)布，因此目前還不清楚多少人想要參與此項目。
Kaggle CEO安東尼－古德魯姆（Anthony Goldbloom）表示，“這種方式既能幫助企業(yè)解決問(wèn)題，又能為數據師們找到雇主。此外，對我們的業(yè)務(wù)也有好處。現在的一些參與者由熱情吸引而來(lái)。如果還能夠幫他們賺取一定金錢(qián)，將會(huì )吸引更多的人參與進(jìn)來(lái)。”
Kaggle會(huì )為一些大型項目舉辦私下的競賽。古德魯姆期待Greenplum客戶(hù)需求能夠簡(jiǎn)單一點(diǎn)。比如保險公司通常會(huì )尋求改善職工獎金系統的方法。針對特定項目舉辦競賽，Kaggle會(huì )收取每小時(shí)300美元到500美元不等的費用和一定的傭金。
Greenplum聯(lián)合創(chuàng )始人兼高級產(chǎn)品副總裁Scott Yara表示，公司目前已經(jīng)有25名專(zhuān)職數據科學(xué)家，但是還遠遠不夠。“市場(chǎng)空缺很難填補。即使是世界上最大的公司也有很大的數據人才需求。”
Greenplum和Kaggle此次的合作可能是應對市場(chǎng)上數據科學(xué)家短缺的一種解決方法。去年，麥肯錫全球研究院(Mckinsey Global Institute)指出，由于企業(yè)搜集的大數據正在以爆炸式的速度增長(cháng)，美國市場(chǎng)對于熟練數據分析師的需求量達19萬(wàn)人，而對精通數據的管理人才需求量則達到150萬(wàn)人。
還有一些其他的大數據解決方案，包括打造基于算法和更好用戶(hù)界面的交易平臺市場(chǎng)來(lái)進(jìn)行數據自動(dòng)化流程處理。目前，在一些大公司和小型創(chuàng )業(yè)公司中這兩種方式都有所使用。
