6月4日,由光環(huán)國(guó)際主辦的“首屆大數(shù)據(jù)科技創(chuàng)新與人才發(fā)展論壇”,在北京中關(guān)村軟件園成功舉辦。中關(guān)村軟件園董事長(zhǎng)兼總經(jīng)理劉克峰先生為本次論壇致辭。
在本次論壇中,四位主講嘉賓分別從“大數(shù)據(jù)創(chuàng)新與實(shí)踐”、“大數(shù)據(jù)核心技術(shù)”、“大數(shù)據(jù)產(chǎn)業(yè)應(yīng)用”以及“大數(shù)據(jù)人才培養(yǎng)”四個(gè)不同的角度,深刻剖析了中美兩國(guó)大數(shù)據(jù)的產(chǎn)業(yè)應(yīng)用及創(chuàng)新實(shí)踐,多維度展望了大數(shù)據(jù)產(chǎn)業(yè)勢(shì)不可擋的發(fā)展趨勢(shì)。
小編也有幸參與了本次大會(huì),并為大家整理出了來(lái)自光環(huán)國(guó)際董事長(zhǎng)張澤暉的發(fā)言。沒(méi)有機(jī)會(huì)到場(chǎng)的朋友們,一起先睹為快吧!
大數(shù)據(jù)時(shí)代的騰飛是有目共睹的,可以說(shuō)我們?nèi)缃裾幵陲L(fēng)口上,物聯(lián)網(wǎng)的風(fēng)口、有工業(yè)4.0風(fēng)口、人工智能的風(fēng)口,然而事實(shí)上,現(xiàn)在最大的風(fēng)口是大數(shù)據(jù)的風(fēng)口。
谷歌與雅虎 —— 大數(shù)據(jù)的起源
簡(jiǎn)單來(lái)說(shuō),大數(shù)據(jù)就是傳統(tǒng)數(shù)據(jù)軟件無(wú)法處理的數(shù)據(jù)。有很多人認(rèn)為大數(shù)據(jù)就是“特別大的數(shù)據(jù)”,其實(shí)大只是一個(gè)方面,更重要的是數(shù)據(jù)比以前更加多元化,流轉(zhuǎn)速度更快,而且價(jià)值密度相對(duì)更低。如果把大數(shù)據(jù)想象成各種各樣的東西擺在一起的垃圾場(chǎng),那么在垃圾場(chǎng)里面怎樣找到寶物,這就是一個(gè)很大的問(wèn)題。
大數(shù)據(jù)時(shí)代的奠基者實(shí)際上要是谷歌和雅虎。曾幾何時(shí),雅虎是互聯(lián)網(wǎng)的代表,雅虎一開(kāi)始也是做搜索引擎的,但是雅虎提高搜索效率的方式是搭配更高配置的電腦、更高配置的系統(tǒng)。
而谷歌一開(kāi)始也是從車庫(kù)起家,兩個(gè)創(chuàng)始人發(fā)現(xiàn),通過(guò)軟件、通過(guò)分布式計(jì)算系統(tǒng),在降低系統(tǒng)配置的同時(shí)又極大程度地提高了運(yùn)算效率,能夠?qū)崿F(xiàn)比傳統(tǒng)的搜索引擎要快的項(xiàng)目。實(shí)際上,谷歌數(shù)據(jù)中心的電腦可能比公司前臺(tái)用的電腦配置還低。
在創(chuàng)立初期,谷歌的兩個(gè)創(chuàng)始人曾找到雅虎,提出要把谷歌用100萬(wàn)的價(jià)格賣掉。然而當(dāng)時(shí)的雅虎是斷然拒絕的。在2000年前后,谷歌的發(fā)展進(jìn)入佳境,這時(shí)雅虎反過(guò)來(lái)希望以10億美金對(duì)谷歌進(jìn)行收購(gòu),這個(gè)價(jià)格后來(lái)被談到30億美金,谷歌的創(chuàng)始人卻拒絕收購(gòu)。短短3、4年時(shí)間,公司的價(jià)值從100萬(wàn)美金變成超過(guò)30億美金,只有在IT行業(yè)、軟件這樣的行業(yè)才能有如此增長(zhǎng)。
在2004年,雅虎已經(jīng)意識(shí)到巨大的危機(jī),隨著這段時(shí)期谷歌發(fā)布了兩大著名傳奇論文GFS和Mapreduce,雅虎也希望有一個(gè)能與谷歌競(jìng)爭(zhēng)的技術(shù)。于是在2007年的1月28號(hào),Doug Cutting進(jìn)入到了雅虎公司,帶領(lǐng)一個(gè)100多人的工程師團(tuán)隊(duì)來(lái)完善hadoop。雅虎和谷歌的搜索之爭(zhēng),直接催生了hadoop。hadoop誕生在塔克的廚房,其規(guī)?;膽?yīng)用是在雅虎。不過(guò)這個(gè)時(shí)候,雅虎已經(jīng)錯(cuò)過(guò)了機(jī)會(huì),無(wú)論怎樣也無(wú)法迎頭趕上了??梢哉f(shuō),谷歌是從整個(gè)系統(tǒng)層面將雅虎打敗的。
通過(guò)谷歌和雅虎的搜索引擎之爭(zhēng),我們可以看到,大數(shù)據(jù)的人才是非常重要的。那么大數(shù)據(jù)最缺什么樣的人才呢?
大數(shù)據(jù)人才缺口與培養(yǎng)
大數(shù)據(jù)人才可以分為三個(gè)層面:技術(shù)層面、業(yè)務(wù)層面和創(chuàng)新層面。
技術(shù)層面
實(shí)際上,當(dāng)前主流的大數(shù)據(jù)人才是大數(shù)據(jù)開(kāi)發(fā)程序員、軟件工程師。
大數(shù)據(jù)開(kāi)發(fā)工程師是目前最緊缺的人才。大數(shù)據(jù)要在一個(gè)全新的平臺(tái)上進(jìn)行很多開(kāi)發(fā),由于傳統(tǒng)架構(gòu)與分布式計(jì)算架構(gòu)完全不一樣,開(kāi)發(fā)工程師要學(xué)習(xí)大量新的理念。
現(xiàn)在在開(kāi)源環(huán)境里,有各種各樣的免費(fèi)軟件工具,做什么事情有對(duì)應(yīng)的工具。在大數(shù)據(jù)環(huán)境下,其實(shí)你不需要再去寫幾千幾萬(wàn)行代碼,有時(shí)候幾十行、上百行、最多幾百行的代碼就可以了。但前提是,你需要熟悉不同的、新的開(kāi)源軟件,熟悉各類行業(yè)的場(chǎng)景,這就給IT從業(yè)人提出了全新的挑戰(zhàn)。
大數(shù)據(jù)運(yùn)維工程師可以說(shuō)是次緊缺的人才。以前我們是運(yùn)維在oracle、ADM系統(tǒng)上,現(xiàn)在要遷移到hadoop體系。現(xiàn)在的計(jì)算中心和以往的有很大區(qū)別,現(xiàn)在是采用云計(jì)算的方式來(lái)做新的架構(gòu)。大數(shù)據(jù)時(shí)代的運(yùn)維工程師也可以被稱作是大數(shù)據(jù)管理員,也是一個(gè)非常重要的崗位。
很多人認(rèn)為大數(shù)據(jù)時(shí)代,最緊俏的是數(shù)據(jù)分析師。事實(shí)上,數(shù)據(jù)分析師確實(shí)是一個(gè)明星職業(yè),但并不是最緊缺的。這是因?yàn)閿?shù)據(jù)分析在過(guò)去的十年已經(jīng)產(chǎn)生了大量人才,將這些人才平移到大數(shù)據(jù)是相對(duì)比較容易的。只是以前面對(duì)的是傳統(tǒng)數(shù)據(jù),而現(xiàn)在是大數(shù)據(jù),工作平臺(tái)變了,方式方法還是一樣的。現(xiàn)在也可以看到,數(shù)據(jù)分析師在人才市場(chǎng)上尚未有爆炸式的增長(zhǎng),但也在迅速增長(zhǎng)之中。我們還能夠發(fā)現(xiàn)一些數(shù)學(xué)、統(tǒng)計(jì)學(xué)、經(jīng)濟(jì)學(xué)教育背景的人也正在轉(zhuǎn)向這個(gè)領(lǐng)域,應(yīng)該說(shuō)數(shù)據(jù)分析師是未來(lái)的黃金職位。
此外,數(shù)據(jù)倉(cāng)庫(kù)工程師也非常緊俏。很多企業(yè)對(duì)于大數(shù)據(jù)應(yīng)用都是從數(shù)據(jù)倉(cāng)庫(kù)的遷移開(kāi)始的,所以現(xiàn)在數(shù)據(jù)倉(cāng)庫(kù)工程師在掌握一定大數(shù)據(jù)知識(shí),將自己鍛煉成一個(gè)大數(shù)據(jù)數(shù)據(jù)倉(cāng)庫(kù)工程師也是一個(gè)趨勢(shì)。
業(yè)務(wù)層面
所謂業(yè)務(wù)其實(shí)也就是用大數(shù)據(jù)來(lái)做什么。在運(yùn)用大數(shù)據(jù)方面的鼻祖公司是亞馬遜,它首先在全球范圍內(nèi)應(yīng)用大數(shù)據(jù)來(lái)做用戶畫像,進(jìn)而做精準(zhǔn)推薦,極大地提升客戶體驗(yàn)?,F(xiàn)在阿里巴巴和京東也在大量運(yùn)用大數(shù)據(jù)做數(shù)據(jù)分析、數(shù)據(jù)挖掘、智能推薦系統(tǒng)。原來(lái)我們總是說(shuō)電商公司沒(méi)技術(shù),搜索公司才有技術(shù),事實(shí)上自從出現(xiàn)了hadoop系統(tǒng),這種定式早已被打破了。
大數(shù)據(jù)時(shí)代的一個(gè)非常重要的崗位是大數(shù)據(jù)項(xiàng)目經(jīng)理。現(xiàn)在在很多企業(yè)里,大數(shù)據(jù)是一個(gè)項(xiàng)目,但往往就是幾個(gè)數(shù)據(jù)分析、幾個(gè)器材設(shè)備組合起來(lái),其實(shí)完全不是這樣的。大數(shù)據(jù)是遷移各個(gè)方面的應(yīng)用場(chǎng)景的匯集,而幕后最大的推動(dòng)力就是項(xiàng)目經(jīng)理。在很多企業(yè)不知道如何推動(dòng)大數(shù)據(jù)經(jīng)濟(jì)核心的時(shí)候,項(xiàng)目經(jīng)理的眼光就非常重要。大數(shù)據(jù)項(xiàng)目經(jīng)理需要了解一部分大數(shù)據(jù)知識(shí),了解跨行業(yè)、跨部門的數(shù)據(jù),更重要的是了解趨勢(shì),懂得帶團(tuán)隊(duì)。
在大數(shù)據(jù)時(shí)代,還會(huì)需要大數(shù)據(jù)科學(xué)家和大數(shù)據(jù)產(chǎn)品經(jīng)理。大數(shù)據(jù)科學(xué)家可以說(shuō)是大數(shù)據(jù)通才,是一個(gè)非常高端的職業(yè)。另外也非常需要產(chǎn)品經(jīng)理,通過(guò)大數(shù)據(jù)產(chǎn)品來(lái)滿足各個(gè)行業(yè)的需求。未來(lái)的移動(dòng)互聯(lián)網(wǎng)產(chǎn)品都應(yīng)該帶有大數(shù)據(jù)分析的功能,所以說(shuō)未來(lái)的產(chǎn)品經(jīng)理也必須要懂大數(shù)據(jù)。
創(chuàng)新層面
歐盟曾發(fā)表預(yù)測(cè)過(guò)直到2020年的數(shù)據(jù)呈現(xiàn)領(lǐng)域,并提出可以產(chǎn)生3300億的收入,說(shuō)明大數(shù)據(jù)是一個(gè)非常大的市場(chǎng)。大數(shù)據(jù)在工業(yè)等領(lǐng)域也可以有很多嶄新的應(yīng)用,大家的想象力有多大,未來(lái)的大數(shù)據(jù)就有多大的功能。大數(shù)據(jù)引發(fā)深度學(xué)習(xí),深度學(xué)習(xí)引發(fā)人工智能,人工智能又革新機(jī)器人科學(xué)……可以說(shuō)大數(shù)據(jù)真正的開(kāi)啟了智慧時(shí)代,未來(lái)的五年、十年,難以想象大數(shù)據(jù)會(huì)改變我們多少。
現(xiàn)在我們可能感到大數(shù)據(jù)很遙遠(yuǎn),實(shí)際上用戶在互聯(lián)網(wǎng)上的所有行為都被記錄下來(lái),大數(shù)據(jù)是天天跟人們?cè)谝黄鸬?。美劇“紙牌屋”之所以受歡迎,也是得益于大數(shù)據(jù)的運(yùn)用,通過(guò)大數(shù)據(jù)捕捉到了最符合網(wǎng)民心意的劇情。請(qǐng)到最受網(wǎng)民歡迎的演員,可以說(shuō)從一開(kāi)始就贏在了起跑線上。
另一個(gè)典型的例子就是亞馬遜和華盛頓郵報(bào)。貝索斯在三年前收購(gòu)華盛頓郵報(bào)時(shí)曾說(shuō)過(guò),他絕對(duì)不參與新聞編輯的任何事情,他所做的是依靠大數(shù)據(jù)來(lái)分析讀者的口味,記錄每一個(gè)讀者的使用動(dòng)作,對(duì)不同的讀者進(jìn)行測(cè)試,將華盛頓郵報(bào)變?yōu)榱艘患颐襟w技術(shù)公司。你會(huì)發(fā)現(xiàn)在現(xiàn)代,技術(shù)創(chuàng)新是企業(yè)的終極驅(qū)動(dòng)力。
大數(shù)據(jù)帶來(lái)的變革與行業(yè)洗牌
當(dāng)年雅虎的市值曾高達(dá)1000億美金,那么多人都認(rèn)為它是技術(shù)公司,雅虎卻依舊把自己看作一個(gè)媒體公司。今天我們也能看到,有大量的公司,比如以前的新浪、搜狐,他們也將自己定位為互聯(lián)網(wǎng)的媒體公司,技術(shù)上沒(méi)趕上潮流,逐漸被IT時(shí)代所淘汰。這是非常有意思的現(xiàn)象。IT媒體導(dǎo)向型公司卻忘了它的出現(xiàn)是受益于技術(shù)創(chuàng)新。
反而是像順豐這樣的公司,卻沒(méi)有把自己看作一個(gè)快遞公司,據(jù)了解,順豐的IT研發(fā)團(tuán)隊(duì)有兩千多人,創(chuàng)始人王衛(wèi)就認(rèn)為順豐本質(zhì)上是一個(gè)IT公司、大數(shù)據(jù)公司。
大數(shù)據(jù)時(shí)代下,很多公司都在進(jìn)行革新。IBM也砍掉無(wú)數(shù)人,把自己看作一個(gè)人工智能的公司進(jìn)行自我革命。這種變革必然會(huì)產(chǎn)生IT行業(yè)的洗牌,原先舊的技術(shù)人才可能在未來(lái)的幾年里逐漸跟不上時(shí)代。
中國(guó)與美國(guó)對(duì)于整個(gè)大數(shù)據(jù)人才的需求量都非常巨大,然而真正有成熟經(jīng)驗(yàn)的人才相當(dāng)少,這個(gè)對(duì)于傳統(tǒng)的IT人是一個(gè)“彎道超車”的機(jī)會(huì)。實(shí)際上,我相信中國(guó)同樣也可以通過(guò)“彎道超車”與美國(guó)硅谷成為雙雄。大數(shù)據(jù)技術(shù)發(fā)展速度非???,可能未來(lái)還有會(huì)有更先進(jìn)、更好用的框架。IT人善于快速學(xué)習(xí),我們也能夠不斷提升自己,成為大數(shù)據(jù)領(lǐng)域的專家。
6月4日,由光環(huán)國(guó)際主辦的“首屆大數(shù)據(jù)科技創(chuàng)新與人才發(fā)展論壇”,在北京中關(guān)村軟件園成功舉辦。中關(guān)村軟件園董事長(zhǎng)兼總經(jīng)理劉克峰先生為本次論壇致辭。
在本次論壇中,四位主講嘉賓分別從“大數(shù)據(jù)創(chuàng)新與實(shí)踐”、“大數(shù)據(jù)核心技術(shù)”、“大數(shù)據(jù)產(chǎn)業(yè)應(yīng)用”以及“大數(shù)據(jù)人才培養(yǎng)”四個(gè)不同的角度,深刻剖析了中美兩國(guó)大數(shù)據(jù)的產(chǎn)業(yè)應(yīng)用及創(chuàng)新實(shí)踐,多維度展望了大數(shù)據(jù)產(chǎn)業(yè)勢(shì)不可擋的發(fā)展趨勢(shì)。
小編也有幸參與了本次大會(huì),并為大家整理出了來(lái)自光環(huán)國(guó)際董事長(zhǎng)張澤暉的發(fā)言。沒(méi)有機(jī)會(huì)到場(chǎng)的朋友們,一起先睹為快吧!
大數(shù)據(jù)時(shí)代的騰飛是有目共睹的,可以說(shuō)我們?nèi)缃裾幵陲L(fēng)口上,物聯(lián)網(wǎng)的風(fēng)口、有工業(yè)4.0風(fēng)口、人工智能的風(fēng)口,然而事實(shí)上,現(xiàn)在最大的風(fēng)口是大數(shù)據(jù)的風(fēng)口。
谷歌與雅虎 —— 大數(shù)據(jù)的起源
簡(jiǎn)單來(lái)說(shuō),大數(shù)據(jù)就是傳統(tǒng)數(shù)據(jù)軟件無(wú)法處理的數(shù)據(jù)。有很多人認(rèn)為大數(shù)據(jù)就是“特別大的數(shù)據(jù)”,其實(shí)大只是一個(gè)方面,更重要的是數(shù)據(jù)比以前更加多元化,流轉(zhuǎn)速度更快,而且價(jià)值密度相對(duì)更低。如果把大數(shù)據(jù)想象成各種各樣的東西擺在一起的垃圾場(chǎng),那么在垃圾場(chǎng)里面怎樣找到寶物,這就是一個(gè)很大的問(wèn)題。
大數(shù)據(jù)時(shí)代的奠基者實(shí)際上要是谷歌和雅虎。曾幾何時(shí),雅虎是互聯(lián)網(wǎng)的代表,雅虎一開(kāi)始也是做搜索引擎的,但是雅虎提高搜索效率的方式是搭配更高配置的電腦、更高配置的系統(tǒng)。
而谷歌一開(kāi)始也是從車庫(kù)起家,兩個(gè)創(chuàng)始人發(fā)現(xiàn),通過(guò)軟件、通過(guò)分布式計(jì)算系統(tǒng),在降低系統(tǒng)配置的同時(shí)又極大程度地提高了運(yùn)算效率,能夠?qū)崿F(xiàn)比傳統(tǒng)的搜索引擎要快的項(xiàng)目。實(shí)際上,谷歌數(shù)據(jù)中心的電腦可能比公司前臺(tái)用的電腦配置還低。
在創(chuàng)立初期,谷歌的兩個(gè)創(chuàng)始人曾找到雅虎,提出要把谷歌用100萬(wàn)的價(jià)格賣掉。然而當(dāng)時(shí)的雅虎是斷然拒絕的。在2000年前后,谷歌的發(fā)展進(jìn)入佳境,這時(shí)雅虎反過(guò)來(lái)希望以10億美金對(duì)谷歌進(jìn)行收購(gòu),這個(gè)價(jià)格后來(lái)被談到30億美金,谷歌的創(chuàng)始人卻拒絕收購(gòu)。短短3、4年時(shí)間,公司的價(jià)值從100萬(wàn)美金變成超過(guò)30億美金,只有在IT行業(yè)、軟件這樣的行業(yè)才能有如此增長(zhǎng)。
在2004年,雅虎已經(jīng)意識(shí)到巨大的危機(jī),隨著這段時(shí)期谷歌發(fā)布了兩大著名傳奇論文GFS和Mapreduce,雅虎也希望有一個(gè)能與谷歌競(jìng)爭(zhēng)的技術(shù)。于是在2007年的1月28號(hào),Doug Cutting進(jìn)入到了雅虎公司,帶領(lǐng)一個(gè)100多人的工程師團(tuán)隊(duì)來(lái)完善hadoop。雅虎和谷歌的搜索之爭(zhēng),直接催生了hadoop。hadoop誕生在塔克的廚房,其規(guī)?;膽?yīng)用是在雅虎。不過(guò)這個(gè)時(shí)候,雅虎已經(jīng)錯(cuò)過(guò)了機(jī)會(huì),無(wú)論怎樣也無(wú)法迎頭趕上了??梢哉f(shuō),谷歌是從整個(gè)系統(tǒng)層面將雅虎打敗的。
通過(guò)谷歌和雅虎的搜索引擎之爭(zhēng),我們可以看到,大數(shù)據(jù)的人才是非常重要的。那么大數(shù)據(jù)最缺什么樣的人才呢?
大數(shù)據(jù)人才缺口與培養(yǎng)
大數(shù)據(jù)人才可以分為三個(gè)層面:技術(shù)層面、業(yè)務(wù)層面和創(chuàng)新層面。
技術(shù)層面
實(shí)際上,當(dāng)前主流的大數(shù)據(jù)人才是大數(shù)據(jù)開(kāi)發(fā)程序員、軟件工程師。
大數(shù)據(jù)開(kāi)發(fā)工程師是目前最緊缺的人才。大數(shù)據(jù)要在一個(gè)全新的平臺(tái)上進(jìn)行很多開(kāi)發(fā),由于傳統(tǒng)架構(gòu)與分布式計(jì)算架構(gòu)完全不一樣,開(kāi)發(fā)工程師要學(xué)習(xí)大量新的理念。
現(xiàn)在在開(kāi)源環(huán)境里,有各種各樣的免費(fèi)軟件工具,做什么事情有對(duì)應(yīng)的工具。在大數(shù)據(jù)環(huán)境下,其實(shí)你不需要再去寫幾千幾萬(wàn)行代碼,有時(shí)候幾十行、上百行、最多幾百行的代碼就可以了。但前提是,你需要熟悉不同的、新的開(kāi)源軟件,熟悉各類行業(yè)的場(chǎng)景,這就給IT從業(yè)人提出了全新的挑戰(zhàn)。
大數(shù)據(jù)運(yùn)維工程師可以說(shuō)是次緊缺的人才。以前我們是運(yùn)維在oracle、ADM系統(tǒng)上,現(xiàn)在要遷移到hadoop體系。現(xiàn)在的計(jì)算中心和以往的有很大區(qū)別,現(xiàn)在是采用云計(jì)算的方式來(lái)做新的架構(gòu)。大數(shù)據(jù)時(shí)代的運(yùn)維工程師也可以被稱作是大數(shù)據(jù)管理員,也是一個(gè)非常重要的崗位。
很多人認(rèn)為大數(shù)據(jù)時(shí)代,最緊俏的是數(shù)據(jù)分析師。事實(shí)上,數(shù)據(jù)分析師確實(shí)是一個(gè)明星職業(yè),但并不是最緊缺的。這是因?yàn)閿?shù)據(jù)分析在過(guò)去的十年已經(jīng)產(chǎn)生了大量人才,將這些人才平移到大數(shù)據(jù)是相對(duì)比較容易的。只是以前面對(duì)的是傳統(tǒng)數(shù)據(jù),而現(xiàn)在是大數(shù)據(jù),工作平臺(tái)變了,方式方法還是一樣的。現(xiàn)在也可以看到,數(shù)據(jù)分析師在人才市場(chǎng)上尚未有爆炸式的增長(zhǎng),但也在迅速增長(zhǎng)之中。我們還能夠發(fā)現(xiàn)一些數(shù)學(xué)、統(tǒng)計(jì)學(xué)、經(jīng)濟(jì)學(xué)教育背景的人也正在轉(zhuǎn)向這個(gè)領(lǐng)域,應(yīng)該說(shuō)數(shù)據(jù)分析師是未來(lái)的黃金職位。
此外,數(shù)據(jù)倉(cāng)庫(kù)工程師也非常緊俏。很多企業(yè)對(duì)于大數(shù)據(jù)應(yīng)用都是從數(shù)據(jù)倉(cāng)庫(kù)的遷移開(kāi)始的,所以現(xiàn)在數(shù)據(jù)倉(cāng)庫(kù)工程師在掌握一定大數(shù)據(jù)知識(shí),將自己鍛煉成一個(gè)大數(shù)據(jù)數(shù)據(jù)倉(cāng)庫(kù)工程師也是一個(gè)趨勢(shì)。
業(yè)務(wù)層面
所謂業(yè)務(wù)其實(shí)也就是用大數(shù)據(jù)來(lái)做什么。在運(yùn)用大數(shù)據(jù)方面的鼻祖公司是亞馬遜,它首先在全球范圍內(nèi)應(yīng)用大數(shù)據(jù)來(lái)做用戶畫像,進(jìn)而做精準(zhǔn)推薦,極大地提升客戶體驗(yàn)?,F(xiàn)在阿里巴巴和京東也在大量運(yùn)用大數(shù)據(jù)做數(shù)據(jù)分析、數(shù)據(jù)挖掘、智能推薦系統(tǒng)。原來(lái)我們總是說(shuō)電商公司沒(méi)技術(shù),搜索公司才有技術(shù),事實(shí)上自從出現(xiàn)了hadoop系統(tǒng),這種定式早已被打破了。
大數(shù)據(jù)時(shí)代的一個(gè)非常重要的崗位是大數(shù)據(jù)項(xiàng)目經(jīng)理?,F(xiàn)在在很多企業(yè)里,大數(shù)據(jù)是一個(gè)項(xiàng)目,但往往就是幾個(gè)數(shù)據(jù)分析、幾個(gè)器材設(shè)備組合起來(lái),其實(shí)完全不是這樣的。大數(shù)據(jù)是遷移各個(gè)方面的應(yīng)用場(chǎng)景的匯集,而幕后最大的推動(dòng)力就是項(xiàng)目經(jīng)理。在很多企業(yè)不知道如何推動(dòng)大數(shù)據(jù)經(jīng)濟(jì)核心的時(shí)候,項(xiàng)目經(jīng)理的眼光就非常重要。大數(shù)據(jù)項(xiàng)目經(jīng)理需要了解一部分大數(shù)據(jù)知識(shí),了解跨行業(yè)、跨部門的數(shù)據(jù),更重要的是了解趨勢(shì),懂得帶團(tuán)隊(duì)。
在大數(shù)據(jù)時(shí)代,還會(huì)需要大數(shù)據(jù)科學(xué)家和大數(shù)據(jù)產(chǎn)品經(jīng)理。大數(shù)據(jù)科學(xué)家可以說(shuō)是大數(shù)據(jù)通才,是一個(gè)非常高端的職業(yè)。另外也非常需要產(chǎn)品經(jīng)理,通過(guò)大數(shù)據(jù)產(chǎn)品來(lái)滿足各個(gè)行業(yè)的需求。未來(lái)的移動(dòng)互聯(lián)網(wǎng)產(chǎn)品都應(yīng)該帶有大數(shù)據(jù)分析的功能,所以說(shuō)未來(lái)的產(chǎn)品經(jīng)理也必須要懂大數(shù)據(jù)。
創(chuàng)新層面
歐盟曾發(fā)表預(yù)測(cè)過(guò)直到2020年的數(shù)據(jù)呈現(xiàn)領(lǐng)域,并提出可以產(chǎn)生3300億的收入,說(shuō)明大數(shù)據(jù)是一個(gè)非常大的市場(chǎng)。大數(shù)據(jù)在工業(yè)等領(lǐng)域也可以有很多嶄新的應(yīng)用,大家的想象力有多大,未來(lái)的大數(shù)據(jù)就有多大的功能。大數(shù)據(jù)引發(fā)深度學(xué)習(xí),深度學(xué)習(xí)引發(fā)人工智能,人工智能又革新機(jī)器人科學(xué)……可以說(shuō)大數(shù)據(jù)真正的開(kāi)啟了智慧時(shí)代,未來(lái)的五年、十年,難以想象大數(shù)據(jù)會(huì)改變我們多少。
現(xiàn)在我們可能感到大數(shù)據(jù)很遙遠(yuǎn),實(shí)際上用戶在互聯(lián)網(wǎng)上的所有行為都被記錄下來(lái),大數(shù)據(jù)是天天跟人們?cè)谝黄鸬?。美劇“紙牌屋”之所以受歡迎,也是得益于大數(shù)據(jù)的運(yùn)用,通過(guò)大數(shù)據(jù)捕捉到了最符合網(wǎng)民心意的劇情。請(qǐng)到最受網(wǎng)民歡迎的演員,可以說(shuō)從一開(kāi)始就贏在了起跑線上。
另一個(gè)典型的例子就是亞馬遜和華盛頓郵報(bào)。貝索斯在三年前收購(gòu)華盛頓郵報(bào)時(shí)曾說(shuō)過(guò),他絕對(duì)不參與新聞編輯的任何事情,他所做的是依靠大數(shù)據(jù)來(lái)分析讀者的口味,記錄每一個(gè)讀者的使用動(dòng)作,對(duì)不同的讀者進(jìn)行測(cè)試,將華盛頓郵報(bào)變?yōu)榱艘患颐襟w技術(shù)公司。你會(huì)發(fā)現(xiàn)在現(xiàn)代,技術(shù)創(chuàng)新是企業(yè)的終極驅(qū)動(dòng)力。
大數(shù)據(jù)帶來(lái)的變革與行業(yè)洗牌
當(dāng)年雅虎的市值曾高達(dá)1000億美金,那么多人都認(rèn)為它是技術(shù)公司,雅虎卻依舊把自己看作一個(gè)媒體公司。今天我們也能看到,有大量的公司,比如以前的新浪、搜狐,他們也將自己定位為互聯(lián)網(wǎng)的媒體公司,技術(shù)上沒(méi)趕上潮流,逐漸被IT時(shí)代所淘汰。這是非常有意思的現(xiàn)象。IT媒體導(dǎo)向型公司卻忘了它的出現(xiàn)是受益于技術(shù)創(chuàng)新。
反而是像順豐這樣的公司,卻沒(méi)有把自己看作一個(gè)快遞公司,據(jù)了解,順豐的IT研發(fā)團(tuán)隊(duì)有兩千多人,創(chuàng)始人王衛(wèi)就認(rèn)為順豐本質(zhì)上是一個(gè)IT公司、大數(shù)據(jù)公司。
大數(shù)據(jù)時(shí)代下,很多公司都在進(jìn)行革新。IBM也砍掉無(wú)數(shù)人,把自己看作一個(gè)人工智能的公司進(jìn)行自我革命。這種變革必然會(huì)產(chǎn)生IT行業(yè)的洗牌,原先舊的技術(shù)人才可能在未來(lái)的幾年里逐漸跟不上時(shí)代。
中國(guó)與美國(guó)對(duì)于整個(gè)大數(shù)據(jù)人才的需求量都非常巨大,然而真正有成熟經(jīng)驗(yàn)的人才相當(dāng)少,這個(gè)對(duì)于傳統(tǒng)的IT人是一個(gè)“彎道超車”的機(jī)會(huì)。實(shí)際上,我相信中國(guó)同樣也可以通過(guò)“彎道超車”與美國(guó)硅谷成為雙雄。大數(shù)據(jù)技術(shù)發(fā)展速度非常快,可能未來(lái)還有會(huì)有更先進(jìn)、更好用的框架。IT人善于快速學(xué)習(xí),我們也能夠不斷提升自己,成為大數(shù)據(jù)領(lǐng)域的專家。