一、職位體系
大數(shù)據(jù)時(shí)代,給個(gè)人帶來了新的發(fā)展機(jī)會(huì),也給個(gè)人提供了新的職位發(fā)展通道。
一些同仁從其他崗位轉(zhuǎn)向大數(shù)據(jù)崗位時(shí),面對(duì)眾多的大數(shù)據(jù)招聘職位時(shí),卻不知所措,不知道應(yīng)該選擇什么樣的職位發(fā)展方向。
我收集并整理了一下各個(gè)公司的招聘職位,試圖梳理當(dāng)前大數(shù)據(jù)崗位體系,并尋找出一條合適的職位發(fā)展通道,希望對(duì)大家有用。
當(dāng)前大數(shù)據(jù)職位,從總的來說,主要有兩大類:應(yīng)用類和系統(tǒng)類。
應(yīng)用類
應(yīng)用類,偏向于數(shù)據(jù)分析和數(shù)據(jù)應(yīng)用,經(jīng)常說到的數(shù)據(jù)分析、數(shù)據(jù)挖掘,就是典型的應(yīng)用技術(shù)。這一類職位,要求采用適當(dāng)?shù)姆治龊屯诰蚍椒▽?duì)數(shù)據(jù)進(jìn)行分析,提取數(shù)據(jù)中隱含的業(yè)務(wù)信息,來支撐企業(yè)決策。
最典型的職位就是:大數(shù)據(jù)分析師。
大數(shù)據(jù)分析師:主要是指,基于業(yè)務(wù)問題,能夠選擇最合適的數(shù)據(jù)分析和數(shù)據(jù)挖掘方法,提取數(shù)據(jù)中的業(yè)務(wù)信息,從而支撐業(yè)務(wù)決策。要求熟悉數(shù)據(jù)分析/挖掘過程,掌握數(shù)據(jù)分析/挖掘方法,理解數(shù)據(jù)分析模型,熟練操作數(shù)據(jù)分析工具(比如Excel、SPSS、SAS等)。一般對(duì)于大數(shù)據(jù)分析師,其能力要求比較全面,不管是業(yè)務(wù)邏輯、還是分析方法、模型、可視化,都要求全面掌握。
業(yè)務(wù)數(shù)據(jù)分析師:側(cè)重于商業(yè)理解,要求能夠?qū)I(yè)務(wù)問題和商業(yè)問題,轉(zhuǎn)化為大數(shù)據(jù)的問題,并將分析結(jié)果從業(yè)務(wù)層面進(jìn)行解讀,從而形成業(yè)務(wù)建議和業(yè)務(wù)策略。要求熟悉業(yè)務(wù)邏輯和業(yè)務(wù)模型,掌握數(shù)據(jù)分析思路,能將數(shù)據(jù)可視化,對(duì)數(shù)據(jù)解讀等。當(dāng)然,類似的職位還有大數(shù)據(jù)觀察員、大數(shù)據(jù)研究員等等,這些都側(cè)重于商業(yè)理解。
大數(shù)據(jù)建模/算法師:側(cè)重于數(shù)據(jù)建模,能夠圍繞業(yè)務(wù)問題,構(gòu)建合適的數(shù)據(jù)分析框架和分析模型,將業(yè)務(wù)問題進(jìn)行分解,從而達(dá)到定性或定量來描述業(yè)務(wù)的目的。要求熟悉數(shù)據(jù)建模、模型評(píng)估、模型優(yōu)化、模型應(yīng)用等等。
大數(shù)據(jù)算法師:側(cè)重于數(shù)據(jù)模型的算法研究、設(shè)計(jì)與實(shí)現(xiàn),為達(dá)到分析目的,對(duì)實(shí)現(xiàn)算法進(jìn)行分析、選擇與優(yōu)化,確保實(shí)現(xiàn)性能及效果。一般情況下,算法師往往和建模師在一起工作,因?yàn)樗惴?,往往指的是某個(gè)對(duì)應(yīng)模型的算法。
系統(tǒng)類
系統(tǒng)類,偏向于系統(tǒng)研發(fā),比如Hadoop系統(tǒng)、云計(jì)算,就屬于系統(tǒng)類技術(shù)。這一類職位,要求熟悉Hadoop大數(shù)據(jù)平臺(tái)的核心框架和組件,能夠基于大數(shù)據(jù)平臺(tái)來寫代碼開發(fā)應(yīng)用,支撐業(yè)務(wù)應(yīng)用。
最典型的職位就是:大數(shù)據(jù)工程師。
大數(shù)據(jù)開發(fā)工程師:負(fù)責(zé)大數(shù)據(jù)系統(tǒng)的開發(fā)工作,能夠運(yùn)用編程語言進(jìn)行應(yīng)用程序的開發(fā)、測(cè)試和維護(hù),實(shí)現(xiàn)產(chǎn)品功能。要求掌握編程語言,如JAVA、R、Python等等。
大數(shù)據(jù)架構(gòu)師:負(fù)責(zé)大數(shù)據(jù)系統(tǒng)的平臺(tái)架構(gòu)設(shè)計(jì)、平臺(tái)構(gòu)建。要求熟悉Hadoop/Storm/Spark等平臺(tái),熟悉整個(gè)生態(tài)系統(tǒng)的組件,有平臺(tái)級(jí)開發(fā)和架構(gòu)設(shè)計(jì)能力等等。
大數(shù)據(jù)運(yùn)維工程師:側(cè)重于大數(shù)據(jù)平臺(tái)運(yùn)維管理,包括系統(tǒng)運(yùn)維規(guī)劃、系統(tǒng)監(jiān)控、系統(tǒng)優(yōu)化等等,保障大數(shù)據(jù)平臺(tái)服務(wù)的穩(wěn)定性和可用性。掌握平臺(tái)各組件的安裝、配置與調(diào)試,有良好的系統(tǒng)性能優(yōu)化及故障排除能力。
大數(shù)據(jù)庫管理員:側(cè)重于數(shù)據(jù)庫/數(shù)據(jù)倒倉庫的設(shè)計(jì)、開發(fā)、管理和優(yōu)化,監(jiān)控?cái)?shù)據(jù)庫的性能、故障檢測(cè)和排除,包括數(shù)據(jù)采集,數(shù)據(jù)庫架構(gòu)設(shè)計(jì),空間和容量規(guī)劃,性能優(yōu)化,數(shù)據(jù)安全和隱私,數(shù)據(jù)容錯(cuò),等等。
當(dāng)然,在不同的企業(yè)中,職位的名稱和叫法有所不同,或者會(huì)衍生出新的職位,但基本的崗位職責(zé)是類似的。
二、職位發(fā)展通道
前面說過,大數(shù)據(jù)職位至少有兩大類,一類是應(yīng)用類,另一類是系統(tǒng)類。這兩類的職位最終的發(fā)展應(yīng)該有不同,也可以相互融合,就看個(gè)人的選擇發(fā)展。
基本的發(fā)展通道如下所示:
應(yīng)用類
應(yīng)用類職位,這一類往往是從業(yè)務(wù)出發(fā),從精通業(yè)務(wù),到精通數(shù)據(jù)分析,所以基本的發(fā)展方向有兩個(gè)。
通道一:業(yè)務(wù)分析員à業(yè)務(wù)分析師à產(chǎn)品經(jīng)理/分析專家;
大數(shù)據(jù)分析員,一般也叫做助理分析師,指的是在高級(jí)數(shù)據(jù)分析師的指導(dǎo)下,采用常用的分析方法和分析工具,提煉出數(shù)據(jù)中蘊(yùn)含的業(yè)務(wù)信息。一般要求分析員能夠熟練使用分析工具,明確分析方法背后的理論及應(yīng)用場(chǎng)景。
大數(shù)據(jù)分析師,指的是能夠處理復(fù)雜的業(yè)務(wù)問題的數(shù)據(jù)分析人員,他們能夠?qū)?fù)雜的問題進(jìn)行分解,系統(tǒng)地全面地分析出復(fù)雜問題的業(yè)務(wù)規(guī)律和業(yè)務(wù)問題。一般,要求分析師對(duì)業(yè)務(wù)和分析都要有較深的認(rèn)識(shí),熟悉業(yè)務(wù)模型,也熟悉數(shù)據(jù)模型,并能基于業(yè)務(wù)數(shù)據(jù)分析結(jié)果給出業(yè)務(wù)建議和業(yè)務(wù)策略,支撐企業(yè)決策。
數(shù)據(jù)產(chǎn)品經(jīng)理,指的是數(shù)據(jù)產(chǎn)品的項(xiàng)目管理人員。產(chǎn)品經(jīng)理負(fù)責(zé)數(shù)據(jù)產(chǎn)品策劃、需求分析、功能規(guī)劃,以及規(guī)劃產(chǎn)品的商業(yè)模型,推廣策略,負(fù)責(zé)組建團(tuán)隊(duì)進(jìn)行產(chǎn)品開發(fā)等等。要求產(chǎn)品經(jīng)理具有數(shù)據(jù)思維能力,不但要有深刻的數(shù)據(jù)分析/業(yè)務(wù)理解能力,還要有數(shù)據(jù)產(chǎn)品的設(shè)計(jì)與管理能力,以及較強(qiáng)的產(chǎn)品運(yùn)營能力。
通道一適合于業(yè)務(wù)部門的人員轉(zhuǎn)行做數(shù)據(jù)分析。
他們從懂業(yè)務(wù)出發(fā),通過學(xué)習(xí)系統(tǒng)的數(shù)據(jù)分析和數(shù)據(jù)挖掘知識(shí),掌握相應(yīng)的分析方法、分析思路、分析模型,從單個(gè)業(yè)務(wù)問題的分析到復(fù)雜問題的分析,從常用統(tǒng)計(jì)分析到高深的數(shù)據(jù)挖掘/機(jī)器學(xué)習(xí)等知識(shí),逐步上升到分析專家或者資深分析師。
通道二:數(shù)據(jù)分析員à數(shù)據(jù)建模/算法師à分析專家/產(chǎn)品經(jīng)理;
數(shù)據(jù)建模/算法師,側(cè)重于數(shù)據(jù)建模,以及算法研究?;趯?duì)商業(yè)問題的理解,選擇或構(gòu)建出合適的數(shù)據(jù)分析框架和分析模型,以及實(shí)現(xiàn)算法,從而達(dá)到定性或定量的實(shí)現(xiàn)業(yè)務(wù)數(shù)據(jù)分析,提供數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)服務(wù)。
大數(shù)據(jù)分析專家,或者叫做高級(jí)/資深分析師,他們對(duì)業(yè)務(wù)領(lǐng)域有系統(tǒng)全面的理解,能構(gòu)建整個(gè)業(yè)務(wù)分析框架及建立某領(lǐng)域的業(yè)務(wù)分析體系,形成系統(tǒng)全面的企業(yè)決策系統(tǒng)。
一般情況下,資深的分析專家與產(chǎn)品經(jīng)理在能力上應(yīng)該是相當(dāng)?shù)?,只是產(chǎn)品經(jīng)理側(cè)重于產(chǎn)品管理與產(chǎn)品運(yùn)營,而資深分析專家更側(cè)重于業(yè)務(wù)數(shù)據(jù)分析。
通道二適合于高校畢業(yè)生做數(shù)據(jù)分析。
他們?cè)趯W(xué)校接受過正規(guī)的數(shù)理統(tǒng)計(jì)、數(shù)據(jù)挖掘、算法實(shí)現(xiàn)等知識(shí),掌握了較全面的數(shù)據(jù)分析/挖掘方法。他們只需要再深入了解一些業(yè)務(wù)知識(shí),就能夠很快地將業(yè)務(wù)和分析結(jié)合,快速地成長為分析專家。一般地,算法工程師,往往是高校的研究生和教授來擔(dān)當(dāng)。
系統(tǒng)類
系統(tǒng)類職位,屬于系統(tǒng)研發(fā),其發(fā)展通道與一般的IT技術(shù)人員的職位發(fā)展通道基本類似,只不過是基于大數(shù)據(jù)平臺(tái)進(jìn)行研發(fā)。
通道三:開發(fā)工程師à系統(tǒng)設(shè)計(jì)師à大數(shù)據(jù)架構(gòu)師
開發(fā)工程師,俗稱碼農(nóng),偏向于寫代碼,負(fù)責(zé)大數(shù)據(jù)系統(tǒng)的開發(fā)工作,在系統(tǒng)設(shè)計(jì)師的指導(dǎo)下,運(yùn)用編程語言進(jìn)行應(yīng)用程序的單個(gè)模塊的開發(fā)、測(cè)試和維護(hù)。
系統(tǒng)設(shè)計(jì)師,負(fù)責(zé)大數(shù)據(jù)產(chǎn)品系統(tǒng)的設(shè)計(jì),要求熟悉Hadoop/Spark/Storm等大數(shù)據(jù)平臺(tái),熟悉大數(shù)據(jù)系統(tǒng)平臺(tái)的核心框架及組件,能夠基于大數(shù)據(jù)系統(tǒng)進(jìn)行應(yīng)用系統(tǒng)設(shè)計(jì)/開發(fā)/優(yōu)化/部署。
大數(shù)據(jù)架構(gòu)師,負(fù)責(zé)大數(shù)據(jù)系統(tǒng)的技術(shù)架構(gòu)設(shè)計(jì),平臺(tái)選擇與構(gòu)建,要求有平臺(tái)級(jí)開發(fā)和架構(gòu)設(shè)計(jì)能力,能夠搭建整個(gè)商業(yè)大數(shù)據(jù)系統(tǒng)的平臺(tái)。
通道三適合于一般IT開發(fā)工程師轉(zhuǎn)行做大數(shù)據(jù)。
他們有著較強(qiáng)的編程和寫代碼的能力,本身對(duì)編程語言(如Java/R/Python等)較熟悉,只需要再了解一下大數(shù)據(jù)開源平臺(tái)Hadoop的編程原理及運(yùn)行思想,就能夠比較容易地轉(zhuǎn)入大數(shù)據(jù)系統(tǒng)的開發(fā)和測(cè)試,并通過不斷地?cái)U(kuò)寬對(duì)產(chǎn)品其他模塊甚至整個(gè)系統(tǒng)的了解,逐步上升到系統(tǒng)設(shè)計(jì),以及架構(gòu)設(shè)計(jì)的高度。
通道四:數(shù)據(jù)庫管理員à運(yùn)維工程師à大數(shù)據(jù)架構(gòu)師
數(shù)據(jù)庫/數(shù)據(jù)倉庫管理員,指的是大數(shù)據(jù)倉庫的設(shè)計(jì)、管理和優(yōu)化,負(fù)責(zé)大數(shù)據(jù)的分布式存儲(chǔ)、組織與管理,包括性能優(yōu)化、故障檢測(cè)、數(shù)據(jù)安全等等。
大數(shù)據(jù)運(yùn)維工程師,指的是大數(shù)據(jù)平臺(tái)運(yùn)維管理,包括系統(tǒng)運(yùn)維規(guī)劃、系統(tǒng)監(jiān)控、系統(tǒng)優(yōu)化等等。
通道四適合于數(shù)據(jù)庫管理員轉(zhuǎn)行到大數(shù)據(jù)。
他們本來就熟悉數(shù)據(jù)庫/數(shù)據(jù)倉庫技術(shù),原來的技能很容易移植到大數(shù)據(jù)的數(shù)據(jù)庫(如Hbase,Hive等)上來。在數(shù)據(jù)倉庫基礎(chǔ)上,再擴(kuò)展到其他模塊,熟悉其他組件的技術(shù)原理,工作機(jī)制,直至整個(gè)大數(shù)據(jù)系統(tǒng),這樣可快速地上升到系統(tǒng)運(yùn)維及大數(shù)據(jù)架構(gòu)師。
通道五:大數(shù)據(jù)安全員à大數(shù)據(jù)安全工程師à大數(shù)據(jù)安全專家
大數(shù)據(jù)安全,這是一個(gè)相對(duì)獨(dú)立的領(lǐng)域,主要專注于大數(shù)據(jù)系統(tǒng)的安全工作。
大數(shù)據(jù)安全員,要求了解基本的數(shù)據(jù)安全知識(shí),能夠在安全專家指導(dǎo)下,利用常用的安全工具和手段,執(zhí)行對(duì)系統(tǒng)和數(shù)據(jù)的安全防范措施。
大數(shù)據(jù)安全工程師,要求理解大數(shù)據(jù)系統(tǒng)各組件的安全實(shí)現(xiàn),深入理解網(wǎng)絡(luò)安全、數(shù)據(jù)安全、信息安全等,包括身份認(rèn)證、權(quán)限控制、數(shù)據(jù)加密、入侵檢測(cè)、系統(tǒng)安全加固、漏洞修復(fù)、通信安全、安全審計(jì)、數(shù)據(jù)防泄漏等等,和確保大數(shù)據(jù)系統(tǒng)的安全。
大數(shù)據(jù)安全專家,要求熟悉大數(shù)據(jù)安全模型和安全機(jī)制,能夠構(gòu)建大數(shù)據(jù)系統(tǒng)安全體系,制定大數(shù)據(jù)安全策略和方案,以及完善和優(yōu)化大數(shù)據(jù)系統(tǒng)安全機(jī)制。
大數(shù)據(jù)安全專家發(fā)展的最高職位應(yīng)該是CSO(首席安全官),或者叫CDSO(首席數(shù)據(jù)安全官)。CDO應(yīng)該能夠深入理解職責(zé)管轄下的數(shù)據(jù)安全需求,對(duì)比分析數(shù)據(jù)安全解決方案優(yōu)劣,側(cè)重于大數(shù)據(jù)的安全管理和流程,能制定數(shù)據(jù)安全規(guī)范和相關(guān)安全標(biāo)準(zhǔn)。
通道五適合于負(fù)責(zé)網(wǎng)絡(luò)信息安全的人士轉(zhuǎn)行到大數(shù)據(jù)。
他們基于原有的網(wǎng)絡(luò)安全、信息安全知識(shí),結(jié)合當(dāng)前大數(shù)據(jù)系統(tǒng)的實(shí)現(xiàn)原理和安全運(yùn)行機(jī)制,就能快速上手,確保大數(shù)據(jù)平臺(tái)架構(gòu)的安全。
不管是從應(yīng)用類,還是系統(tǒng)類,大數(shù)據(jù)專家發(fā)展的最高職位都應(yīng)該是數(shù)據(jù)科學(xué)家或CDO(首席數(shù)據(jù)官)。當(dāng)然,數(shù)據(jù)科學(xué)家側(cè)重于大數(shù)據(jù)技術(shù)(包括應(yīng)用技術(shù)和系統(tǒng)技術(shù)),而CDO,則側(cè)重于企業(yè)管理和決策。
當(dāng)然,從能力要求看起來,大數(shù)據(jù)在應(yīng)用類的最高職位也可以是CIO(首席信息官),側(cè)重于從業(yè)務(wù)信息層面來解讀大數(shù)據(jù);系統(tǒng)類的最高職位也可以是CTO(首席技術(shù)官),側(cè)重于從技術(shù)系統(tǒng)層面來引領(lǐng)大數(shù)據(jù);安全類的最高職位是CSO(首席安全官),側(cè)重于大數(shù)據(jù)的安全。
CDO(首席數(shù)據(jù)官)/數(shù)據(jù)科學(xué)家,負(fù)責(zé)企業(yè)大數(shù)據(jù)的戰(zhàn)略規(guī)劃,制定企業(yè)大數(shù)據(jù)的發(fā)展戰(zhàn)略和布局,實(shí)現(xiàn)企業(yè)數(shù)據(jù)有效支撐企業(yè)的發(fā)展。
CTO(首席技術(shù)官),是企業(yè)技術(shù)的創(chuàng)建者和推動(dòng)者,負(fù)責(zé)制定企業(yè)的技術(shù)愿景和發(fā)展戰(zhàn)略,把握總體技術(shù)研究與發(fā)展方向,并對(duì)技術(shù)選型進(jìn)行指導(dǎo)和把關(guān)。
CIO(首席信息官),負(fù)責(zé)規(guī)劃企業(yè)的信息資源,制定企業(yè)信息化戰(zhàn)略和布局,整合企業(yè)信息流、物流、資金流資源,運(yùn)用信息管理技術(shù)重建企業(yè)的決策體系,包括企業(yè)流程再造等等。CIO是為業(yè)務(wù)而設(shè)立的。
CSO(首席安全官),主要是指CDSO(首席數(shù)據(jù)安全官),負(fù)責(zé)整個(gè)企業(yè)大數(shù)據(jù)的安全運(yùn)行狀態(tài),制定大數(shù)據(jù)系統(tǒng)的安全措施、安全規(guī)則和安全標(biāo)準(zhǔn),負(fù)責(zé)整個(gè)企業(yè)大數(shù)據(jù)系統(tǒng)的安全方案和安全策略。
不管是CDO、CIO、CTO,都是企業(yè)管理者,只是職責(zé)細(xì)分上的差異。
企業(yè)的性質(zhì)不同,有可能設(shè)置的CXO崗位也不一樣。那些對(duì)數(shù)據(jù)有較強(qiáng)依賴的企業(yè),諸如金融、電子商務(wù)、互聯(lián)網(wǎng)企業(yè)等,都會(huì)設(shè)置CDO角色;那些以信息化服務(wù)為主的企業(yè),諸如ERP企業(yè)、OA企業(yè),一般設(shè)置CIO角色;那些以技術(shù)擅長的企業(yè),諸如高科技企業(yè)、IT公司,一般設(shè)置CTO角色。
在一個(gè)大數(shù)據(jù)企業(yè)中,CDO有可能就是CIO,也有可能就是CTO,或者CDO將完全代替CIO和CTO。
當(dāng)然,你有可能在各大公司的職位招聘中看到更多的職位,各種職位,五花八門,但總體來看,不外乎是上面提到的大數(shù)據(jù)職位的一些細(xì)化和變化。
轉(zhuǎn)載:http://santuchuan.cn/zixun_detail/111709.html