大數(shù)據(jù)作為時(shí)下火熱的IT行業(yè)的詞匯，隨之而來(lái)的數(shù)據(jù)開(kāi)發(fā)、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)安全、數(shù)據(jù)分析、數(shù)據(jù)挖掘等等圍繞大數(shù)據(jù)的商業(yè)價(jià)值的利用逐漸成為行業(yè)人士爭(zhēng)相追捧的利潤(rùn)焦點(diǎn)。隨著大數(shù)據(jù)時(shí)代的來(lái)臨，大數(shù)據(jù)開(kāi)發(fā)也應(yīng)運(yùn)而生。

　　大數(shù)據(jù)開(kāi)發(fā)其實(shí)分兩種，第一類(lèi)是編寫(xiě)一些Hadoop、Spark的應(yīng)用程序，第二類(lèi)是對(duì)大數(shù)據(jù)處理系統(tǒng)本身進(jìn)行開(kāi)發(fā)。第一類(lèi)工作感覺(jué)更適用于data analyst這種職位吧，而且現(xiàn)在Hive Spark-SQL這種系統(tǒng)也提供SQL的接口。第二類(lèi)工作的話(huà)通常才大公司里才有，一般他們都會(huì)搞自己的系統(tǒng)或者再對(duì)開(kāi)源的做些二次開(kāi)發(fā)。這種工作的話(huà)對(duì)理論和實(shí)踐要求的都更深一些，也更有技術(shù)含量。
 

 

　　大數(shù)據(jù)開(kāi)發(fā)需要學(xué)習(xí)哪些技術(shù)?學(xué)習(xí)路線(xiàn)圖如下：

　　階段一、大數(shù)據(jù)基礎(chǔ)——java語(yǔ)言基礎(chǔ)方面

　　(1)Java語(yǔ)言基礎(chǔ)

　　Java開(kāi)發(fā)介紹、熟悉Eclipse開(kāi)發(fā)工具、Java語(yǔ)言基礎(chǔ)、Java流程控制、Java字符串、Java數(shù)組與類(lèi)和對(duì)象、數(shù)字處理類(lèi)與核心技術(shù)、I/O與反射、多線(xiàn)程、Swing程序與集合類(lèi)

　　(2) HTML、CSS與JavaScript

　　PC端網(wǎng)站布局、HTML5+CSS3基礎(chǔ)、WebApp頁(yè)面布局、原生JavaScript交互功能開(kāi)發(fā)、Ajax異步交互、jQuery應(yīng)用

　　(3)JavaWeb和數(shù)據(jù)庫(kù)

　　數(shù)據(jù)庫(kù)、JavaWeb開(kāi)發(fā)核心、JavaWeb開(kāi)發(fā)內(nèi)幕

　　階段二、Linux&Hadoop生態(tài)體系

　　Linux體系、Hadoop離線(xiàn)計(jì)算大綱、分布式數(shù)據(jù)庫(kù)Hbase、數(shù)據(jù)倉(cāng)庫(kù)Hive、數(shù)據(jù)遷移工具Sqoop、Flume分布式日志框架
 

 

　　階段三、分布式計(jì)算框架和Spark&Strom生態(tài)體系

　　(1)分布式計(jì)算框架

　　Python編程語(yǔ)言、Scala編程語(yǔ)言、Spark大數(shù)據(jù)處理、Spark—Streaming大數(shù)據(jù)處理、Spark—Mlib機(jī)器學(xué)習(xí)、Spark—GraphX 圖計(jì)算、實(shí)戰(zhàn)一：基于Spark的推薦系統(tǒng)(某一線(xiàn)公司真實(shí)項(xiàng)目)、實(shí)戰(zhàn)二：新浪網(wǎng)(www.sina.com.cn)

　　(2)storm技術(shù)架構(gòu)體系

　　Storm原理與基礎(chǔ)、消息隊(duì)列kafka、Redis工具、zookeeper詳解、實(shí)戰(zhàn)一：日志告警系統(tǒng)項(xiàng)目、實(shí)戰(zhàn)二：猜你喜歡推薦系統(tǒng)實(shí)戰(zhàn)

　　階段四、大數(shù)據(jù)項(xiàng)目實(shí)戰(zhàn)(一線(xiàn)公司真實(shí)項(xiàng)目)

　　數(shù)據(jù)獲取、數(shù)據(jù)處理、數(shù)據(jù)分析、數(shù)據(jù)展現(xiàn)、數(shù)據(jù)應(yīng)用

　　階段五、大數(shù)據(jù)分析 —AI(人工智能)

　　Data Analyze工作環(huán)境準(zhǔn)備&數(shù)據(jù)分析基礎(chǔ)、數(shù)據(jù)可視化、Python機(jī)器學(xué)習(xí)

　　Python機(jī)器學(xué)習(xí)2、圖像識(shí)別&神經(jīng)網(wǎng)絡(luò)、自然語(yǔ)言處理&社交網(wǎng)絡(luò)處理、實(shí)戰(zhàn)項(xiàng)目：戶(hù)外設(shè)備識(shí)別分析

　　大數(shù)據(jù)是互聯(lián)網(wǎng)發(fā)展的方向，大數(shù)據(jù)人才是未來(lái)的高薪貴族。隨著大數(shù)據(jù)人才的供不應(yīng)求，大數(shù)據(jù)人才的薪資待遇也在不斷提升。學(xué)習(xí)大數(shù)據(jù)開(kāi)發(fā)，機(jī)遇和技術(shù)必不可少!