數(shù)據(jù)工程師需要培訓(xùn)什么?

1.javaweb與數(shù)據(jù)庫(kù)：數(shù)據(jù)庫(kù)，javaweb開發(fā)的核心，javaweb開發(fā)的內(nèi)幕。

2.storm技術(shù)體系結(jié)構(gòu)：storm的基本原理和基礎(chǔ)，消息隊(duì)列kafka,redis工具，zookeeper詳細(xì)說明等等。

3.java語言基礎(chǔ)：java開發(fā)簡(jiǎn)介，熟悉eclipse開發(fā)工具，java語言基礎(chǔ)，java過程控制，java字符串，java數(shù)組和類，數(shù)字處理類，以及其他一些核心技術(shù)。

4.css與java:pc端的網(wǎng)站布局，html5+css3的基礎(chǔ)，webapp的頁(yè)面布局，本機(jī)java交互功能開發(fā)，ajax的異步交互，jquery應(yīng)用。

5.hbase:hbase具有任意的、讀寫數(shù)據(jù)的能力，并且更適合于非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)，關(guān)鍵在于采用面向列的分布式apachehbase數(shù)據(jù)庫(kù)。

大數(shù)據(jù)工程師的就業(yè)前景：

大數(shù)據(jù)被認(rèn)為是“未來的新石油”，又被比喻為21世紀(jì)的“鉆石礦”，它在社會(huì)生產(chǎn)、流通、分配、消費(fèi)活動(dòng)和經(jīng)濟(jì)運(yùn)行機(jī)制中扮演著重要角色。所以大數(shù)據(jù)工程師的就業(yè)前景是相當(dāng)可觀的。

近幾年來，隨著信息化、數(shù)據(jù)化的發(fā)展，社會(huì)對(duì)大數(shù)據(jù)相關(guān)專業(yè)人才的需求不斷增加，但國(guó)內(nèi)真正的大數(shù)據(jù)專業(yè)人才卻很少，這樣的供需失衡會(huì)導(dǎo)致數(shù)據(jù)行業(yè)出現(xiàn)一個(gè)較大的人才缺口，大數(shù)據(jù)工程師將面臨廣闊的就業(yè)前景，而大數(shù)據(jù)與it類似，都是“越老越吃香”，你的實(shí)踐經(jīng)驗(yàn)越豐富，你能發(fā)展的事業(yè)也就越長(zhǎng)，自我價(jià)值也就越大。

數(shù)據(jù)工程師可從事etl研發(fā)，主要負(fù)責(zé)從分散的異構(gòu)數(shù)據(jù)源中提取數(shù)據(jù)，如關(guān)系數(shù)據(jù)、平面數(shù)據(jù)文件等，并進(jìn)行整理、轉(zhuǎn)換、集成，最終加載到數(shù)據(jù)倉(cāng)庫(kù)或數(shù)據(jù)集市中，成為在線分析處理、數(shù)據(jù)挖掘的基礎(chǔ)。還可從事數(shù)據(jù)工作，主要負(fù)責(zé)公司內(nèi)部的大型服務(wù)器，存儲(chǔ)，數(shù)據(jù)管理，以及網(wǎng)絡(luò)，信息項(xiàng)目的規(guī)劃，設(shè)計(jì)和實(shí)施。

大數(shù)據(jù)工作內(nèi)容有什么?

大數(shù)據(jù)開發(fā)工程師：負(fù)責(zé)大數(shù)據(jù)平臺(tái)建設(shè)，大數(shù)據(jù)的采集、存儲(chǔ)、計(jì)算分析，大數(shù)據(jù)組態(tài)的二次開發(fā)等。

大數(shù)據(jù)運(yùn)營(yíng)工程師：負(fù)責(zé)大數(shù)據(jù)平臺(tái)/群組的維護(hù)，保大數(shù)據(jù)平臺(tái)的正常穩(wěn)定運(yùn)行。

大數(shù)據(jù)分析員：更注重應(yīng)用層面，主要是處理大數(shù)據(jù)的分析問題，會(huì)涉及到算法、學(xué)歷、高數(shù)、統(tǒng)計(jì)等方面的要求。

數(shù)據(jù)采掘工程師：通過算法對(duì)數(shù)據(jù)進(jìn)行采掘分析，得到一些有用的結(jié)果，著重于預(yù)測(cè)某些未知規(guī)律。

datastandards：專注于使用傳統(tǒng)分析工具對(duì)數(shù)據(jù)進(jìn)行處理分析，從而得出結(jié)論，例如excel,mysql,spss等等，數(shù)據(jù)規(guī)模和類型更小。