工作職責(zé):

1、負(fù)責(zé)集團(tuán)大數(shù)據(jù)平臺(tái)的部署和開(kāi)發(fā)工作，日常運(yùn)維大數(shù)據(jù)平臺(tái)；

2、快速響應(yīng)業(yè)務(wù)部門(mén)的數(shù)據(jù)需求，并及時(shí)給出技術(shù)解決方案；

3、制定集團(tuán)大數(shù)據(jù)平臺(tái)的開(kāi)發(fā)標(biāo)準(zhǔn)和規(guī)范

4、負(fù)責(zé)集團(tuán)大數(shù)據(jù)平臺(tái)相關(guān)技術(shù)的培訓(xùn)工作

任職資格:

1、本科及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，3年以上大數(shù)據(jù)平臺(tái)開(kāi)發(fā)經(jīng)驗(yàn)，有至少2個(gè)完整的大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)，有車(chē)企項(xiàng)目經(jīng)驗(yàn)優(yōu)先；

2、掌握Hadoop、yarn、spark、hive、sqoop、zookeeper、kafka等分布式系統(tǒng)/組件，有CDH運(yùn)維經(jīng)驗(yàn)優(yōu)先；

3、掌握大數(shù)據(jù)的完整處理流程，包括采集、清洗、預(yù)處理、存儲(chǔ)、分析挖掘和可視化以及架構(gòu)設(shè)計(jì)、開(kāi)發(fā)、部署、運(yùn)維工作；

4、掌握常用的數(shù)據(jù)庫(kù)，如Oracle、MySQL、SQLServer等，熟悉SAP HANA數(shù)據(jù)庫(kù)者優(yōu)先 ；

5、掌握SQL和SQL常用優(yōu)化策略；

6、熟悉Linux或Unix系統(tǒng)，熟悉Shell編程；

7、熟悉至少一種ETL工具，如Kettle、Talend、Informatica、Datax、DataStage等；

8、熟悉至少一種報(bào)表可視化工具，如tableau、帆軟、PowerBI、Qlik等；

9、了解主流的編程語(yǔ)言和框架，熟悉Python者優(yōu)先；

10、熱愛(ài)大數(shù)據(jù)工作，關(guān)注并了解大數(shù)據(jù)的前沿技術(shù)。

職能類別：ETL開(kāi)發(fā)工程師其他