崗位職責(zé):
系統(tǒng)開發(fā)
根據(jù)項目總體規(guī)劃,對公司大數(shù)據(jù)平臺進(jìn)行總體設(shè)計,適應(yīng)公司整體戰(zhàn)略的發(fā)展需求,并輸出相應(yīng)的設(shè)計方案
功能開發(fā)
根據(jù)設(shè)計方案的要求進(jìn)行大數(shù)據(jù)平臺的架構(gòu)建設(shè)和功能開發(fā),包括分布式存儲系統(tǒng)、分布式計算系統(tǒng)、在線離線數(shù)據(jù)處理、數(shù)據(jù)ETL、數(shù)據(jù)挖掘、數(shù)據(jù)可視化等,并輸出相應(yīng)的代碼和文檔
第三方系統(tǒng)對接
根據(jù)項目要求對公司內(nèi)部系統(tǒng)或外部第三方系統(tǒng)進(jìn)行對接,對采集到的數(shù)據(jù)進(jìn)行處理、存儲等工作
性能優(yōu)化
采用數(shù)據(jù)建模的方式對現(xiàn)有的算法進(jìn)行優(yōu)化,提升大數(shù)據(jù)平臺的性能
技術(shù)研究
對業(yè)界前沿的數(shù)據(jù)計算架構(gòu)進(jìn)行規(guī)劃和研究,能夠針對業(yè)務(wù)場景給出可靠的技術(shù)選型
任職要求:
1、本科及以上學(xué)歷,計算機(jī)軟件/數(shù)學(xué)等相關(guān)專業(yè)。
2、3年以上大數(shù)據(jù)平臺開發(fā)經(jīng)驗;
3、有汽車或充電服務(wù)相關(guān)行業(yè)經(jīng)驗者優(yōu)先。
4、具備大數(shù)據(jù)環(huán)境構(gòu)建、大數(shù)據(jù)開發(fā)經(jīng)驗;熟悉阿里云平臺大數(shù)據(jù)相關(guān)模塊的使用,對大數(shù)據(jù)安全相關(guān)技術(shù)了解;
5、具備數(shù)據(jù)分析、數(shù)據(jù)挖掘、數(shù)據(jù)可視化、在線數(shù)據(jù)相關(guān)產(chǎn)品的設(shè)計經(jīng)驗;
6、熟悉Jave /Python中的一種或幾種語言;
7、熟悉Oracle/Mysql等關(guān)系型數(shù)據(jù)庫;
8、熟悉Hadoop、Storm、HBase、Hive、Spark等框架者;