崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺行業(yè)數(shù)據(jù)管理集成架構(gòu)設(shè)計;
2、負(fù)責(zé)客戶數(shù)據(jù)中臺/數(shù)據(jù)平臺/數(shù)據(jù)湖架構(gòu)設(shè)計;
3、負(fù)責(zé)數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)交換等系統(tǒng)架構(gòu)設(shè)計;
4、協(xié)同業(yè)務(wù)分析完成架構(gòu)設(shè)計目標(biāo)。
專業(yè)知識:
1、熟悉主數(shù)據(jù)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量等企業(yè)數(shù)據(jù)治理相關(guān)的體系和方法;
2、邏輯模型和物理模型建模、中間層模型理論以及多維模型的設(shè)計;
3、 精通hadoop平臺所有組件原理,熟悉掌握主流數(shù)據(jù)庫,有豐富的二次開發(fā)實戰(zhàn)經(jīng)驗;
4、 至少掌握三個大數(shù)據(jù)組件spark、ES、flink、redis、solr、storm技術(shù)原理和應(yīng)用場景;
5、精通至少1門編程語言,Java/Python/SQL/Scala等。
業(yè)務(wù)技能:
1、有3年以上大型公司數(shù)據(jù)中臺、數(shù)據(jù)倉庫、數(shù)據(jù)治理項目架構(gòu)設(shè)計及實施經(jīng)驗;
2、熟悉大數(shù)據(jù)技術(shù)方案規(guī)劃,包括ETL設(shè)計、數(shù)據(jù)開發(fā)規(guī)劃、數(shù)據(jù)架構(gòu);
3、熟悉離線處理、流計算、大數(shù)據(jù)實時檢索、大數(shù)據(jù)交互查詢場景化應(yīng)用方案;
4、對數(shù)據(jù)標(biāo)準(zhǔn)質(zhì)量、模型、元數(shù)據(jù)管理的在行業(yè)場景的落地應(yīng)用有深入研究;
5、對于實時數(shù)據(jù)倉庫建設(shè)、非結(jié)構(gòu)化數(shù)據(jù)管理方案有深入應(yīng)用的優(yōu)先。