崗位職責:
1. 負責核心數(shù)據(jù)倉庫和集市建設,數(shù)據(jù)ETL的設計、開發(fā)與性能優(yōu)化,負責業(yè)務需求的需求理解、數(shù)據(jù)探查和分析;
2. 負責設計ETL任務調度,并監(jiān)控和運維,保證日常數(shù)據(jù)質量。
3. 負責大數(shù)據(jù)平臺的倉庫模型設計,數(shù)據(jù)模型建模,對數(shù)據(jù)進行挖掘、優(yōu)化和統(tǒng)計分析;
4. 通過和業(yè)務溝通,抽象出業(yè)務邏輯。同時需要有數(shù)據(jù)敏感性,需要對數(shù)據(jù)的準確性負責
任職資格:
南之:
任職要求:
1. ??萍耙陨蠈W歷,計算機或相關專業(yè),有大數(shù)據(jù)開發(fā)、數(shù)據(jù)倉庫、ETL或數(shù)據(jù)庫開發(fā)經(jīng)驗;
2. 熟悉Hadoop生態(tài)系統(tǒng),如HDFS、Hive、Spark、Scala、Kafka、Flink;
3. 熟悉數(shù)據(jù)倉庫領域知識和管理技能,包括但不局限于:數(shù)據(jù)治理、元數(shù)據(jù)管理、數(shù)據(jù)質量、性能調優(yōu)等,熟悉倉庫模型設計與ETL開發(fā)經(jīng)驗。
4. 掌握Kimball的維度建模設計方法,具備海量數(shù)據(jù)加工處理(ETL)相關經(jīng)驗,靈活運用SQL實現(xiàn)海量數(shù)據(jù)ETL加工處理,具備良好的SQL性能調優(yōu)能力
5. 熟悉MySQL, Clickhouse, ElasticSearch, Redis等數(shù)據(jù)庫;
6. 對數(shù)據(jù)庫結構系統(tǒng)和數(shù)據(jù)挖掘有深刻的認識,具備數(shù)據(jù)工程、數(shù)據(jù)管道和數(shù)據(jù)治理技能;
7. 外加一門編程語言。 java。scala python都行
8.積極上進,樂于學習,有團隊溝通協(xié)作能力;具有較強的溝通能力、邏輯思維能力以及良好的團隊合作精神;
9.嚴密的邏輯思維和扎實的數(shù)據(jù)分析能力,能夠敏銳地從數(shù)據(jù)中發(fā)現(xiàn)總結問題,思維活躍,具備創(chuàng)新意識,持續(xù)學習能力強;
10.有如下經(jīng)驗者優(yōu)先:機器學習項目開發(fā)經(jīng)驗或者數(shù)據(jù)建模經(jīng)驗。
招聘要求:
1、統(tǒng)招???div> 2、3-5年工作相關工作經(jīng)驗優(yōu)先
3、溝通能力高于平均水平
4、學習能力高于平均水平
ps最好是使用過大部分大數(shù)據(jù)相關組件,并可以對這些組件做運維優(yōu)先考慮。