二、職責描述:
1. 參與實時數(shù)倉的架構設計與搭建,保障平臺具備高可用性、高性能以及可擴展性,滿足公司不斷增長的數(shù)據處理需求;
2. 根據業(yè)務需求進行合理建模并進行大數(shù)據作業(yè)的開發(fā),需保證數(shù)據的完整性、一致性和安全性;
3. ?對實時大數(shù)據平臺進行持續(xù)優(yōu)化與維護,及時解決出現(xiàn)的性能瓶頸、數(shù)據質量等問題;
4. 對部門內的項目工作進行支持,并保障在實施過程中的安全、規(guī)范性,并記錄必要文檔。
三、任職要求:
1. 本科及以上學歷,計算機及相關專業(yè),擁有3年以上實時大數(shù)據開發(fā)經驗,能夠獨立完成從數(shù)據采集到分析的全流程工作;
2. 精通Java語言,具備扎實的編程基礎。精通SQL,熟悉Python、Shell、Scala等一種以上語言;
3. 熟悉常用的設計模式,對平臺化建設有一定的理解,在日常中有快速定位BUG、解決問題的能力;
4. 熟悉Kafka/Flink/Spark/Trino/Doris等大數(shù)據組件,能夠熟練進行應用開發(fā)和性能調優(yōu)。有華為MRS大數(shù)據平臺使用經驗或者Hudi數(shù)據湖開發(fā)經驗者優(yōu)先;
5. 強烈的責任心與主動性,對所負責工作有owner意識,并能自我驅動成長;具備優(yōu)秀的自驅能力,主動思考項目進度關鍵節(jié)點和風險點,積極向上級領導匯報工作進度和風險解決方案;
6. 具備良好的抗壓能力、溝通能力和團隊精神,具有獨立完成工作的能力,具備跨部門溝通協(xié)作能力,有基金證券類行業(yè)、相關IT產商工作經驗者優(yōu)先;
7. 具備良好的工作習慣,如wiki記錄、編碼習慣、編碼規(guī)范、注釋準確。