崗位：數(shù)據(jù)工程師
主要職責：
1、設(shè)計并優(yōu)化數(shù)據(jù)架構(gòu)，包括數(shù)據(jù)倉庫、數(shù)據(jù)湖、數(shù)據(jù)流等，確保數(shù)據(jù)的可擴展性、可靠性和安全性。
2、開發(fā)并維護數(shù)據(jù)管道，包括數(shù)據(jù)的抽取（ETL/ELT）、轉(zhuǎn)換、加載過程，實現(xiàn)數(shù)據(jù)的自動化流動和集成。
3、制定并執(zhí)行數(shù)據(jù)質(zhì)量策略，監(jiān)控數(shù)據(jù)質(zhì)量，發(fā)現(xiàn)并解決數(shù)據(jù)不一致性、錯誤等問題，確保數(shù)據(jù)的準確性和完整性。
4、根據(jù)業(yè)務(wù)需求和數(shù)據(jù)特性，選擇合適的存儲解決方案（如關(guān)系型數(shù)據(jù)庫、NoSQL數(shù)據(jù)庫、分布式存儲系統(tǒng)等），并優(yōu)化數(shù)據(jù)索引和查詢性能。
5、確保數(shù)據(jù)的安全性和合規(guī)性，遵守相關(guān)法律法規(guī)和公司政策，實施數(shù)據(jù)加密、訪問控制、審計等措施。
6、對數(shù)據(jù)處理和查詢過程進行性能調(diào)優(yōu)，提升數(shù)據(jù)處理的效率和響應(yīng)速度。
7、為數(shù)據(jù)分析師、數(shù)據(jù)科學(xué)家等團隊成員提供技術(shù)支持，編寫數(shù)據(jù)架構(gòu)、數(shù)據(jù)管道等相關(guān)文檔，促進知識共享和團隊協(xié)作。
8、關(guān)注數(shù)據(jù)工程領(lǐng)域的新技術(shù)、新工具和新方法，評估其適用性，并推動在團隊中的應(yīng)用。
任職要求：
本科及以上學(xué)歷，計算機科學(xué)、信息技術(shù)、數(shù)學(xué)、統(tǒng)計學(xué)等相關(guān)專業(yè)畢業(yè)。
具備3年以上數(shù)據(jù)分析或相關(guān)領(lǐng)域工作經(jīng)驗，有政府、公安、反欺詐、金融風(fēng)控等領(lǐng)域經(jīng)驗者優(yōu)先。
專業(yè)技能：
1.熟練掌握至少一種編程語言（如Java、Python、Scala等），具備良好的編程能力。
2.熟悉數(shù)據(jù)倉庫和數(shù)據(jù)湖技術(shù)，了解Hadoop、Spark、Hive、Kafka等大數(shù)據(jù)處理框架。
3.熟悉關(guān)系型數(shù)據(jù)庫（如MySQL、Oracle、PostgreSQL）和非關(guān)系型數(shù)據(jù)庫（如MongoDB、Redis、Cassandra）的使用。
4.了解數(shù)據(jù)ETL/ELT過程，熟悉相關(guān)工具和框架（如Apache NiFi、Talend、Informatica等）。
4、具備數(shù)據(jù)架構(gòu)設(shè)計能力，能夠根據(jù)業(yè)務(wù)需求設(shè)計合理的數(shù)據(jù)架構(gòu)和數(shù)據(jù)模型。
5、具備強大的問題解決能力，能夠快速定位并解決數(shù)據(jù)處理過程中遇到的問題。
6、良好的溝通與協(xié)作能力，能夠與團隊成員、業(yè)務(wù)部門和其他利益相關(guān)者有效溝通，共同推動項目進展。
7、具備持續(xù)學(xué)習(xí)的能力，緊跟技術(shù)發(fā)展趨勢，不斷提升自己的技能水平。
8、對數(shù)據(jù)質(zhì)量負責，具備較強的責任心和抗壓能力，能夠在高強度的工作環(huán)境下保持高效的工作狀態(tài)。