更新于 2月22日

數(shù)據(jù)開發(fā)

1-1.2萬·13薪
  • 汕頭龍湖區(qū)
  • 3-5年
  • 大專
  • 全職
  • 招1人

職位描述

數(shù)據(jù)架構(gòu)數(shù)據(jù)挖掘數(shù)據(jù)倉庫SqlPythonC語言FlinkSparkHadoop
崗位職責(zé):
1.設(shè)計并實施企業(yè)級數(shù)據(jù)資產(chǎn)管理體系,包括元數(shù)據(jù)管理、數(shù)據(jù)血緣追蹤、數(shù)據(jù)質(zhì)量監(jiān)控與數(shù)據(jù)生命周期管理。
2.搭建數(shù)據(jù)資產(chǎn)目錄平臺,支持業(yè)務(wù)部門快速發(fā)現(xiàn)、理解與調(diào)用高價值數(shù)據(jù)資源。
3.負(fù)責(zé)多源異構(gòu)數(shù)據(jù)(結(jié)構(gòu)化/半結(jié)構(gòu)化/非結(jié)構(gòu)化)的清洗、轉(zhuǎn)換與標(biāo)準(zhǔn)化處理,開發(fā)高效可靠的ETL流程。
4.優(yōu)化數(shù)據(jù)預(yù)處理性能,解決數(shù)據(jù)傾斜、臟數(shù)據(jù)過濾等復(fù)雜問題,保障數(shù)據(jù)產(chǎn)出質(zhì)量與時效性。
5.參與數(shù)倉分層架構(gòu)設(shè)計(ODS/DWD/DWS/ADS),基于業(yè)務(wù)場景完成維度建模與事實表設(shè)計。
6.維護(hù)Hive/HBase/ClickHouse等存儲組件的性能調(diào)優(yōu)與分區(qū)策略,支撐PB級數(shù)據(jù)高效查詢。
7.構(gòu)建企業(yè)數(shù)據(jù)服務(wù)API開放平臺,封裝數(shù)據(jù)資產(chǎn)為標(biāo)準(zhǔn)化接口(RESTful/GraphQL),支持內(nèi)外部系統(tǒng)調(diào)用。
8.實現(xiàn)API網(wǎng)關(guān)(如Kong/Spring Cloud Gateway)的流量控制、鑒權(quán)(OAuth2.0/JWT)與監(jiān)控告警功能。
9.與數(shù)據(jù)產(chǎn)品經(jīng)理、分析師協(xié)作,將業(yè)務(wù)需求轉(zhuǎn)化為可執(zhí)行的技術(shù)方案,推動數(shù)據(jù)服務(wù)在風(fēng)控、運營等場景的落地。
10.制定數(shù)據(jù)開發(fā)規(guī)范,編寫技術(shù)文檔并推動團(tuán)隊代碼質(zhì)量提升。
崗位要求:
1.精通大數(shù)據(jù)生態(tài)技術(shù)棧:Hadoop/Spark/Flink/Kafka等組件原理與調(diào)優(yōu),熟悉OLAP引擎(Doris/StarRocks優(yōu)先)。
2.熟練使用SQL并掌握至少一種編程語言(Java/Scala/Python),具備Shell腳本開發(fā)能力。
3.熟悉數(shù)據(jù)倉庫建模方法論(Kimball/Inmon),有復(fù)雜ETL任務(wù)開發(fā)經(jīng)驗(工具如DataX/NiFi/Airflow)。
4.3年以上大數(shù)據(jù)開發(fā)經(jīng)驗,至少主導(dǎo)過1個完整的數(shù)據(jù)中臺或數(shù)據(jù)資產(chǎn)管理系統(tǒng)建設(shè)。
5.有API開放平臺開發(fā)經(jīng)驗,熟悉Swagger/Postman等接口管理工具,了解微服務(wù)架構(gòu)設(shè)計。
6.熟悉數(shù)據(jù)治理框架(如Apache Atlas),了解數(shù)據(jù)安全合規(guī)(GDPR/數(shù)據(jù)脫敏)要求。
7.具備云原生數(shù)據(jù)開發(fā)經(jīng)驗(AWS Redshift/Azure Data Factory/阿里云DataWorks)。
8.熟悉數(shù)據(jù)湖架構(gòu)(Delta Lake/Hudi/Iceberg)或?qū)崟r數(shù)倉建設(shè)。
9.有數(shù)據(jù)血緣分析、數(shù)據(jù)質(zhì)量自動化檢測工具開發(fā)經(jīng)驗。
10.強(qiáng)烈的數(shù)據(jù)敏感性,能通過數(shù)據(jù)邏輯反推業(yè)務(wù)問題本質(zhì);優(yōu)秀的跨團(tuán)隊溝通能力,能夠協(xié)調(diào)多方資源推進(jìn)復(fù)雜項目。

工作地點

華潤大廈南塔22樓

職位發(fā)布者

黃女士/HR

剛剛活躍
立即溝通
公司Logo廣東云跨易網(wǎng)絡(luò)科技有限公司
廣東云跨易網(wǎng)絡(luò)科技有限公司是一家專注于跨境電商行業(yè)的企業(yè)管理咨詢技術(shù)服務(wù)公司,致力于為全球跨境電商企業(yè)提供一站式的數(shù)字化解決方案。我們擁有專業(yè)的軟件開發(fā)團(tuán)隊和深厚的行業(yè)經(jīng)驗,通過自主研發(fā)的 ERP、MES、WMS、OMS、PLM、BI、MRP、OA、HR、SCRM、SRM等系統(tǒng),以及自建的跨境分銷平臺,為客戶提供高效、智能、全面的業(yè)務(wù)管理工具。企業(yè)愿景:成為全球領(lǐng)先的跨境電商科技服務(wù)提供商,推動跨境電商行業(yè)數(shù)字化轉(zhuǎn)型。企業(yè)使命:通過創(chuàng)新的技術(shù)和優(yōu)質(zhì)的服務(wù),幫助跨境電商企業(yè)實現(xiàn)高效、智能、全球化的運營。核心優(yōu)勢:為企業(yè)量身定制成長路徑助力實現(xiàn)跨越式發(fā)展·專業(yè)團(tuán)隊,擁有經(jīng)驗豐富的軟件開發(fā)團(tuán)隊,具備深厚的行業(yè)知識和技術(shù)實力。集團(tuán)規(guī)模約2000人+,云跨易擁有百人以上的開發(fā)團(tuán)隊,發(fā)展平臺廣,深耕專業(yè)領(lǐng)域,助力出海企業(yè)一站式服務(wù)與支持。
公司主頁