更新于 3月6日

數(shù)據(jù)開發(fā)工程師

6000-10000元
  • 南昌西湖區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)治理Java數(shù)據(jù)倉庫數(shù)據(jù)建模SqlHadoopFlinkSparkAPACHE ATLASCOLLIBRAALATION
一、崗位職責(zé)
1、數(shù)據(jù)治理體系建設(shè)與優(yōu)化
負(fù)責(zé)設(shè)計、開發(fā)和維護(hù)公司數(shù)據(jù)治理平臺及工具(如元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量監(jiān)控、數(shù)據(jù)血緣分析等)。
制定并落地數(shù)據(jù)治理規(guī)范,包括數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)分類分級、數(shù)據(jù)生命周期管理策略。
構(gòu)建數(shù)據(jù)質(zhì)量評估模型,通過規(guī)則引擎實(shí)現(xiàn)數(shù)據(jù)質(zhì)量自動化檢查與修復(fù)。
2、數(shù)據(jù)質(zhì)量管理與監(jiān)控
設(shè)計數(shù)據(jù)質(zhì)量規(guī)則(如唯一性、完整性、一致性校驗(yàn)),開發(fā)數(shù)據(jù)質(zhì)量檢測腳本(SQL)。
實(shí)時監(jiān)控數(shù)據(jù)質(zhì)量告警,定位問題根源(如ETL流程異常、源系統(tǒng)數(shù)據(jù)缺陷),推動相關(guān)團(tuán)隊修復(fù)。
定期生成《數(shù)據(jù)健康度報告》,提出治理優(yōu)化建議(如冗余數(shù)據(jù)清理、關(guān)鍵字段標(biāo)準(zhǔn)化)。
3、數(shù)據(jù)安全與合規(guī)保障
實(shí)施數(shù)據(jù)脫敏、加密、權(quán)限控制方案(如基于RBAC模型的動態(tài)授權(quán))。
管理數(shù)據(jù)血緣關(guān)系,支持?jǐn)?shù)據(jù)溯源與影響分析(如Schema變更影響評估)。
4、元數(shù)據(jù)管理與數(shù)據(jù)目錄開發(fā)
構(gòu)建企業(yè)級元數(shù)據(jù)倉庫,整合多源系統(tǒng)元數(shù)據(jù)(數(shù)據(jù)庫表結(jié)構(gòu)、API接口文檔、BI報表邏輯)。
開發(fā)數(shù)據(jù)目錄(Data Catalog)工具,支持業(yè)務(wù)人員自助檢索數(shù)據(jù)資產(chǎn),提升數(shù)據(jù)發(fā)現(xiàn)效率。
維護(hù)數(shù)據(jù)字典與業(yè)務(wù)術(shù)語表,確保技術(shù)元數(shù)據(jù)與業(yè)務(wù)含義的一致性。
5、跨部門協(xié)作與項(xiàng)目管理
聯(lián)合數(shù)據(jù)開發(fā)、業(yè)務(wù)分析、安全團(tuán)隊,推動數(shù)據(jù)治理標(biāo)準(zhǔn)在項(xiàng)目中的落地(如需求評審嵌入治理規(guī)則)。
主導(dǎo)數(shù)據(jù)治理專項(xiàng)(如主數(shù)據(jù)管理、歷史數(shù)據(jù)遷移清洗),協(xié)調(diào)資源并跟蹤項(xiàng)目里程碑。
6、技術(shù)研究與持續(xù)優(yōu)化
調(diào)研行業(yè)最新數(shù)據(jù)治理技術(shù)(如Data Mesh、AI驅(qū)動的數(shù)據(jù)清洗),推動工具鏈升級。
優(yōu)化數(shù)據(jù)治理流程,通過自動化減少人工干預(yù)(如自動生成數(shù)據(jù)質(zhì)量報告)
二、任職要求
1、精通SQL、Java,熟悉大數(shù)據(jù)棧(Hadoop/Spark/Flink)。
2、掌握數(shù)據(jù)治理工具(如Apache Atlas、Collibra、Alation)或自研平臺開發(fā)經(jīng)驗(yàn)。
3、熟悉數(shù)據(jù)建模(維度建模、數(shù)據(jù)倉庫設(shè)計)與ETL開發(fā)流程。
4、了解數(shù)據(jù)安全技術(shù)(如Kerberos認(rèn)證、TDE加密)。
5、3年以上數(shù)據(jù)治理、數(shù)據(jù)開發(fā)或數(shù)據(jù)架構(gòu)經(jīng)驗(yàn),主導(dǎo)過企業(yè)級數(shù)據(jù)治理項(xiàng)目,有政務(wù)、金融等高數(shù)據(jù)復(fù)雜度行業(yè)經(jīng)驗(yàn)者優(yōu)先。

工作地點(diǎn)

金源大廈

職位發(fā)布者

梁潔/人事經(jīng)理

昨日活躍
立即溝通
公司Logo南昌中展數(shù)智科技有限公司
公司簡介中興軟件技術(shù)(南昌)有限公司成立于2005年6月,是由中國最大的上市電信設(shè)備制造商——中興通訊股份有限公司、深圳中興發(fā)展有限公司和南昌大學(xué)合資成立,是江西省重點(diǎn)引進(jìn)的高新技術(shù)企業(yè),也是江西省目前唯一通過CMM5級認(rèn)證的軟件企業(yè)。中興軟件致力于為客戶提供全方位的IT服務(wù)及行業(yè)解決方案,業(yè)務(wù)范圍涵蓋信息化解決方案、咨詢服務(wù)、ERP系統(tǒng)開發(fā)及實(shí)施、IT維護(hù)等服務(wù),與多家著名企業(yè)有著廣泛而深入的合作,是值得信賴的IT綜合服務(wù)提供商和戰(zhàn)略合作伙伴。公司在政企行業(yè)信息化系統(tǒng)軟件及移動終端類軟件的開發(fā)\測試、通訊工程服務(wù)、IT技術(shù)培訓(xùn)、電子商務(wù)、電子政務(wù)、智慧城市、智慧校園建設(shè)、業(yè)務(wù)軟件&云計算解決方案等領(lǐng)域有著豐富的成功經(jīng)驗(yàn)。公司現(xiàn)有員工800多人,以南昌為總部,在深圳、上海、南京、西安、燕郊、成都等地設(shè)立有分支機(jī)構(gòu)或研發(fā)中心,以保證公司在國內(nèi)大部分地區(qū)擁有成熟和迅速的本地化交付服務(wù)能力。企業(yè)核心價值觀互相尊重,忠于中興事業(yè)。精誠服務(wù),疑聚顧客身上。拼搏創(chuàng)新,創(chuàng)造中興品牌。科學(xué)管理,提高企業(yè)效益。
公司主頁