更新于 2月13日

大數(shù)據(jù)工程師

1.5-2萬
  • 北京朝陽區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)架構(gòu)HadoopSpark數(shù)據(jù)治理
公司名稱:北京市紫恒星科技發(fā)展有限公司

崗位描述:

根據(jù)平臺數(shù)據(jù)需求,負(fù)責(zé)設(shè)計(jì)、開發(fā)并維護(hù)高效的數(shù)據(jù)處理流程,保障數(shù)據(jù)結(jié)果的及時(shí)性、準(zhǔn)確性,具體包括:

1、數(shù)據(jù)架構(gòu)設(shè)計(jì):根據(jù)業(yè)務(wù)及數(shù)據(jù)需求,設(shè)計(jì)并優(yōu)化大數(shù)據(jù)存儲(chǔ)、處理與分析的架構(gòu),確保數(shù)據(jù)的高效性、可擴(kuò)展性和安全性。

2、數(shù)據(jù)處理清洗:開發(fā)高效的數(shù)據(jù)處理流程,包括數(shù)據(jù)抽取、轉(zhuǎn)換、加載(ETL)及數(shù)據(jù)清洗,保障數(shù)據(jù)質(zhì)量。

3、系統(tǒng)開發(fā)與維護(hù):參與大數(shù)據(jù)平臺相關(guān)系統(tǒng)的開發(fā)、測試、部署及日常維護(hù),確保系統(tǒng)穩(wěn)定運(yùn)行。

4、技術(shù)創(chuàng)新與研究:跟蹤大數(shù)據(jù)領(lǐng)域最新技術(shù)動(dòng)態(tài),探索新技術(shù)在科技成果轉(zhuǎn)化數(shù)據(jù)中的應(yīng)用,不斷提升數(shù)據(jù)處理與分析能力。

任職要求:

1、教育背景:計(jì)算機(jī)、自動(dòng)化、人工智能相關(guān)專業(yè)本科及以上學(xué)歷,具備扎實(shí)的計(jì)算機(jī)科學(xué)基礎(chǔ)。

2、專業(yè)技能:精通Hadoop、Spark等大數(shù)據(jù)處理框架,熟悉Hive、HBase、Kafka等大數(shù)據(jù)組件。熟練掌握SQL及至少一種編程語言(如Python、Java、Scala)。了解數(shù)據(jù)倉庫設(shè)計(jì)原理,有數(shù)據(jù)建模經(jīng)驗(yàn)者優(yōu)先。熟悉機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等算法。

3、工作經(jīng)驗(yàn):具有2年以上大數(shù)據(jù)工程或相關(guān)領(lǐng)域工作經(jīng)驗(yàn),有期刊論文數(shù)據(jù)、知識產(chǎn)權(quán)數(shù)據(jù)、行業(yè)大數(shù)據(jù)等類似數(shù)據(jù)加工處理經(jīng)驗(yàn)者優(yōu)先。

4、團(tuán)隊(duì)合作:良好的團(tuán)隊(duì)合作精神和溝通能力,能夠與跨部門團(tuán)隊(duì)有效協(xié)作。

5、專業(yè)素養(yǎng):注重細(xì)節(jié),對數(shù)據(jù)質(zhì)量有嚴(yán)格要求,能夠確保數(shù)據(jù)處理的準(zhǔn)確性和時(shí)效性。

工作地點(diǎn)

北京創(chuàng)業(yè)大廈B座

職位發(fā)布者

劉女士/人力資源經(jīng)理

立即溝通
北京首都科技發(fā)展集團(tuán)有限公司
北京首都科技發(fā)展集團(tuán)有限公司是北京市科學(xué)技術(shù)委員會(huì)按照北京市委市政府部署組建的科技投資服務(wù)集團(tuán)。集團(tuán)專注于科技成果轉(zhuǎn)化從“0”到“1”階段,探索建立跨越科技成果轉(zhuǎn)化“死亡谷”的原始創(chuàng)新投資機(jī)制,以全球性視野,聚焦影響未來5-10年的“硬科技”原始創(chuàng)新,推動(dòng)人工智能、生物醫(yī)藥、新材料等領(lǐng)域國內(nèi)“第一”或“唯一”的顛覆性、創(chuàng)造性、引領(lǐng)性的重大科技突破項(xiàng)目在京落地。
公司主頁