招聘崗位：大數(shù)據(jù)開(kāi)發(fā)

專業(yè)要求： 計(jì)算機(jī)科學(xué)、軟件工程或相關(guān)專業(yè)

工作地點(diǎn)：北京

學(xué)歷要求：本科及以上

工作職責(zé)：1、數(shù)據(jù)采集與傳輸：

使用Kafka和Netty構(gòu)建高吞吐、低延遲的數(shù)據(jù)采集

和傳輸系統(tǒng)。

設(shè)計(jì)和優(yōu)化數(shù)據(jù)管道，確保數(shù)據(jù)的實(shí)時(shí)性和可靠

性。

2、數(shù)據(jù)存儲(chǔ)與管理：

使用HBase、TiDB、ClickHouse、Doris、 StarRocks等數(shù)據(jù)庫(kù)進(jìn)

行數(shù)據(jù)存儲(chǔ)和管理。

設(shè)計(jì)和優(yōu)化數(shù)據(jù)存儲(chǔ)方案，確保數(shù)據(jù)的高效查詢

和分析。

3、數(shù)據(jù)計(jì)算與處理：

使用Spark和Flink進(jìn)行大規(guī)模數(shù)據(jù)的批處理和流

處理。

開(kāi)發(fā)和優(yōu)化數(shù)據(jù)處理算法，提升計(jì)算性能和效率。

4、系統(tǒng)優(yōu)化與監(jiān)控：

對(duì)現(xiàn)有系統(tǒng)進(jìn)行性能調(diào)優(yōu)，解決瓶頸問(wèn)題。

設(shè)計(jì)和實(shí)施系統(tǒng)監(jiān)控方案，確保系統(tǒng)的穩(wěn)定運(yùn)行。

5、團(tuán)隊(duì)協(xié)作與文檔編寫(xiě)：

與團(tuán)隊(duì)成員緊密合作，參與技術(shù)討論和代碼評(píng)審。

編寫(xiě)技術(shù)文檔，記錄系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn)細(xì)節(jié)。

職位要求：1、教育背景：

計(jì)算機(jī)科學(xué)、軟件工程或相關(guān)專業(yè)本科及以上學(xué)歷。

2、技術(shù)技能：

精通Kafka和Netty，具備大規(guī)模數(shù)據(jù)采集和傳輸系統(tǒng)的開(kāi)發(fā)經(jīng)

驗(yàn)。

熟悉HBase、TiDB、ClickHouse、Doris、StarRocks等數(shù)據(jù)

庫(kù)，具備數(shù)據(jù)存儲(chǔ)和管理的實(shí)際經(jīng)驗(yàn)。

精通Spark和Flink，具備大規(guī)模數(shù)據(jù)批處理和流處理的實(shí)際經(jīng)

驗(yàn)。

熟悉分布式系統(tǒng)原理，具備系統(tǒng)性能調(diào)優(yōu)和故障排查的能力。

3、編程語(yǔ)言：

精通Java/Scala/Python等編程語(yǔ)言，具備良好的編碼習(xí)慣。

4、工具與框架：

熟悉Linux操作系統(tǒng)，具備Shell腳本編寫(xiě)能力。

熟悉常用的開(kāi)發(fā)工具和框架，如Maven、Git、Docker等。

5、軟技能：

有大數(shù)據(jù)平臺(tái)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)。

具備良好的溝通能力和團(tuán)隊(duì)協(xié)作精神。

具備較強(qiáng)的學(xué)習(xí)能力和問(wèn)題解決能力。

薪資待遇：12K~15K