更新于 2025-03-18 01:59:59

分布式框架工程師(ray)(J10751)

2.5-3萬
  • 北京豐臺區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招3人

雇員點評標簽

  • 工作環(huán)境好
  • 同事很nice
  • 氛圍活躍
  • 團隊執(zhí)行強
  • 準時發(fā)工資
  • 人際關系好

職位描述

JavaPythonGo分布式技術云計算架構公有云訓練平臺RAY
崗位職責:
1、打造業(yè)界領先的大數據+AI云平臺產品,參與公司內基于Ray的分布式計算場景的方案設計以及研發(fā),包括機器學習、圖等場景,滿足大模型時代的數據處理及應用需求;
2、參與云平臺的架構設計和研發(fā),包括數據處理、資源調度、模型/算子管理、模型部署服務等;
3、基于K8S體系構建大規(guī)模任務處理系統(tǒng),并負責GPU、CPU等多種異構資源的編排調度優(yōu)化;
4、參與Ray內核/Kuberay以及相關上層生態(tài)框架的功能開發(fā)&性能優(yōu)化;
5、參與Ray在K8S上的彈性/潮汐資源集群穩(wěn)定性/可觀測性/平臺化對接等能力建設;
6、負責充分利用各種異構計算(GPU、CPU、其他異構硬件)、存儲(各種云存儲)、網絡(VPC、RDMA)等資源,支持主流的PyTorch、Megatron、TensorFlow等訓練框架,支持大規(guī)模 LLM 預訓練、Finetuning、強化學習等各種訓練范式,支持大模型、生信計算等各種業(yè)務場景下算法需求;
7、負責訓練系統(tǒng)的產品化落地,打造算法工程師友好的、體驗一流的公有云訓練平臺;
8、完成領導交辦的其他工作事項。
任職要求:
1、擁有扎實的計算機基礎和良好的編程能力,熟練掌握Linux環(huán)境下的Go/Java/Python等1-2種語言;
2、熟悉K8S工作原理、云原生AI/大數據生態(tài)常用的開源組件,或熟悉RAY、Spark等分布式數據處理框架;
3、有深度學習、大模型、LLM應用等平臺開發(fā)經驗,或熟悉LangChain、Dify等開源Agent框架;
4、熟悉大模型領域數據處理流程/算法Kubernetes 架構和生態(tài);
5、熟悉 Docker/Containerd/Kata 等容器技術,有豐富的云原生機器學習系統(tǒng)實踐和開發(fā)經驗;
加分項:
1、有機器學習、大數據平臺的工程架構落地經驗,熟練掌握常見的分布式訓練、計算框架(pytorch/tensorflow/ray/spark/flink)原理及工程實現,熟悉GPU、大模型相關軟硬件技術棧;
2、有計算產品落地經驗(最好是tob、tog paas/saas 項目或公有云項目,深度使用經驗也可行);
3、熟悉NLP、CV相關的算法和技術,熟悉大模型訓練、RL算法者優(yōu)先;
4、有以下某一方向領域的經驗:CUDA,RDMA,AI Infrastructure,HW/SW Co-Design,High Performance Computing,ML Hardware Architecture (GPU, Accelerators, Networking),ML for System,Distributed Storage。

工作地點

漢威國際廣場4區(qū)3號樓

職位發(fā)布者

黃春霞/人事經理

昨日活躍
立即溝通
公司Logo南威軟件股份有限公司
南威軟件集團成立于2002年,行政總部設立于福建泉州,在北京設立全球業(yè)務和運營總部,是全國政務服務龍頭企業(yè)、行業(yè)領先的社會治理科技公司,擁有超百家全資、控股、參股公司,其中包括太極數智、人大金倉、四方偉業(yè)、安巽科技、北京友虹等行業(yè)標桿企業(yè)。南威軟件是福建省首家在上海主板上市的網信企業(yè)(股票代碼:603636),全國第993家主板上市公司,是國家數字政府建設聯盟常任副理事長單位、互聯網+政務服務電子證照國家標準制定的組長單位、國家電子文件管理推進聯盟副理事長單位、國家智慧城市標準化總體組十家理事單位之一、福建省軟件行業(yè)協會會長單位,聚焦發(fā)展數字政府的政務服務、公共安全、城市管理等主營業(yè)務,深化發(fā)展社會服務運營,創(chuàng)新發(fā)展行業(yè)實用型芯片與傳感器產業(yè),服務于政府數字化轉型、助力國家治理體系和治理能力現代化。公司擁有九項行業(yè)頂級資質,包括國家信息系統(tǒng)建設和服務能力評估四級(國內最高級別)、涉密信息系統(tǒng)集成甲級、CCRC信息安全服務資質一級(安全集成一級、安全運維一級、軟件安全開發(fā)一級)、國家建筑智能化系統(tǒng)設計專項甲級、國家電子與智能化工程專業(yè)承包壹級、國家安防工程企業(yè)設計施工維護能力壹級、CMMI-5國際軟件成熟度認證、ITSS運維服務能力成熟度壹級、國家規(guī)劃布局內重點軟件企業(yè)(旗下三家)等,并取得了軍工保密資格、國軍標質量管理體系、武器裝備科研生產許可備案等軍工資質,是行業(yè)內資質最高最全的企業(yè)之一。
公司主頁