一、崗位職責(zé)
1、負(fù)責(zé)大數(shù)據(jù)分析需求設(shè)計(jì)和開(kāi)發(fā)，承擔(dān)數(shù)據(jù)抽取、清洗、實(shí)時(shí)統(tǒng)計(jì)及離線(xiàn)數(shù)據(jù)處理等程序開(kāi)發(fā)
2、參與或負(fù)責(zé)大數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)、開(kāi)發(fā)、維護(hù)，通過(guò)數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)治理體系有效管理和組織PB級(jí)數(shù)據(jù)
3、參與或負(fù)責(zé)數(shù)據(jù)服務(wù)和大數(shù)據(jù)產(chǎn)品研發(fā)，通過(guò)對(duì)數(shù)據(jù)理解，發(fā)掘數(shù)據(jù)價(jià)值
4、負(fù)責(zé)大數(shù)據(jù)存算分離方案的技術(shù)研究與開(kāi)發(fā)實(shí)現(xiàn)，包括特性設(shè)計(jì)、開(kāi)發(fā)、測(cè)試、上線(xiàn)、維護(hù)，能夠devops全棧；
5、負(fù)責(zé)維護(hù)大數(shù)據(jù)解決方案的跟進(jìn)，基于用戶(hù)的體驗(yàn)和數(shù)據(jù)持續(xù)進(jìn)行優(yōu)化，并對(duì)現(xiàn)網(wǎng)平臺(tái)的質(zhì)量負(fù)責(zé)
二、任職要求
1、有大數(shù)據(jù)系統(tǒng)架構(gòu)設(shè)計(jì)開(kāi)發(fā)、重大模塊設(shè)計(jì)及開(kāi)發(fā)經(jīng)驗(yàn)，對(duì)大數(shù)據(jù)的技術(shù)趨勢(shì)和SOA模式、微服務(wù)模式有較深理解
2、掌握C++、Java、Python等一種或多種編程預(yù)研，熟悉Linux基本操作和Shell腳本使用
3、了解數(shù)據(jù)倉(cāng)庫(kù)建設(shè)理論與方法、具備豐富的實(shí)踐經(jīng)驗(yàn)
4、精通SQL，能夠處理海量數(shù)據(jù)，有較好SQL性能調(diào)優(yōu)經(jīng)驗(yàn)，熟悉hive、druid、mysql、pg等至少一種數(shù)據(jù)庫(kù)
5、熟練使用Storm、Hadoop、Spark、HDFS、Hbase、Kafka、ElasticSearch、solr等