實(shí)時(shí)大數(shù)據(jù)計(jì)算開發(fā)工程師
4.5-7.5萬元/月職位描述
1深度參與阿里云自研產(chǎn)品MaxCompute離線與近實(shí)時(shí)數(shù)倉一體化架構(gòu)的規(guī)劃與開發(fā),全面支持阿里集團(tuán)內(nèi)部絕大多數(shù)大數(shù)據(jù)處理需求及外部云端大規(guī)模數(shù)據(jù)業(yè)務(wù)。
2主導(dǎo)MaxComputeSQL引擎在增量導(dǎo)入、更新、存儲(chǔ)、查詢與分析等核心功能模塊的整體框架設(shè)計(jì)、實(shí)現(xiàn)及性能調(diào)優(yōu)工作。
3重點(diǎn)投入MaxCompute近實(shí)時(shí)流式寫入能力與OLAP查詢分析體系的架構(gòu)設(shè)計(jì)、技術(shù)攻關(guān)及效率優(yōu)化。
4積極參與MaxCompute在近實(shí)時(shí)數(shù)倉場景中湖倉融合及開源生態(tài)整合架構(gòu)的技術(shù)研發(fā)與系統(tǒng)優(yōu)化。
職位要求
1具有扎實(shí)的編程基礎(chǔ)(Java/C++等)和計(jì)算機(jī)理論功底(數(shù)據(jù)庫、數(shù)據(jù)倉庫、操作系統(tǒng)等相關(guān)領(lǐng)域)
2熟悉并實(shí)際參與過數(shù)據(jù)倉庫、數(shù)據(jù)庫或?qū)崟r(shí)計(jì)算引擎等相關(guān)系統(tǒng)的架構(gòu)設(shè)計(jì)與開發(fā)工作
3有HUDI、Iceberg、DeltaLake等開源數(shù)據(jù)湖引擎或湖倉一體架構(gòu)實(shí)踐經(jīng)驗(yàn)者優(yōu)先考慮
4熟悉Flink、Doris、Starrock、Presto等流式或?qū)崟r(shí)分析引擎并具備相關(guān)開發(fā)經(jīng)驗(yàn)者優(yōu)先錄用