大數(shù)據(jù)實時數(shù)倉后端高級開發(fā)
4.5-7.5萬元/月職位描述
1深度參與阿里云自研產(chǎn)品MaxCompute離線與近實時數(shù)倉一體化架構(gòu)的方案設(shè)計與開發(fā)工作,全面支持阿里集團(tuán)內(nèi)部絕大多數(shù)大數(shù)據(jù)處理需求及外部云上大數(shù)據(jù)業(yè)務(wù)場景。
2主導(dǎo)MaxComputeSQL引擎在增量數(shù)據(jù)導(dǎo)入、更新、存儲、查詢與分析等核心功能模塊的整體框架設(shè)計、研發(fā)實施及性能調(diào)優(yōu)。
3主導(dǎo)MaxCompute近實時流式寫入能力與OLAP查詢分析體系的整體架構(gòu)設(shè)計、功能實現(xiàn)及性能提升。
4參與MaxCompute在近實時數(shù)倉典型應(yīng)用場景下湖倉融合及開源技術(shù)整合的整體架構(gòu)設(shè)計、開發(fā)落地與持續(xù)優(yōu)化。
職位要求
1具備扎實的編程基礎(chǔ)(如Java/C++等)和計算機(jī)基礎(chǔ)知識(包括數(shù)據(jù)庫、數(shù)據(jù)倉庫、操作系統(tǒng)等相關(guān)領(lǐng)域)
2熟悉并有實際經(jīng)驗參與數(shù)據(jù)倉庫、數(shù)據(jù)庫系統(tǒng)或?qū)崟r計算引擎等系統(tǒng)架構(gòu)的設(shè)計與開發(fā)
3有HUDI、Iceberg、DeltaLake等開源數(shù)據(jù)湖引擎或湖倉一體架構(gòu)開發(fā)經(jīng)驗者優(yōu)先考慮
4有Flink、Doris、Starrock、Presto等流式處理引擎或?qū)崟r分析引擎相關(guān)開發(fā)經(jīng)驗者優(yōu)先錄用