崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉庫的架構(gòu)設(shè)計和ETL流程開發(fā);
2、構(gòu)建和維護大數(shù)據(jù)處理平臺,確保數(shù)據(jù)高效流轉(zhuǎn);
3、開發(fā)數(shù)據(jù)清洗、轉(zhuǎn)換和加載程序,保障數(shù)據(jù)質(zhì)量;
4、優(yōu)化數(shù)據(jù)處理性能,解決海量數(shù)據(jù)計算瓶頸;
5、參與數(shù)據(jù)建模工作,支持業(yè)務(wù)數(shù)據(jù)分析需求;
6、編寫技術(shù)文檔,規(guī)范數(shù)據(jù)開發(fā)流程;
7、配合數(shù)據(jù)分析師完成數(shù)據(jù)應(yīng)用開發(fā)。
任職要求:
1、計算機、數(shù)學(xué)或相關(guān)專業(yè)本科及以上學(xué)歷;
2、4年以上大數(shù)據(jù)開發(fā)經(jīng)驗,熟悉Hadoop生態(tài);
3、精通SQL,掌握至少一種編程語言(Python/Java/Scala);
4、熟悉數(shù)據(jù)倉庫建模理論及ETL開發(fā)流程;
5、了解主流大數(shù)據(jù)技術(shù)(Spark/Flink/Hive等);
6、具備良好的數(shù)據(jù)敏感度和問題解決能力;
7、有數(shù)據(jù)治理或數(shù)據(jù)質(zhì)量管理經(jīng)驗者優(yōu)先。