崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)設(shè)計(jì)和ETL流程開(kāi)發(fā);
2、構(gòu)建和維護(hù)大數(shù)據(jù)處理平臺(tái),確保數(shù)據(jù)高效流轉(zhuǎn);
3、開(kāi)發(fā)數(shù)據(jù)清洗、轉(zhuǎn)換和加載程序,保障數(shù)據(jù)質(zhì)量;
4、優(yōu)化數(shù)據(jù)處理性能,解決海量數(shù)據(jù)計(jì)算瓶頸;
5、參與數(shù)據(jù)建模工作,支持業(yè)務(wù)數(shù)據(jù)分析需求;
6、編寫(xiě)技術(shù)文檔,規(guī)范數(shù)據(jù)開(kāi)發(fā)流程;
7、配合數(shù)據(jù)分析師完成數(shù)據(jù)應(yīng)用開(kāi)發(fā)。
任職要求:
1、計(jì)算機(jī)、數(shù)學(xué)或相關(guān)專(zhuān)業(yè)本科及以上學(xué)歷;
2、4年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn),熟悉Hadoop生態(tài);
3、精通SQL,掌握至少一種編程語(yǔ)言(Python/Java/Scala);
4、熟悉數(shù)據(jù)倉(cāng)庫(kù)建模理論及ETL開(kāi)發(fā)流程;
5、了解主流大數(shù)據(jù)技術(shù)(Spark/Flink/Hive等);
6、具備良好的數(shù)據(jù)敏感度和問(wèn)題解決能力;
7、有數(shù)據(jù)治理或數(shù)據(jù)質(zhì)量管理經(jīng)驗(yàn)者優(yōu)先。