崗位職責:
1、負責大數(shù)據(jù)應(yīng)用產(chǎn)品的平臺搭建、架構(gòu)優(yōu)化、技術(shù)迭代和開發(fā)維護,提供穩(wěn)定的大數(shù)據(jù)平臺服務(wù);構(gòu)建數(shù)據(jù)存儲、數(shù)據(jù)挖掘、數(shù)據(jù)計算及數(shù)據(jù)服務(wù)于一體的大型分布式數(shù)據(jù)平臺;
2、負責構(gòu)建和維護算法平臺,對海量數(shù)據(jù)進行離線計算、實時計算等分析挖掘;協(xié)同數(shù)據(jù)分析師,根據(jù)業(yè)務(wù)場景設(shè)計并實現(xiàn)數(shù)據(jù)模型和服務(wù)模型,并跟進和評估模型效果,確保算法和模型的有效落地;
3、持續(xù)學習了解大數(shù)據(jù)領(lǐng)域的新技術(shù),并結(jié)合實際需求落地;
任職要求
1、 學歷專業(yè):4-9年相關(guān)工作經(jīng)驗;
2、 有扎實的編程功底,熟悉常用的數(shù)據(jù)結(jié)構(gòu)和算法;
3、熟悉數(shù)據(jù)倉庫建模理論,有大數(shù)據(jù)整體系統(tǒng)架構(gòu)設(shè)計、數(shù)據(jù)ETL、建?;驍?shù)據(jù)分析相關(guān)經(jīng)驗;
4、熟悉常用的開源大數(shù)據(jù)技術(shù),如Hadoop、HBase、Flink、Kafka、Doris等,了解各組件的實現(xiàn)原理;
5、 有較強的 HSQL/SQL性能調(diào)優(yōu)經(jīng)驗,熟練使用相關(guān)開發(fā)語言(Python/Java/Scala/Shell等),熟練掌握Spark、flink任意一種計算框架,能閱讀源碼跟蹤問題;
6、 具備良好溝通能力和解決問題能力,善于從復雜的數(shù)據(jù)問題中找到關(guān)鍵路徑,對待工作認真、負責,有較強的自驅(qū)力。