崗位職責(zé):
1、負(fù)責(zé)各種資源數(shù)據(jù)的采集、清洗、存儲(chǔ)、分析流程;
2、負(fù)責(zé)大數(shù)據(jù)類產(chǎn)品的系統(tǒng)分析與架構(gòu)設(shè)計(jì),配合產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;
3、承擔(dān)建設(shè)基于Hadoop/Flink生態(tài)的大數(shù)據(jù)離線/實(shí)時(shí)處理平臺(tái);
4、參與數(shù)據(jù)中臺(tái)產(chǎn)品的系統(tǒng)設(shè)計(jì)及開發(fā)工作,參加及支持?jǐn)?shù)據(jù)中臺(tái)運(yùn)維工作;
5、跟進(jìn)大數(shù)據(jù)前沿技術(shù)的發(fā)展,將合適的技術(shù)方案適時(shí)引入業(yè)務(wù)場(chǎng)景。
任職要求:
1、本科及以上學(xué)歷或研究生及以上學(xué)歷,計(jì)算機(jī)科學(xué)等相關(guān)專業(yè);
2、3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
2、熟悉Hadoop、Hive、Hbase、ELK等框架組件;
3、熟悉Spark、Storm、Flink、Impala、Presto等計(jì)算和數(shù)據(jù)處理引擎的環(huán)境搭建、開發(fā)和管理;
4、熟悉消息隊(duì)列的原理,熟練使用Kafka、rocketmq等常用的消息隊(duì)列;
5、熟悉java、python等語言,編碼能力優(yōu)秀,有良好的編碼習(xí)慣和風(fēng)格,重視代碼質(zhì)量和工程實(shí)踐