需要Flink實(shí)時(shí)
1、熟悉Hadoop、HBase等分布式計(jì)算平臺(tái)開發(fā),3年以上hadoop使用經(jīng)驗(yàn),有大數(shù)據(jù)應(yīng)用系統(tǒng)開發(fā)經(jīng)驗(yàn)
2、熟悉Kettle 等ETL 工具的使用和開發(fā);具有一定數(shù)據(jù)模型和數(shù)據(jù)架構(gòu)基礎(chǔ),熟悉hadoop\hive和常用數(shù)據(jù)庫
3、熟悉SQL/HQL,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);熟悉hive sql的開發(fā)
4、熟悉ETL設(shè)計(jì)、調(diào)度、監(jiān)控、算法等,能夠熟練的進(jìn)行事實(shí)表、維度表的開發(fā)
5、Flink實(shí)時(shí)等相關(guān)經(jīng)驗(yàn)