1、熟悉hadoop、hive、spark,kafka等大數(shù)據(jù)平臺技術(shù)
2、熟悉離線數(shù)倉、實(shí)時(shí)數(shù)據(jù)開發(fā)流程:
3、熟悉flink實(shí)時(shí)計(jì)算引擎;
4、熟悉scala.java、python等開發(fā)語言:
5、熟悉linur基礎(chǔ)操作命令,熟悉shell腳本編寫,能獨(dú)立進(jìn)行大數(shù)據(jù)組件部署;6、熟悉redis.habse等數(shù)據(jù)存儲技術(shù):
7、熟悉實(shí)時(shí)數(shù)倉理念、具備相關(guān)經(jīng)驗(yàn)