【該崗位是字節(jié)外包,要求具備互聯(lián)網(wǎng)數(shù)倉背景,學(xué)信網(wǎng)可查本科學(xué)歷】
熟悉:Spark Hive Hadoop Presto&Python加分。
崗位職責(zé):
1、負責(zé)數(shù)據(jù)同步任務(wù)全生命周期的統(tǒng)一運維,涵蓋任務(wù)創(chuàng)建、執(zhí)行監(jiān)控、問題解決及資源調(diào)優(yōu)等核心環(huán)節(jié)
2、基于實際運維經(jīng)驗提煉通用規(guī)范,逐步降低運維成本
技術(shù)要求:
1、熟悉 Spark job 常見運維手段,具備 Spark 日志(如 Spark UI、Log 等)分析能力
2、具備 Python/Shell 編寫能力,可以自主開發(fā)小型腳本輔助提高工作效率;