一、崗位職責(zé):
1.基于華為 MRS 大數(shù)據(jù)平臺(tái)開(kāi)展組件的日常使用,包括但不限于Hadoop 生態(tài)鏈組件、spark2.X、flink、hudi、hetu 引擎、clickhouse、kafka、flume、loader、Redis 的使用維護(hù)操作。
2.基于現(xiàn)有業(yè)務(wù)進(jìn)行MRS 平臺(tái)的定制化與組件二次開(kāi)發(fā),包含離線,實(shí)時(shí),微批等數(shù)據(jù)流架構(gòu)。
3.依托 MRS 平臺(tái)運(yùn)維界面,完成組件服務(wù)的添加、刪除、修改重啟,巡檢及服務(wù)規(guī)模的容量及計(jì)算資源調(diào)整等操作。需要配合平臺(tái)的擴(kuò)容、升級(jí)、數(shù)據(jù)遷移,組件規(guī)劃等操作。
二、任職要求:中級(jí)
1、碩士及以上學(xué)歷。具備華為大數(shù)據(jù)HCIP證書,1年以上大數(shù)據(jù)等相關(guān)應(yīng)用、運(yùn)維經(jīng)驗(yàn)。
2、熟悉 Linux 系統(tǒng),能對(duì)系統(tǒng)的基本問(wèn)題進(jìn)行分析、解決。
3、熟悉一種數(shù)據(jù)庫(kù)(MySQL、Postgresql等),對(duì)數(shù)據(jù)庫(kù)的常見(jiàn)問(wèn)題進(jìn)行分析、解決。
4、熟悉 Docker,對(duì)容器的常見(jiàn)問(wèn)題進(jìn)行分析、解決。
5、優(yōu)秀的溝通和協(xié)作能力,能負(fù)責(zé)現(xiàn)場(chǎng)的運(yùn)維相關(guān)工作。
6、熟悉安全生產(chǎn)相關(guān)規(guī)定并遵守。
7、具備技術(shù)文檔撰寫能力。
8、熟悉 Hadoop/Kafka/Impala/Hbase/zookeeper等開(kāi)源產(chǎn)品,具備其中一種或者多種產(chǎn)品大規(guī)模集群運(yùn)維實(shí)操經(jīng)驗(yàn);有華為大數(shù)據(jù)產(chǎn)品運(yùn)維經(jīng)驗(yàn)者優(yōu)先考慮。