崗位職責(zé):
1. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的日常運(yùn)維工作,保障集群(如Hadoop、Spark、HBase等)的高可用性和穩(wěn)定性;
2. 監(jiān)控并優(yōu)化大數(shù)據(jù)系統(tǒng)的性能,及時(shí)處理故障報(bào)警,定位并解決系統(tǒng)問題;
3. 負(fù)責(zé)數(shù)據(jù)遷移、數(shù)據(jù)備份與恢復(fù)策略的制定與實(shí)施,確保數(shù)據(jù)安全與合規(guī);
4. 參與大數(shù)據(jù)平臺(tái)的容量規(guī)劃、架構(gòu)優(yōu)化及自動(dòng)化運(yùn)維工具的開發(fā)與維護(hù);
5. 協(xié)助開發(fā)團(tuán)隊(duì)進(jìn)行數(shù)據(jù)環(huán)境搭建、性能調(diào)優(yōu)及技術(shù)支持;
6. 跟蹤大數(shù)據(jù)領(lǐng)域新技術(shù),推動(dòng)技術(shù)落地與團(tuán)隊(duì)技術(shù)能力提升。
要求:
1、熟悉hadoop生態(tài)組件:flink、spark、hive、Hudi、ZooKeeper、Kafka、Ranger、lickHouse、YARN、Impala、Flume、Sqoop、Kudu、HBase
2、熟悉Linux、shell、K8S
3、熟悉java、python
4、熟悉mysql、PostgreSQL、SQL Server
5、熟悉Elasticsearch、Redis
入職五險(xiǎn)一金,10-15K,具體面試定薪,上5休2