崗位職責:
1. 負責大數(shù)據(jù)平臺的日常運維工作,保障集群(如Hadoop、Spark、HBase等)的高可用性和穩(wěn)定性;
2. 監(jiān)控并優(yōu)化大數(shù)據(jù)系統(tǒng)的性能,及時處理故障報警,定位并解決系統(tǒng)問題;
3. 負責數(shù)據(jù)遷移、數(shù)據(jù)備份與恢復策略的制定與實施,確保數(shù)據(jù)安全與合規(guī);
4. 參與大數(shù)據(jù)平臺的容量規(guī)劃、架構優(yōu)化及自動化運維工具的開發(fā)與維護;
5. 協(xié)助開發(fā)團隊進行數(shù)據(jù)環(huán)境搭建、性能調優(yōu)及技術支持;
6. 跟蹤大數(shù)據(jù)領域新技術,推動技術落地與團隊技術能力提升。
要求:
1、熟悉hadoop生態(tài)組件:flink、spark、hive、Hudi、ZooKeeper、Kafka、Ranger、lickHouse、YARN、Impala、Flume、Sqoop、Kudu、HBase
2、熟悉Linux、shell、K8S
3、熟悉java、python
4、熟悉mysql、PostgreSQL、SQL Server
5、熟悉Elasticsearch、Redis
入職五險一金,10-15K,具體面試定薪,上5休2