崗位職責(zé):
1. 負(fù)責(zé)大數(shù)據(jù)中臺(tái)、無人云腦平臺(tái)的架構(gòu)設(shè)計(jì)、開發(fā)與優(yōu)化,確保平臺(tái)高效穩(wěn)定運(yùn)行。
2. 利用 Hadoop、Hive、Hbase 等框架組件進(jìn)行數(shù)據(jù)存儲(chǔ)、處理和分析。
3. 基于 Spark、Storm、Flink 等計(jì)算和數(shù)據(jù)處理引擎,開發(fā)數(shù)據(jù)處理和分析任務(wù)。
4. 使用 Kafka、RocketMQ 等消息隊(duì)列進(jìn)行數(shù)據(jù)的實(shí)時(shí)傳輸和處理。
5. 運(yùn)用 Java、Python 等語言進(jìn)行代碼開發(fā),保證代碼質(zhì)量和工程實(shí)踐。
任職要求:
1. 本科及以上學(xué)歷(211/985 院校優(yōu)先),3年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn)。
2. 熟悉 Hadoop、Hive、Hbase、ELK 等框架組件。
3. 熟悉 Spark、Storm、Flink、Impala、Presto 等計(jì)算和數(shù)據(jù)處理引擎的環(huán)境搭建、開發(fā)和管理。
4. 熟悉消息隊(duì)列的原理,熟練使用 Kafka、RocketMQ 等常用的消息隊(duì)列。
5. 熟悉 Java、Python 等語言,編碼能力優(yōu)秀,有良好的編碼習(xí)慣和風(fēng)格,重視代碼質(zhì)量和工程實(shí)踐。