国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

更新于 5月16日

Airflow工程師

1.5-2萬(wàn)
  • 深圳南山區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)庫(kù)開(kāi)發(fā)PythonAIRFLOW
崗位職責(zé): - 負(fù)責(zé)公司各項(xiàng)目調(diào)度平臺(tái)的整體規(guī)劃,設(shè)計(jì)高可用、可擴(kuò)展的Airflow集群架構(gòu); - 規(guī)劃Airflow任務(wù)調(diào)度策略,優(yōu)化DAG(有向無(wú)環(huán)圖)的設(shè)計(jì)與執(zhí)行效率; - 主導(dǎo)Airflow集群的部署、升級(jí)及日常維護(hù),保障系統(tǒng)穩(wěn)定性和高可用性; - 監(jiān)控Airflow任務(wù)執(zhí)行狀態(tài),及時(shí)處理調(diào)度失敗、資源爭(zhēng)用等問(wèn)題; - 針對(duì)大規(guī)模任務(wù)調(diào)度場(chǎng)景,優(yōu)化Airflow調(diào)度性能; - 優(yōu)化數(shù)據(jù)庫(kù)(如MySQL、PostgreSQL)性能,解決Airflow元數(shù)據(jù)存儲(chǔ)瓶頸。 - 為項(xiàng)目團(tuán)隊(duì)提供Airflow技術(shù)支持,編寫(xiě)開(kāi)發(fā)規(guī)范及最佳實(shí)踐文檔; - 負(fù)責(zé)調(diào)度平臺(tái)等技術(shù)攻關(guān),解決復(fù)雜場(chǎng)景下的調(diào)度性能與穩(wěn)定性問(wèn)題。 崗位要求: - 計(jì)算機(jī)科學(xué)、軟件工程或相關(guān)專業(yè)本科及以上學(xué)歷,5年以上系統(tǒng)開(kāi)發(fā)或系統(tǒng)運(yùn)維經(jīng)驗(yàn); - 3年以上Airflow實(shí)戰(zhàn)經(jīng)驗(yàn),主導(dǎo)過(guò)生產(chǎn)級(jí)集群的部署、調(diào)優(yōu)及運(yùn)維; - 精通Airflow核心架構(gòu)(Scheduler、Worker、WebServer、Executor等)及運(yùn)行原理; - 精通Python,熟悉Linux系統(tǒng)及Shell腳本; - 有大規(guī)模任務(wù)調(diào)度(日調(diào)度任務(wù)10萬(wàn)+)場(chǎng)景下的性能調(diào)優(yōu)經(jīng)驗(yàn); - 熟悉至少一種數(shù)據(jù)庫(kù)(MySQL/PostgreSQL等),掌握基本SQL調(diào)優(yōu); - 具備Airflow源碼級(jí)問(wèn)題排查能力者優(yōu)先; - 熟悉大數(shù)據(jù)生態(tài)組件(Hadoop、Spark、Flink等)的調(diào)度集成優(yōu)先; - 熟悉Docker/Kubernetes,具備容器化部署經(jīng)驗(yàn)優(yōu)先。 軟性要求: - 優(yōu)秀的邏輯思維與問(wèn)題解決能力,能快速定位并修復(fù)復(fù)雜調(diào)度問(wèn)題; - 良好的溝通能力,能協(xié)同數(shù)據(jù)開(kāi)發(fā)、運(yùn)維及業(yè)務(wù)團(tuán)隊(duì)推動(dòng)技術(shù)落地; - 對(duì)技術(shù)有熱情,關(guān)注開(kāi)源社區(qū)動(dòng)態(tài),有Airflow源碼貢獻(xiàn)者優(yōu)先; - 有數(shù)據(jù)中臺(tái)或大數(shù)據(jù)平臺(tái)建設(shè)經(jīng)驗(yàn)者優(yōu)先; - 可適應(yīng)短期出差。

工作地點(diǎn)

深圳南山區(qū)共享大廈-A座1801室

職位發(fā)布者

陳甜/人事經(jīng)理

剛剛活躍
立即溝通
公司Logo深圳銀興智能數(shù)據(jù)有限公司
公司主頁(yè)