国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

作為數(shù)據(jù)平臺團隊的核心成員，負責(zé)基于 Apache Doris 和 Apache Flink 等現(xiàn)代技術(shù)棧，構(gòu)建新一代高性能、實時化的企業(yè)級數(shù)據(jù)倉庫與數(shù)據(jù)湖倉。
一、主要職責(zé)
1. 參與設(shè)計并實施基于 Doris 的湖倉一體架構(gòu)，負責(zé)核心數(shù)據(jù)分層（ODS、DWD、DWS、ADS）模型設(shè)計和開發(fā)，確保模型的高效性與可擴展性。
2. 使用 Apache Flink 開發(fā)實時數(shù)據(jù)管道，處理來自 Kafka 的業(yè)務(wù)流數(shù)據(jù)（如實時訂單、設(shè)備日志等），實現(xiàn)低延遲數(shù)據(jù)入庫與指標計算。
3. 使用 DataX、Flink CDC 等工具進行批量數(shù)據(jù)同步，從傳統(tǒng)業(yè)務(wù)系統(tǒng)（ERP, CRM, 臨床試驗系統(tǒng)等）及數(shù)據(jù)庫穩(wěn)定高效地抽取數(shù)據(jù)。
4. 熟練使用 Apache DolphinScheduler 作為核心調(diào)度工具，編排、監(jiān)控和管理復(fù)雜的 Flink 作業(yè)、DataX 任務(wù)、Spark 任務(wù)及數(shù)據(jù)質(zhì)量檢測任務(wù)，保障數(shù)據(jù)生產(chǎn)流程的穩(wěn)定性和時效性。
5. 針對醫(yī)藥數(shù)據(jù)特性（如主數(shù)據(jù)、批次追蹤、臨床試驗數(shù)據(jù)）設(shè)計數(shù)據(jù)清洗、標準化、整合流程。建立并實施數(shù)據(jù)質(zhì)量檢核與血緣追蹤體系，確保數(shù)據(jù)的準確性、完整性及業(yè)務(wù)合規(guī)性。
6. 對 Doris 表結(jié)構(gòu)（分區(qū)、分桶、索引、物化視圖）、Flink 作業(yè) 及 SQL 進行深度性能調(diào)優(yōu)。監(jiān)控集群資源使用，平衡數(shù)據(jù)存儲、計算性能與成本。
編寫清晰的設(shè)計與開發(fā)文檔。理解業(yè)務(wù)需求，并提供穩(wěn)定可靠的數(shù)據(jù)模型與API服務(wù)。
二、崗位要求
1. 計算機科學(xué)、信息技術(shù)、生物醫(yī)學(xué)信息學(xué)或相關(guān)專業(yè)本科及以上學(xué)歷。
2. 5年以上數(shù)據(jù)倉庫/大數(shù)據(jù)開發(fā)經(jīng)驗，其中至少 2年 專注于基于 Hadoop/Spark/Flink 的現(xiàn)代數(shù)據(jù)平臺開發(fā)。
3. 熟練掌握實時計算框架 Apache Flink，有使用 Flink DataStream API / Table API & SQL 開發(fā)實時ETL和維表關(guān)聯(lián)的實際項目經(jīng)驗。
4. 精通新一代MPP數(shù)據(jù)庫 Apache Doris（或 StarRocks），有集群部署、數(shù)據(jù)建模、性能調(diào)優(yōu)及日常運維經(jīng)驗。
5. 熟悉數(shù)據(jù)集成工具 DataX，能夠編寫和優(yōu)化異構(gòu)數(shù)據(jù)源的同步作業(yè)。
精通 SQL 和 數(shù)據(jù)建模（維度建模），具備復(fù)雜邏輯實現(xiàn)和深度優(yōu)化能力。
熟悉流式數(shù)據(jù)總線 Apache Kafka，了解其生產(chǎn)/消費原理、分區(qū)策略及運維知識。
6. 有醫(yī)藥、醫(yī)療健康或相關(guān)生命科學(xué)行業(yè)的數(shù)據(jù)處理經(jīng)驗，了解該領(lǐng)域的業(yè)務(wù)場景與數(shù)據(jù)特性。
7. 熟悉 Shell 或 Python 腳本，用于自動化運維和工具開發(fā)。
8. 有使用 BI報表工具（如 Tableau, Power BI, 帆軟等）進行數(shù)據(jù)對接和支持的經(jīng)驗。