国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

更新于 9月3日

高級ETL工程師

1.2-1.9萬
  • 北京豐臺區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

Oracle計算機(jī)軟件
崗位職責(zé):
1、技術(shù)架構(gòu)與規(guī)劃
(1)負(fù)責(zé)企業(yè)級ETL體系架構(gòu)設(shè)計和優(yōu)化,制定ETL開發(fā)規(guī)范和標(biāo)準(zhǔn)
(2)主導(dǎo)大型數(shù)據(jù)倉庫項(xiàng)目的技術(shù)方案設(shè)計和實(shí)施路線規(guī)劃
(3)基于企業(yè)級框架如:PDFC框架,評估和引入新技術(shù)、新工具,推動ETL技術(shù)棧的升級和演進(jìn)
2、復(fù)雜數(shù)據(jù)處理
(1)解決超大規(guī)模數(shù)據(jù)(TB級以上)處理的技術(shù)挑戰(zhàn)和性能瓶頸
(2)設(shè)計和實(shí)現(xiàn)復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)轉(zhuǎn)換和處理流程
(3)處理跨系統(tǒng)、跨平臺的數(shù)據(jù)集成和同步問題
3、性能優(yōu)化與監(jiān)控
(1)建立和完善ETL作業(yè)性能監(jiān)控體系,制定性能優(yōu)化策略
(2)主導(dǎo)關(guān)鍵ETL流程的性能調(diào)優(yōu),確保數(shù)據(jù)處理效率
(3)構(gòu)建數(shù)據(jù)質(zhì)量監(jiān)控框架,保障數(shù)據(jù)的準(zhǔn)確性和一致性
4、團(tuán)隊與技術(shù)領(lǐng)導(dǎo)
(1)指導(dǎo)初、中級工程師解決技術(shù)難題,進(jìn)行代碼review和技術(shù)培訓(xùn)
(2)負(fù)責(zé)技術(shù)難點(diǎn)攻關(guān)和系統(tǒng)故障的應(yīng)急處理
(3)培養(yǎng)團(tuán)隊技術(shù)能力,傳承最佳實(shí)踐和經(jīng)驗(yàn)
技術(shù)要求:
硬技能要求:
(1)5年以上ETL開發(fā)經(jīng)驗(yàn),3年以上大型數(shù)據(jù)倉庫/數(shù)據(jù)湖/數(shù)據(jù)中臺的項(xiàng)目架構(gòu)設(shè)計經(jīng)驗(yàn)
(2)精通至少兩種主流關(guān)系型數(shù)據(jù)庫(Oracle、MySQL、Postgresql、DB2等)
(3)深入掌握多種ETL工具(DataX、DataStage、Kettle等)的高級特性
(4)具備數(shù)據(jù)庫高級優(yōu)化能力,精通執(zhí)行計劃分析、索引優(yōu)化、分區(qū)技術(shù)等
(5)熟練掌握調(diào)度工具,如Linux定時調(diào)度、海豚調(diào)度器、Airflow、Moia等
(5)熟悉或了解數(shù)據(jù)治理體系,有實(shí)際的數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)管理經(jīng)驗(yàn)
(6)掌握基礎(chǔ)Python/Java/Shell開發(fā)能力,有進(jìn)行二次開發(fā)和工具定制經(jīng)驗(yàn)優(yōu)先
(7)掌握BI工具的使用,如SmartBI、帆軟、觀遠(yuǎn)
架構(gòu)能力:
(1)具備大型分布式系統(tǒng)架構(gòu)設(shè)計經(jīng)驗(yàn)
(2)熟悉傳統(tǒng)數(shù)據(jù)倉庫與大數(shù)據(jù)平臺的融合架構(gòu)
(3)有批次/實(shí)時數(shù)據(jù)管道設(shè)計和實(shí)施經(jīng)驗(yàn)
(4)掌握高可用、容災(zāi)備份等技術(shù)方案
優(yōu)先條件:
(1)有金融行業(yè)尤其是保險行業(yè)經(jīng)驗(yàn)
(2)持有相關(guān)技術(shù)認(rèn)證(OCM、CDMP等)
(3)有技術(shù)團(tuán)隊管理經(jīng)驗(yàn)或項(xiàng)目負(fù)責(zé)人經(jīng)驗(yàn)
(4)具備良好的技術(shù)文檔編寫和方案宣講能力
(5)大數(shù)據(jù)組件使用經(jīng)驗(yàn),如Hadoop體系相關(guān)組件

工作地點(diǎn)

北京豐臺區(qū)六里橋

職位發(fā)布者

王女士/行政助理

三日內(nèi)活躍
立即溝通
公司Logo北京久勝云數(shù)科技有限公司
北京久勝信誠科技發(fā)展有限公司位于北京市朝陽區(qū),成立于2005年,是一家從事于lT技術(shù)綜合應(yīng)用服務(wù)的企業(yè),公司匯聚了一批有理想有經(jīng)驗(yàn)的IT技術(shù)工程師,致力于商業(yè)智能(Business Intelligence)和數(shù)據(jù)管理在中國的推廣,技術(shù)團(tuán)隊?wèi){借在數(shù)據(jù)治理創(chuàng)新層面的突出表現(xiàn)受到客戶的高度評價。久勝信誠以大數(shù)據(jù)技術(shù)、數(shù)據(jù)倉庫和數(shù)據(jù)挖掘?yàn)榛A(chǔ),專注提供商業(yè)智能、數(shù)據(jù)治理、大數(shù)據(jù)戰(zhàn)略咨詢及應(yīng)用、以及ERP建設(shè)等技術(shù)咨詢服務(wù)。秉承“專業(yè)、優(yōu)質(zhì)、誠信、共贏”的理念,擁有一支服務(wù)于政府及大型企業(yè)的專業(yè)技術(shù)團(tuán)隊。我們的數(shù)據(jù)治理團(tuán)隊骨干成員擁有10年以上國有大行數(shù)據(jù)管理及治理經(jīng)驗(yàn),有洞察數(shù)據(jù)領(lǐng)域最前沿發(fā)展趨勢能力。我們的保險行業(yè)技術(shù)團(tuán)隊擁有10年以上行業(yè)經(jīng)驗(yàn),曾服務(wù)于多家主流大型保險公司,如PICC、中國人壽、新華、泰康、安邦、華泰等等。我們的合作伙伴有甲骨文、SAP、IBM、EMC、聯(lián)想、浪潮、華為、華三等世界著名的IT公司,我們的客戶主要有:政府、中信集團(tuán)、理工大學(xué)、北京大學(xué)、國家電網(wǎng)、南方電網(wǎng)、PICC、中國人壽以及多家保險經(jīng)紀(jì)公司和城市農(nóng)商銀行。久勝信誠的企業(yè)愿景是:成為一流的IT技術(shù)應(yīng)用服務(wù)商。我們高度重視技術(shù)支持和售后服務(wù),以我們更加專業(yè)的服務(wù)為客戶提供價值最大化的數(shù)據(jù)決策,做到讓客戶更方便、更安心、更滿意;為員工打造最佳的能力提升空間和職業(yè)發(fā)展平臺,實(shí)現(xiàn)客戶、員工和企業(yè)共贏。
公司主頁