国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

更新于 今天

高級數(shù)據(jù)工程師(從原有 Cloudera 環(huán)境遷移至基于 Kubernetes 的數(shù)據(jù)平臺)

1.6-3萬
  • 天津濱海新區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招10人

職位描述

KafkaSparkPythonSqlKUBERNETES 環(huán)境CONTROL-MhiveCLOUDERA 環(huán)境數(shù)據(jù)湖倉格式數(shù)據(jù)架構(gòu)數(shù)據(jù)遷移數(shù)據(jù)倉庫
高級數(shù)據(jù)工程師
職位:高級數(shù)據(jù)工程師(16K-25K,優(yōu)秀者薪資可面議)
工作經(jīng)驗(yàn):6-9 年
一、職位概述
我們正在尋找高級數(shù)據(jù)工程師(供應(yīng)商方),負(fù)責(zé)將應(yīng)用程序從原有 Cloudera 環(huán)境遷移至新的基于 Kubernetes 的數(shù)據(jù)平臺。該職位要求具備扎實(shí)的數(shù)據(jù)工程實(shí)操開發(fā)能力,能夠在內(nèi)部負(fù)責(zé)人的指導(dǎo)下交付高質(zhì)量的數(shù)據(jù)管道。
二、崗位職責(zé)
1、使用 Spark 3.5 和 Python/Scala 開發(fā)并優(yōu)化數(shù)據(jù)管道。
2、將現(xiàn)有 Hive、Spark 和 Control-M 任務(wù)遷移至基于 Airflow 和 DBT 的工作流。
3、實(shí)現(xiàn)數(shù)據(jù)管道與消息系統(tǒng)(Kafka、Solace)及對象存儲(chǔ)(S3、MinIO)的集成。
4、排查并優(yōu)化在 Kubernetes 環(huán)境中運(yùn)行的分布式任務(wù)。
5、與內(nèi)部負(fù)責(zé)人及架構(gòu)師緊密協(xié)作,落地最佳實(shí)踐方案。
6、設(shè)計(jì)并實(shí)現(xiàn)遷移 / 加速框架,實(shí)現(xiàn)端到端遷移自動(dòng)化。
7、持續(xù)優(yōu)化框架,保障其穩(wěn)定性、可擴(kuò)展性,支持多樣化的用例及場景。
8、協(xié)同各類數(shù)據(jù)應(yīng)用,為遷移過程提供支持。
9、在約定時(shí)間內(nèi)完成分配的遷移任務(wù)。
三、崗位要求
1、統(tǒng)招本科或以上學(xué)歷,性別不限(優(yōu)秀可放寬至大專)
2、6-9 年數(shù)據(jù)工程實(shí)操經(jīng)驗(yàn)。
3、精通 Apache Spark(批處理 + 流處理)和 Hive。
4、熟練掌握 Python、Scala 或 Java 編程語言。
5、了解編排工具(Airflow/Control-M)及 SQL 轉(zhuǎn)換框架(優(yōu)先考慮 DBT)。
6、有 Kafka、Solace 及對象存儲(chǔ)(S3、MinIO)的使用經(jīng)驗(yàn)。
7、具備 Docker/Kubernetes 部署相關(guān)經(jīng)驗(yàn)。
8、擁有數(shù)據(jù)湖倉格式(Iceberg、Delta Lake、Hudi)的實(shí)操經(jīng)驗(yàn)。
9、供應(yīng)商方人員需獨(dú)立負(fù)責(zé)指定模塊的工作,交付可投入生產(chǎn)的解決方案。
10、必須參與每日 / 每周狀態(tài)會(huì)議、評審及問題解決討論。
11、需適應(yīng)客戶的流程、文檔標(biāo)準(zhǔn)及合規(guī)要求。
四、崗位薪資:綜合薪資16K-25K,五險(xiǎn)一金,加班費(fèi),節(jié)假日福利等(優(yōu)秀者薪資可面議)
五、工作時(shí)間:周一到周五,9:00-18:00,周末及法定節(jié)假日休息(加班有加班費(fèi))
六、工作地點(diǎn):天津市濱海新區(qū)開發(fā)區(qū)

工作地點(diǎn)

天津?yàn)I海新區(qū)MSD-A1

職位發(fā)布者

馬先生/項(xiàng)目招聘

昨日活躍
立即溝通
公司Logo百思特公司標(biāo)簽
百思特(北京百思特電信科技發(fā)展公司)成立于1993年,早期從事電信尋呼業(yè)務(wù),是尋呼時(shí)代京城三甲服務(wù)商之一。后轉(zhuǎn)型做呼叫中心業(yè)務(wù)。經(jīng)過二十多年的發(fā)展,百思特已逐步發(fā)展為集房地產(chǎn)服務(wù)、呼叫中心服務(wù)為一體的現(xiàn)代化新型企業(yè),是海淀區(qū)高新技術(shù)企業(yè),多次被評為海淀區(qū)優(yōu)秀民營企業(yè)。是北京乃至全國從事呼叫中心規(guī)模最大的企業(yè)。北京百思特捷迅科技有限公司從1996年開始從事呼叫中心業(yè)務(wù),2001年開始規(guī)?;峁┖艚兄行耐獍?wù),公司以提供呼叫中心服務(wù)外包、運(yùn)營管理外包、人員外包、流程外包、呼叫中心平臺外包、全面的業(yè)務(wù)與運(yùn)營解決方案外包為主要業(yè)務(wù)模式。應(yīng)用業(yè)務(wù)涉及眾多行業(yè),包括:電信、金融、保險(xiǎn)、IT、通訊、咨詢等,長期客戶業(yè)務(wù)比重達(dá)到80%。涉獵行業(yè)有通信類(移動(dòng)、電信、聯(lián)通)、政府類(12345、12315、中央編制辦公室客服),互聯(lián)網(wǎng)(百度、余額寶、去哪兒網(wǎng)、每日優(yōu)鮮),保險(xiǎn)(人保、中銀)等20余家,證券(銀河、中信建投),銀行類(光大、興業(yè)、廣發(fā)、建行北分、華夏)等。地區(qū)由北京輻射全國濟(jì)南、昆山、廣州、南昌等。目前呼叫中心總體運(yùn)營面積達(dá)到10000平米以上,自建多媒體呼叫中心座席5000多個(gè),公司規(guī)模15000余人。百思特公司下設(shè)4個(gè)事業(yè)部:電話商務(wù)部門、網(wǎng)絡(luò)部門、聯(lián)信部門、信息中心。網(wǎng)址:www.netbest.com.cn公司總部:工作地點(diǎn)一:北京市海淀區(qū)北四環(huán)中路251號北京科技大學(xué)會(huì)議中心院內(nèi)會(huì)議樓3層工作地點(diǎn)二:山東濟(jì)南職場:山東濟(jì)南市槐蔭區(qū)臘山河路與日照路交叉口濟(jì)南日報(bào)報(bào)業(yè)大廈B座13層(西客站附近)工作地點(diǎn)三:江蘇昆山:江蘇昆山花橋金融大道遠(yuǎn)洋數(shù)據(jù)南門1號樓3層百思特工作地點(diǎn)四:江西南昌:江西南昌青山湖區(qū)玉屏西大街888號天驕廣場2層
公司主頁