一、崗位職責(zé)
1.大數(shù)據(jù)平臺(tái)運(yùn)維管理:制定大數(shù)據(jù)平臺(tái)運(yùn)維管理規(guī)定、軟硬件變更方案和實(shí)施,改造方案和實(shí)施。
2.需求管理:梳理核電業(yè)務(wù)需求;挖掘數(shù)據(jù)場景;編制需求規(guī)格說明書及設(shè)計(jì)方案。
3.數(shù)據(jù)管控及治理:制定公司數(shù)據(jù)標(biāo)準(zhǔn)和規(guī)范;建立公司數(shù)據(jù)質(zhì)量管控流程,數(shù)據(jù)資產(chǎn)消費(fèi)管控流程;開展主數(shù)據(jù)和元數(shù)據(jù)的管理;開展大數(shù)據(jù)安全審計(jì)。
4.大數(shù)據(jù)應(yīng)用程序開發(fā):開發(fā)大數(shù)據(jù)應(yīng)用程序,包括數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)等;進(jìn)行數(shù)據(jù)可視化和數(shù)據(jù)交互分析,面向用戶交互。
二、任職資格
1.本科及以上學(xué)歷,計(jì)算機(jī)、通信、電子信息、軟件工程等相關(guān)專業(yè);四年及以上計(jì)算機(jī)信息相關(guān)工作經(jīng)驗(yàn)。
2.熟練開展大數(shù)據(jù)挖掘基礎(chǔ)算法的開發(fā),MLlib 機(jī)器學(xué)習(xí)開發(fā),深度學(xué)習(xí)的人工神經(jīng)網(wǎng)絡(luò)的開發(fā);熟練使用Python語言及相關(guān)工具實(shí)現(xiàn)模型建立、算開發(fā)、BI展示等業(yè)務(wù)應(yīng)用開發(fā)。
3.掌握Hadoop大數(shù)據(jù)生態(tài)集群的部署與工作原理,包括大數(shù)據(jù)管理框架Zookeeper、YARN、Docker分布式集群的構(gòu)建,資源管控與穩(wěn)定運(yùn)維。理解大數(shù)據(jù)存儲(chǔ)框架HDFS、HBase、NoSQL的技術(shù)原理,掌握大數(shù)據(jù)的計(jì)算框架MapReduce、Hive、Spark、ESearch的運(yùn)用;
4.掌握大數(shù)據(jù)分析理論、工具和方法,如噪聲過濾、數(shù)據(jù)屬性填補(bǔ)、屬性值歸一化、數(shù)據(jù)去重等,進(jìn)而開展大數(shù)據(jù)分類與建模,實(shí)現(xiàn)智能決策,精準(zhǔn)預(yù)判;
5.掌握軟件運(yùn)維系統(tǒng)運(yùn)維業(yè)務(wù)管理流程、資產(chǎn)管理體系、質(zhì)量管理體系、運(yùn)維安全管理要求、文件管理體系。