職位概述
- 工作職責(zé)：1、基于公司業(yè)務(wù)需要，建設(shè)和設(shè)計(jì)數(shù)據(jù)倉庫及數(shù)據(jù)模型，維護(hù)與完善數(shù)據(jù)模型各類信息； 2、負(fù)責(zé)大數(shù)據(jù)資產(chǎn)管理、集群治理的方案設(shè)計(jì)與落地 3、負(fù)責(zé)數(shù)據(jù)倉庫設(shè)計(jì)，以及數(shù)據(jù)ETL的設(shè)計(jì)、開發(fā)與性能優(yōu)化； 4、負(fù)責(zé)核心數(shù)據(jù)倉庫模型代碼開發(fā)，跟進(jìn)ETL的完成。負(fù)責(zé)接入源系統(tǒng)數(shù)據(jù)的腳本開發(fā)、數(shù)據(jù)測(cè)試與驗(yàn)證、以及調(diào)度開發(fā)等工作； 5、跟蹤、監(jiān)測(cè)、維護(hù)及優(yōu)化數(shù)據(jù)模型，確保數(shù)據(jù)模型被有效使用
崗位要求：1、熟悉數(shù)據(jù)資產(chǎn)管理、集群治理、數(shù)據(jù)倉庫和數(shù)據(jù)模型建設(shè)的相關(guān)技術(shù)細(xì)節(jié)； 2、熟悉 Hadoop，Hive，Spark等一種以上大數(shù)據(jù)處理工具和技術(shù)， 有實(shí)際大數(shù)據(jù)開發(fā)、處理經(jīng)驗(yàn)；具備編寫、優(yōu)化復(fù)雜SQL的能力； 3、負(fù)責(zé)過大型數(shù)據(jù)平臺(tái)或數(shù)據(jù)倉庫設(shè)計(jì)，具有扎實(shí)的大數(shù)據(jù)和數(shù)據(jù)倉庫的理論功底；掌握一定元數(shù)據(jù)管理方法論、元數(shù)據(jù)管理設(shè)計(jì)； 4、掌握一定的數(shù)據(jù)質(zhì)量管理方法論、評(píng)估模型設(shè)計(jì)、質(zhì)量報(bào)表設(shè)計(jì)，能夠根據(jù)數(shù)據(jù)質(zhì)量要求制定數(shù)據(jù)質(zhì)量探查規(guī)則并進(jìn)行實(shí)施； 5、邏輯思維能力強(qiáng)，對(duì)數(shù)據(jù)敏感，有較強(qiáng)的學(xué)習(xí)能力和創(chuàng)新思維； 6、5年以上大數(shù)據(jù)開發(fā)、分析相關(guān)項(xiàng)目經(jīng)驗(yàn)； 7、熟悉sparkStreaming、flink，且有實(shí)時(shí)項(xiàng)目開發(fā)經(jīng)驗(yàn)，能獨(dú)立完成開發(fā)任務(wù)； 8、有互聯(lián)網(wǎng)數(shù)據(jù)研發(fā)、海量數(shù)據(jù)處理分析、OLAP項(xiàng)目開發(fā)或用戶行為數(shù)據(jù)分析經(jīng)驗(yàn)者優(yōu)先； 9、有參與開源項(xiàng)目對(duì)社區(qū)有貢獻(xiàn)的經(jīng)驗(yàn)者優(yōu)先； 10、熱愛計(jì)算機(jī)科學(xué)和互聯(lián)網(wǎng)技術(shù)，樂于快速學(xué)習(xí)和嘗試新技術(shù)、新工具。
|