數(shù)據(jù)架構(gòu)資深專家

　　工作地點(diǎn)：南京市

　　學(xué)　　歷：碩士研究生及以上

　　工作類(lèi)型：全職

　　招聘人數(shù)：若干

　　發(fā)布時(shí)間：2021-02-18

　　職位描述

　　1、負(fù)責(zé)Hadoop大數(shù)據(jù)平臺(tái)、AI平臺(tái)架構(gòu)設(shè)計(jì)和軟件技術(shù)選型，參與部門(mén)技術(shù)發(fā)展路線的制定和實(shí)踐，以及大數(shù)據(jù)平臺(tái)、AI平臺(tái)相關(guān)標(biāo)準(zhǔn)制定等工作；

　　2、負(fù)責(zé)Hadoop生態(tài)圈相關(guān)組件功能、性能優(yōu)化設(shè)計(jì)和實(shí)施落地工作；

　　3、參與團(tuán)隊(duì)技術(shù)人才培養(yǎng)，指導(dǎo)團(tuán)隊(duì)成員工作，提升團(tuán)隊(duì)研發(fā)能力；

　　4、研究大數(shù)據(jù)技術(shù)、AI技術(shù)發(fā)展動(dòng)態(tài)，研究新型計(jì)算框架，并能夠提出優(yōu)化解決方案；

　　5、負(fù)責(zé)大數(shù)據(jù)平臺(tái)、AI平臺(tái)的架構(gòu)審核、業(yè)務(wù)監(jiān)控、應(yīng)急響應(yīng)、容量規(guī)劃、技術(shù)攻關(guān)等，跟進(jìn)并處理大數(shù)據(jù)平臺(tái)系統(tǒng)問(wèn)題及故障解決跟蹤優(yōu)化，不斷提升集群服務(wù)質(zhì)量，并根據(jù)實(shí)際情況進(jìn)行優(yōu)化；

　　6、負(fù)責(zé)企業(yè)數(shù)據(jù)產(chǎn)品和數(shù)據(jù)倉(cāng)庫(kù)等相關(guān)需求分析、數(shù)據(jù)規(guī)劃、數(shù)據(jù)模型設(shè)計(jì)等工作；

　　7、負(fù)責(zé)企業(yè)數(shù)據(jù)資產(chǎn)地圖、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)安全、數(shù)據(jù)質(zhì)量和生命周期管理等設(shè)計(jì)工作；

　　8、深入業(yè)務(wù)，理解業(yè)務(wù)的數(shù)據(jù)需求，和數(shù)據(jù)產(chǎn)品、算法團(tuán)隊(duì)等合作，挖掘數(shù)據(jù)價(jià)值，賦能業(yè)務(wù)。

　　任職要求

　　學(xué)歷及工作年限要求：

　　計(jì)算機(jī)相關(guān)專業(yè)碩士及以上學(xué)歷，10年以上相關(guān)工作經(jīng)驗(yàn)。

　　任職要求滿足以下三種類(lèi)型之一：

　　一、

　　1、熟悉Hadoop生態(tài)圈的相關(guān)組件，深度了解HDFS、Hive、Impala、HBase、Yarn等組件的工作原理和使用，具備2年以上Hadoop調(diào)優(yōu)經(jīng)驗(yàn)；

　　2、了解大數(shù)據(jù)平臺(tái)虛擬化、存儲(chǔ)計(jì)算分離、基礎(chǔ)架構(gòu)服務(wù)化等構(gòu)建方法，熟悉Hadoop集群安全管控方案，并能熟練使用Kerberos、Sentry等構(gòu)建集群的安全管控體系；

　　3、熟悉Spark、Flink等計(jì)算組件，并至少有2個(gè)項(xiàng)目的實(shí)施經(jīng)驗(yàn)；

　　4、熟練掌握J(rèn)ava語(yǔ)言、Python語(yǔ)言或Scala語(yǔ)言之一，具備3年以上使用經(jīng)驗(yàn)；

　　5、熟練掌握Linux操作系統(tǒng)，并能熟練使用Shell編程；

　　6、有較大規(guī)模集群規(guī)劃、監(jiān)控與運(yùn)維工作經(jīng)驗(yàn)者優(yōu)先；

　　7、良好的自我學(xué)習(xí)能力、自我管理能力、溝通能力和團(tuán)隊(duì)協(xié)作能力；

　　8、5年以上大數(shù)據(jù)平臺(tái)架構(gòu)領(lǐng)域工作經(jīng)驗(yàn)。

　　二、

　　1、對(duì)k8s、docker、etcd等云原生相關(guān)組件有較深入了解，并具有一定的運(yùn)營(yíng)能力；

　　2、精通golang，有對(duì)k8s進(jìn)行二次開(kāi)發(fā)能力更佳；

　　3、熟悉容器網(wǎng)絡(luò)，對(duì)如flannel、calico等有所了解；

　　4、熟悉分布式存儲(chǔ)，對(duì)ceph等有所了解；

　　5、熟悉Linux基本操作，熟悉算法與數(shù)據(jù)結(jié)構(gòu)；

　　6、具備與崗位相適應(yīng)的數(shù)據(jù)科學(xué)、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)基礎(chǔ)知識(shí)體系；

　　7、具有大型項(xiàng)目架構(gòu)經(jīng)驗(yàn)、高性能集群建設(shè)經(jīng)驗(yàn)者優(yōu)先。

　　三、

　　1、有數(shù)據(jù)架構(gòu)解決方案方面的經(jīng)驗(yàn)，如數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市、數(shù)據(jù)中臺(tái)等；

　　2、熟悉數(shù)據(jù)倉(cāng)庫(kù)方法論，深入了解數(shù)據(jù)倉(cāng)庫(kù)技術(shù)體系，并支撐過(guò)大規(guī)模實(shí)際業(yè)務(wù)場(chǎng)景；

　　3、參與過(guò)企業(yè)數(shù)據(jù)治理，如數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量體系的建設(shè)工作；

　　4、熟悉金融業(yè)務(wù)，有金融行業(yè)經(jīng)驗(yàn)背景者優(yōu)先；

　　5、善于溝通，能快速理解業(yè)務(wù)場(chǎng)景，具備優(yōu)秀的技術(shù)和業(yè)務(wù)結(jié)合的能力。