數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)
數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)
數(shù)據(jù)倉(cāng)庫(kù)工程師負(fù)責(zé)數(shù)據(jù)平臺(tái)相關(guān)的管理工作，如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè)。下面是學(xué)習(xí)啦小編為您精心整理的數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)。
數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)1
職責(zé)：
1、負(fù)責(zé)金融行業(yè)數(shù)據(jù)倉(cāng)庫(kù)開發(fā)工作
2、負(fù)責(zé)與多個(gè)應(yīng)用對(duì)接的接口和框架設(shè)計(jì)
3、充分理解產(chǎn)品需求，能夠結(jié)合需求進(jìn)行任務(wù)設(shè)計(jì)，完成詳細(xì)設(shè)計(jì)文檔的編寫。
崗位要求：
1. 從事數(shù)據(jù)倉(cāng)庫(kù)及商業(yè)智能(BI)領(lǐng)域工作至少3年以上，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)方法論，并有實(shí)際的模型設(shè)計(jì)經(jīng)驗(yàn)，有大型數(shù)倉(cāng)建設(shè)經(jīng)驗(yàn)優(yōu)先;
2. 精通數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和管理技能，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能調(diào)優(yōu)等;
3.有主流商業(yè)/開源ETL工具(Informatica、Datastage、Kettle等)使用經(jīng)驗(yàn)者優(yōu)先;
4. 熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)，包括Hdfs、Map-Reduce、Hive、Hbase、Spark等，具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn);
5. 熟練使用java語(yǔ)言,對(duì)微服務(wù)架構(gòu)有一定了解;
6. 具有較強(qiáng)的團(tuán)隊(duì)意識(shí)與良好的溝通能力及高度的工作責(zé)任感，熱愛(ài)技術(shù)，有很強(qiáng)的鉆研能力，樂(lè)于接受有挑戰(zhàn)性的任務(wù);
7、有團(tuán)隊(duì)管理經(jīng)驗(yàn)優(yōu)先。
數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)2
職責(zé)：
1、負(fù)責(zé)大數(shù)據(jù)開發(fā)工作;
2、負(fù)責(zé)公司數(shù)據(jù)服務(wù)接口平臺(tái)的建設(shè);
3、參與打造數(shù)據(jù)中臺(tái)內(nèi)容的規(guī)劃、設(shè)計(jì)、開發(fā)工作，實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享; 4、參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開發(fā)，搭建離線、近線、實(shí)時(shí)數(shù)據(jù)公共層;
5、參與構(gòu)建非結(jié)構(gòu)化數(shù)據(jù)體系，進(jìn)行網(wǎng)絡(luò)數(shù)據(jù)爬取，數(shù)據(jù)清洗，特征挖掘，統(tǒng)計(jì)分析，并結(jié)合應(yīng)用場(chǎng)景實(shí)現(xiàn)落地。
崗位要求：
1、本科以上學(xué)歷，計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)等相關(guān)專業(yè);
2、熟悉數(shù)據(jù)集成、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)分析等全流程數(shù)據(jù)處理，具備開源或阿里大數(shù)據(jù)平臺(tái)實(shí)戰(zhàn)經(jīng)驗(yàn)，如hive/spark/Maxcompute;
3、熟悉數(shù)據(jù)治理體系，包括數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量等;
4、熟悉常見的離線、實(shí)時(shí)、流式數(shù)據(jù)應(yīng)用場(chǎng)景及架構(gòu);
5、至少掌握一門開發(fā)語(yǔ)言，Java/Python;
6、具備良好的溝通能力和設(shè)計(jì)文檔編寫能力;
7、懂?dāng)?shù)據(jù)挖掘、知識(shí)圖譜的構(gòu)建者優(yōu)先。
數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)3
職責(zé):
負(fù)責(zé)大數(shù)據(jù)數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)，根據(jù)數(shù)據(jù)倉(cāng)庫(kù)及BI項(xiàng)目的需求，制定相關(guān)的設(shè)計(jì)方案和開發(fā)計(jì)劃;
參與數(shù)據(jù)的分析處理和數(shù)據(jù)統(tǒng)計(jì)內(nèi)容的架構(gòu)設(shè)計(jì)與研發(fā);
組織項(xiàng)目組成員完成數(shù)據(jù)倉(cāng)庫(kù)的開發(fā)和運(yùn)維等;
負(fù)責(zé)公司數(shù)據(jù)規(guī)范、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)指標(biāo)梳理與定義;
協(xié)助技術(shù)人員完成數(shù)據(jù)管控平臺(tái)的搭建，完成數(shù)據(jù)規(guī)范管理體系到信息平臺(tái)的落地實(shí)施;
組織開展對(duì)數(shù)據(jù)平臺(tái)各模塊的內(nèi)容進(jìn)行培訓(xùn);
制定和審計(jì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)數(shù)據(jù)庫(kù)模型設(shè)計(jì)規(guī)范;
任職資格:
有一定的互聯(lián)網(wǎng)數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn);
深入了解 Hadoop 生態(tài)系統(tǒng)，熟悉HBase、Hive、Storm、spark等大數(shù)據(jù)開發(fā)工具中一種或幾種;
具備大型數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL 設(shè)計(jì)的相關(guān)經(jīng)驗(yàn);
關(guān)系型數(shù)據(jù)庫(kù)原理基礎(chǔ)扎實(shí)，熟悉 MySQL/PostgreSQL等的使用和調(diào)優(yōu);
有獨(dú)立設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)、熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)理論知識(shí)者優(yōu)先;
數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)4
職責(zé):
1、深入理解業(yè)務(wù)，了解需求和痛點(diǎn)，為風(fēng)控和業(yè)務(wù)部門提供數(shù)據(jù)支持;
2、針對(duì)業(yè)務(wù)需求，參與數(shù)據(jù)倉(cāng)庫(kù)需求分析，制定ETL相關(guān)設(shè)計(jì)方案和開發(fā)計(jì)劃;
3、負(fù)責(zé)數(shù)據(jù)同步，數(shù)據(jù)整合清洗，以及數(shù)據(jù)質(zhì)量的治理;
4、數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)，分層體系構(gòu)建，元數(shù)據(jù)管理監(jiān)控以及權(quán)限控制。
任職資格:
1、重點(diǎn)院校統(tǒng)招本科及以上學(xué)歷，計(jì)算機(jī)基礎(chǔ)扎實(shí);
2、具有2年以上金融貸款類業(yè)務(wù)經(jīng)驗(yàn);
3、熟悉數(shù)據(jù)倉(cāng)庫(kù)理論和數(shù)據(jù)庫(kù)建模，有redshift和AWS經(jīng)驗(yàn)優(yōu)先;
4、精通pgsql/mysql等數(shù)據(jù)庫(kù)，精通sql語(yǔ)言，具有數(shù)據(jù)庫(kù)優(yōu)化/sql優(yōu)化相關(guān)經(jīng)驗(yàn);
5、熟練掌握python/shell語(yǔ)言。
數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)5
職責(zé)：
1.參與打造數(shù)據(jù)中心內(nèi)容的規(guī)劃、設(shè)計(jì)、開發(fā)和優(yōu)化工作，實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享;
2.參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開發(fā)，搭建離線、實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù);
3.參與數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā);
4.負(fù)責(zé)日常應(yīng)用系統(tǒng)監(jiān)控，發(fā)現(xiàn)異常問(wèn)題及時(shí)分發(fā)，并跟進(jìn)后續(xù)處理;
5.編寫Python程序，或ETL技術(shù)完成日常數(shù)據(jù)抽取和整理任務(wù)，可獨(dú)立進(jìn)行數(shù)據(jù)分析;
崗位要求：
1.熟悉ETL開發(fā)、數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)流程，熟悉Oracle, MS SQL Server 等主流數(shù)據(jù)庫(kù)，表結(jié)構(gòu)設(shè)計(jì)，存儲(chǔ)過(guò)程編寫;
2.熟練掌握常用Linux命令，具備shell編程能力，熟練掌握Python編程語(yǔ)言
3.具有較強(qiáng)的語(yǔ)言表達(dá)和溝通能力，良好的團(tuán)隊(duì)合作精神
4.邏輯思維能力強(qiáng)，對(duì)數(shù)據(jù)敏感，有較強(qiáng)學(xué)習(xí)能力和創(chuàng)新思維;
5.具有高度的責(zé)任感和敬業(yè)精神，能夠承受較大的工作壓力