大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述
大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述
大數(shù)據(jù)架構(gòu)師需要負責(zé)指導(dǎo)開發(fā)人員完成數(shù)據(jù)模型規(guī)劃建設(shè)、分析模型構(gòu)建及分析呈現(xiàn)。以下是學(xué)習(xí)啦小編整理的大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述。
大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述1
職責(zé):
1.負責(zé)公司新業(yè)務(wù)方向平臺大數(shù)據(jù)基礎(chǔ)架構(gòu)的搭建及后期數(shù)據(jù)處理體系的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率。為公司未來方向性產(chǎn)品提供大數(shù)據(jù)底層平臺的支持和保證。
2.負責(zé)制定大數(shù)據(jù)平臺調(diào)用約束和規(guī)范;
3.負責(zé)大數(shù)據(jù)方向技術(shù)難題的解決,以及代碼質(zhì)量的把控;
4.作為大數(shù)據(jù)開發(fā)團隊的leader,負責(zé)大數(shù)據(jù)系統(tǒng)平臺開發(fā)團隊建設(shè)與人才梯隊培養(yǎng),分享技術(shù)經(jīng)驗,撰寫相關(guān)技術(shù)文檔指導(dǎo)和培訓(xùn)工程師。
任職要求:
1.熱衷于大數(shù)據(jù)技術(shù),并能平衡大數(shù)據(jù)性能、穩(wěn)定性、擴展性多重要素進行設(shè)計和優(yōu)化;
2.熟悉服務(wù)器基本知識,能夠評估系統(tǒng)硬件性能瓶頸;
3.掌握Linux操作系統(tǒng)的配置,管理及優(yōu)化,能夠獨立排查及解決操作系統(tǒng)層的各類問題,并能提供解決問題的理論依據(jù);
4.精通Java服務(wù)器編程,熟悉JVM原理,對數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計有較為深刻的理解;
5.精通elasticsearch、Redis、hadoop、Kafka、Zookeeper、Yarn、Hbase、Spark底層架構(gòu),熟悉原理、源碼、集群部署,包括參數(shù)優(yōu)化、Bug修復(fù),貢獻過代碼或提交過bug者優(yōu)先
6.具備數(shù)據(jù)中心資源管理、監(jiān)控、調(diào)度等系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先,具備分布式系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先;
7.具有應(yīng)用大數(shù)據(jù)技術(shù)處理的項目開發(fā)、維護超過兩年的經(jīng)驗者優(yōu)先;
8.具有良好的文檔編寫能力,可進行方案設(shè)計、架構(gòu)設(shè)計。
大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述2
職責(zé):
1.負責(zé)過多個大數(shù)據(jù)項目的架構(gòu);
2.精通Hadoop、Spark, HBase等主流的大數(shù)據(jù)平臺、精通各組件優(yōu)化設(shè)計原理;
3.精通大數(shù)據(jù)實時流式處理的設(shè)計和應(yīng)用;
3.熟悉大數(shù)據(jù)平臺調(diào)優(yōu),具備大數(shù)據(jù)生產(chǎn)平臺調(diào)優(yōu)經(jīng)驗;
4.金融行業(yè),運營商行業(yè)大數(shù)據(jù)架構(gòu)經(jīng)驗更優(yōu);
5.研究大數(shù)據(jù)技術(shù)的最新發(fā)展,并引入到公司技術(shù)架構(gòu);
6.指導(dǎo)大數(shù)據(jù)工程師的日常工作,并培養(yǎng)技術(shù)骨干。
任職資格:
1.計算機相關(guān)專業(yè)本科或以上學(xué)歷;
2.具有5年以上大數(shù)據(jù)相關(guān)開發(fā)經(jīng)驗;
3.具有2年以上帶團隊經(jīng)驗
4.對Hadoop/Hive/Spark/HBase/ES等等大數(shù)據(jù)常用技術(shù)有深刻理解,能夠帶領(lǐng)團隊進行技術(shù)攻堅,完成中間件的實施、改造、調(diào)優(yōu);
5.精通海量數(shù)據(jù)和實時數(shù)據(jù)的分析處理,能對線上的數(shù)據(jù)處理性能問題做調(diào)優(yōu);
6.精通數(shù)據(jù)倉庫以及維度建模原理,有大型數(shù)據(jù)倉庫建設(shè)經(jīng)驗;
7.精通關(guān)系型數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫的使用,熟悉相關(guān)理論;
8.溝通順暢,重點突出,高效。
大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述3
職責(zé):
負責(zé)公司大數(shù)據(jù)產(chǎn)品架構(gòu)的設(shè)計與實現(xiàn);
配合大數(shù)據(jù)產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;
負責(zé)大數(shù)據(jù)產(chǎn)品架構(gòu)的持續(xù)優(yōu)化設(shè)計;
負責(zé)大數(shù)據(jù)產(chǎn)品核心組件設(shè)計;
負責(zé)大數(shù)據(jù)相關(guān)數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫設(shè)計以及大數(shù)據(jù)產(chǎn)品研發(fā)工作;
為應(yīng)用開發(fā)團隊提供技術(shù)支撐。
及時向上級反饋工作進度、遇到的問題或者對現(xiàn)有工作的建議等;
完成上級領(lǐng)導(dǎo)交辦的其它各項工作。
任職資格:
985/211本科及以上學(xué)歷,3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗、
2年以上大數(shù)據(jù)架構(gòu)設(shè)計經(jīng)驗;
豐富的JAVA研發(fā)經(jīng)驗,精通JAVA,熟悉Python Scala等編程語言;具備深厚的分布式系統(tǒng)或數(shù)據(jù)庫系統(tǒng)的理論基礎(chǔ),熟悉分布式計算系統(tǒng)的工作機制,具有分布式文件系統(tǒng)、分布式數(shù)據(jù)庫系統(tǒng)、集群存儲系統(tǒng)等架構(gòu)設(shè)計經(jīng)驗;
熟悉整個大數(shù)據(jù)的完整處理流程(數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖掘、機器學(xué)習(xí)和數(shù)據(jù)可視化);
精通各種大數(shù)據(jù)相關(guān)技術(shù)體系:Hadoop、Spark、Storm、ElasticSearch、Kafka;
有數(shù)據(jù)挖掘、機器學(xué)習(xí)相關(guān)應(yīng)用或研究背景;
溝通能力較好,積極主動意識較強,責(zé)任心較強。
具備優(yōu)秀的邏輯思維能力,對解決挑戰(zhàn)性問題充滿熱情,善于解決問題和分析問題;
良好的團隊合作精神,較強的溝通能力和學(xué)習(xí)能力 ;
大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述4
職責(zé):
1.負責(zé)企業(yè)數(shù)據(jù)中心建設(shè),設(shè)計數(shù)據(jù)邏輯模型和物理模型,并完成相關(guān)開發(fā)
2.梳理公司各業(yè)務(wù)線常用的指標和維度,統(tǒng)一指標定義口徑
3.根據(jù)數(shù)據(jù)應(yīng)用開發(fā)和數(shù)據(jù)分析需求,設(shè)計數(shù)據(jù)倉庫信息層模型,提高數(shù)據(jù)開發(fā)的效率
4.負責(zé)數(shù)據(jù)模型的運營和優(yōu)化,及時響應(yīng)業(yè)務(wù)邏輯變更,保證模型的數(shù)據(jù)質(zhì)量和穩(wěn)定性
5.負責(zé)公司數(shù)據(jù)標簽體系的建設(shè),并推動標簽體系在實際業(yè)務(wù)場景中落地
崗位要求:
1.5年以上DW/BI數(shù)據(jù)架構(gòu)設(shè)計、模型設(shè)計和性能調(diào)優(yōu)等相關(guān)經(jīng)驗
2.有較強的數(shù)據(jù)分析能力,精通數(shù)據(jù)倉庫架構(gòu),熟悉Erwin或PowerDesigner建模工具
3.精通一種主流關(guān)系數(shù)據(jù)庫(如mysql等),熟悉Hive開發(fā)
4.有電商業(yè)務(wù)經(jīng)驗,元數(shù)據(jù)管理,數(shù)據(jù)質(zhì)量管理或標簽體系搭建經(jīng)驗者優(yōu)先
5.優(yōu)秀的協(xié)調(diào)溝通與團隊協(xié)作能力,極強的責(zé)任心,能承受一定的工作壓力,認同企業(yè)文化和團隊價值
大數(shù)據(jù)架構(gòu)師崗位的具體職責(zé)表述5
職責(zé):
1、大數(shù)據(jù)平臺的規(guī)劃、設(shè)計、實施,并優(yōu)化數(shù)據(jù)庫;
2、對數(shù)據(jù)庫進行管理,負責(zé)數(shù)據(jù)庫應(yīng)用系統(tǒng)的運營及監(jiān)控;
3、對數(shù)據(jù)庫性能分析與調(diào)優(yōu),排錯,保證數(shù)據(jù)正確率;
4、配合其他部門進行的數(shù)據(jù)處理、查詢,統(tǒng)計和分析工作;
5、完成公司下達的項目開發(fā)任務(wù)。
任職要求:
1、計算機及相關(guān)專業(yè)本科以上學(xué)歷,5年以上軟件開發(fā)從業(yè)經(jīng)驗,其中包括至少2年以上的大數(shù)據(jù)開發(fā)工作經(jīng)驗;
2、熟悉hive,hadoop/spark,hbase等大數(shù)據(jù)相關(guān)技術(shù)架構(gòu),有管理或優(yōu)化大型分布式集群經(jīng)驗;
3、熟悉linux基本命令,精通SQL腳本的編寫,有豐富的數(shù)據(jù)庫管理、運維調(diào)優(yōu)經(jīng)驗;
4、熟悉C++、Java、C#等開發(fā)語言;
5、有互聯(lián)網(wǎng)電商行業(yè)大數(shù)據(jù)分析處理和大型數(shù)據(jù)倉庫的設(shè)計和實施經(jīng)驗;
6、有分布式系統(tǒng)分析及架構(gòu)設(shè)計經(jīng)驗和大型計算集群的基礎(chǔ)設(shè)施開發(fā)維護經(jīng)驗;
7、快速處理系統(tǒng)突發(fā)事件的能力,較強的學(xué)習(xí)和創(chuàng)新能力;
8、良好的溝通能力和團隊合作精神。