學習啦 > 實用范文 > 辦公文秘 > 崗位職責 > 大數據架構師崗位的工作職責

大數據架構師崗位的工作職責

時間: 舒欣1213 分享

大數據架構師崗位的工作職責

  大數據架構師需要負責深入理解業(yè)務需求,對業(yè)務建模,設計系統(tǒng)架構,滿足業(yè)務需求。以下是學習啦小編整理的大數據架構師崗位的工作職責。

  大數據架構師崗位的工作職責1

  職責:

  1.負責數據倉庫建設,基于數據驅動構建企業(yè)級數據模型,根據架構設計進行各層數據模型開發(fā)。

  2.面向PB級別超大規(guī)模數據處理和查詢需求,設計適合業(yè)務變化的合理的多維數據分析系統(tǒng)架構,滿足多樣性需求。

  3.構建設計良好的數據流、調度系統(tǒng)、查詢引擎、監(jiān)控系統(tǒng),保證系統(tǒng)穩(wěn)定高效運行,以實現(xiàn)數據的最大價值。

  4.指導團隊成員開展數據倉庫建設。

  5.參與重點項目的評審,參與企業(yè)數據管理體系建設。

  任職要求:

  1.統(tǒng)招本科及以上學歷。

  2.從事數據倉庫領域至少5年以上,熟悉數據倉庫模型設計與ETL開發(fā)經驗 ,掌握Kimball的維度建模設計方法,具備海量數據加工處理(ETL)相關經驗 。

  3.具有一定數據模型和數據架構基礎,熟悉hadoop\hive和常用數據庫。

  4. 精通SQL,有一定的SQL性能調優(yōu)經驗,熟悉hive sql的開發(fā)。

  5.具有管理團隊開發(fā)經驗,具備良好的組織能力、協(xié)調能力及項目管理能力。

  6.具有較好的文字功底及語言表達能力,能夠快速、準確地理解需求。

  7.具有專研、快速學習和創(chuàng)新精神,具備獨立分析問題和解決問題的能力。

  8.具有責任心,時間觀念強,工作獨立性強,有良好的團隊合作精神。

  9.全日制普通本科畢業(yè)。

  大數據架構師崗位的工作職責2

  職責:

  1、負責大數據平臺架構的規(guī)劃與設計;

  2、負責大數據平臺技術框架的選型與技術難點攻關;

  3、參與企業(yè)級大數據產品和應用規(guī)劃;

  4、研究跟進大數據架構領域新技術并分享;

  5、大數據處理和分析應用平臺的設計指導。

  任職資格:

  1、 具備深厚的分布式系統(tǒng)或數據庫系統(tǒng)的理論基礎,熟悉分布式計算系統(tǒng)的工作機制,具有分布式文件系統(tǒng)、分布式數據庫系統(tǒng)、集群存儲系統(tǒng)等架構設計經驗;

  2、熟悉BI平臺架構及相關項目標準,大數據解決方案包括Hadoop、Spark、Storm、機器學習等大數據平臺解決方案;

  3、熟悉MySql/Postgresql/Oracle/MongoDB/Redis等主流數據數據庫;

  4、 精通Linux/Unix環(huán)境,精通J java、scala、python、R中的一種或多種語言;

  5、 具備優(yōu)秀的團隊意識和溝通能力,學習能力和主動性強,具有鉆研精神,充滿激情,樂于接受挑戰(zhàn);

  6、大專及以上學歷,3年及以上工作經驗。

  大數據架構師崗位的工作職責3

  職責:

  1. 規(guī)劃設計大數據平臺整體架構,規(guī)劃各種組件,并且指導技術團隊完成相關系統(tǒng)驗證、安裝、部署、配置;

  2. 負責制定大數據平臺技術規(guī)范和接口規(guī)范,指導研發(fā)團隊按照規(guī)范進行系統(tǒng)開發(fā);

  3. 配合商務人員完成售前技術支持工作;

  4. 完成其他與數據應用有關的技術工作;

  任職要求:

  1. 計算機相關專業(yè)本科學歷,5年以上工作經驗;

  2. 對大數據技術棧有非常深刻的了解;具備架構設計的實際經驗;

  3. 對信息安全架構設計及實施有一定的經驗;

  4. 熟悉Linux、Windows等操作系統(tǒng)的安裝配置;

  5. 熟悉互聯(lián)網應用的安裝配置;熟悉常見大數據技術棧組件的安裝配置;熟悉Visio等繪圖工具的使用;

  6. 有衛(wèi)生信息化建設經驗者優(yōu)先;有容器安裝部署經驗者優(yōu)先。

  大數據架構師崗位的工作職責4

  職責:

  1.能夠帶領技術人員基于hadoop平臺進行海量數據應用系統(tǒng)開發(fā);

  2.負責結構化和非結構化數據的解析和清洗,海量數據查詢和報表展現(xiàn);

  3.負責超大規(guī)模數據平臺的搭建、維護和優(yōu)化;

  4.負責大數據采集、存儲框架研究,參與在線或離線數據存儲模型設計;

  5.負責大數據平臺新技術的開發(fā)使用和性能優(yōu)化,測試。

  任職資格:

  1.計算機相關專業(yè)本科及以上學歷;

  2. 熟悉hadoop相關各種開源項目,比如HDFS/Hive/Hbase等有實際應用。(5年以上開發(fā)經驗者優(yōu)先);

  3.兩年以上熟練編寫mapreduce代碼經驗,有三年以上網絡日志分析、ETL經驗。熟悉日志分析框架chukwa,flume,scribe者優(yōu)先;

  4.兩年以上海量數據存儲的安裝部署、優(yōu)化、二次開發(fā)經驗,對大規(guī)模數據存儲、傳輸、處理等有豐富的經驗;

  5.在數據挖掘、數據密集型處理、分布式計算、網格計算領域有深入理論基礎;

  6.具有較強的文檔撰寫能力,較強的團隊精神和合作精神,對工作有熱情,能承受壓力。

  大數據架構師崗位的工作職責5

  職責

  1、負責企業(yè)級大數據平臺、數據云服務的設計與開發(fā);

  2、基于大數據生態(tài)圈,支持智慧交通等大數據場景應用實現(xiàn);

  3、負責公司大數據產品的設計、封裝與落地;

  4、負責學習大數據相關算法研究、實現(xiàn)與應用

  任職要求

  1、統(tǒng)招本科及以上學歷;2年以上智慧城市建設或交通行業(yè)信息化相關工作經驗,3年以上大數據架構設計、開發(fā)經驗;

  2、精通大數據生態(tài)圈的技術,包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive,具備源碼級問題解決和集群優(yōu)化改造能力;

  3、熟悉常用編程語言,包括Java、Python、Scala等;

  4、具有很強的技術研發(fā)和創(chuàng)新能力,能有效把握技術發(fā)展方向,有較強的執(zhí)行能力、學習能力、溝通能力、適應能力,責任心強;

67229