大數(shù)據(jù)架構(gòu)師工作的職責(zé)
大數(shù)據(jù)架構(gòu)師工作的職責(zé)
大數(shù)據(jù)架構(gòu)師負(fù)責(zé)大數(shù)據(jù)系統(tǒng)設(shè)計(jì)、功能模塊設(shè)計(jì)，數(shù)據(jù)平臺(tái)的搭建、維護(hù)和優(yōu)化。下面是學(xué)習(xí)啦小編整理的大數(shù)據(jù)架構(gòu)師工作的職責(zé)。
大數(shù)據(jù)架構(gòu)師工作的職責(zé)1
職責(zé)：
1、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目平臺(tái)架構(gòu)的評(píng)估、規(guī)劃和設(shè)計(jì)
2、開發(fā)大數(shù)據(jù)平臺(tái)的核心模塊代碼，負(fù)責(zé)大數(shù)據(jù)平臺(tái)的搭建，完成系統(tǒng)調(diào)試、集成與實(shí)施，保證大數(shù)據(jù)產(chǎn)品的上線運(yùn)行
3、根據(jù)業(yè)務(wù)需求整合優(yōu)化數(shù)據(jù)架構(gòu)，保證產(chǎn)品的可靠性、穩(wěn)定性
4、指導(dǎo)開發(fā)人員完成數(shù)據(jù)模型規(guī)劃建設(shè)，分析模型構(gòu)建及分析呈現(xiàn)
5、深入研究大數(shù)據(jù)相關(guān)技術(shù)和產(chǎn)品，跟進(jìn)業(yè)界先進(jìn)技術(shù);
6、根據(jù)項(xiàng)目要求編寫相關(guān)技術(shù)文檔;
7、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的架構(gòu)評(píng)審，代碼評(píng)審，上線評(píng)審;參與數(shù)據(jù)應(yīng)用需求、設(shè)計(jì)、審核和評(píng)審;
8、負(fù)責(zé)核心模塊研發(fā)，負(fù)責(zé)大數(shù)據(jù)平臺(tái)的搭建，完成系統(tǒng)調(diào)試、集成與實(shí)施;
9. 負(fù)責(zé)關(guān)鍵功能的開發(fā)，技術(shù)難題的解決，以及輸出代碼的關(guān)鍵把控;
10. 負(fù)責(zé)對(duì)使用關(guān)鍵技術(shù)的預(yù)研和選型，完成 PoC ;
11. 指導(dǎo)工程師完成開發(fā)工作，并能分享技術(shù)經(jīng)驗(yàn)。
任職資格:
1、精通Linux操作系統(tǒng)，熟練使用Java;
2、3年以上大數(shù)據(jù)項(xiàng)目實(shí)戰(zhàn)經(jīng)驗(yàn)，兩個(gè)項(xiàng)目的架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)，熟悉Hadoop、Hbase、Storm、Spark、Pig等開源框架，并熟悉其工作原理;
3、有Hadoop、Spark、Hbase平臺(tái)性能調(diào)優(yōu)經(jīng)驗(yàn);
4、熟悉其它分布式存儲(chǔ)相關(guān)技術(shù)，包括HDFS，Hive、Redis、Mongodb、 Flume、Kafaka、Sqoop、Zookeeper、ElasticSearch等;
5、熟悉Java開發(fā)常用框架.如Spring、MyBatis等;
6、熟悉關(guān)系型數(shù)據(jù)庫(kù)如oracle及數(shù)據(jù)庫(kù)編程。
7、能夠根據(jù)項(xiàng)目情況安排人力、分配任務(wù)，具有較強(qiáng)的團(tuán)隊(duì)管理能力。
8、碩士以上學(xué)歷，10年以上的工作經(jīng)驗(yàn)。
大數(shù)據(jù)架構(gòu)師工作的職責(zé)2
職責(zé)：
1. 負(fù)責(zé)設(shè)計(jì)企業(yè)級(jí)大數(shù)據(jù)平臺(tái)的整體架構(gòu)，從技術(shù)層面制定清晰的大數(shù)據(jù)產(chǎn)品與系統(tǒng)技術(shù)架構(gòu)，并負(fù)責(zé)實(shí)現(xiàn)關(guān)鍵技術(shù)和產(chǎn)品。
2. 負(fù)責(zé)設(shè)計(jì)具有創(chuàng)新價(jià)值的大數(shù)據(jù)底層平臺(tái)、大數(shù)據(jù)上層應(yīng)用系統(tǒng)等，帶領(lǐng)團(tuán)隊(duì)完成有質(zhì)變的技術(shù)解決方案。
3. 負(fù)責(zé)組織同事研究行內(nèi)最前沿的技術(shù)發(fā)展方向，突破現(xiàn)有的技術(shù)難題。
4. 負(fù)責(zé)研究院對(duì)外項(xiàng)目合作協(xié)調(diào)與支持，編寫項(xiàng)目建設(shè)方案及后期項(xiàng)目建設(shè)支持。
任職要求：
1. 碩士及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)。
2. JAVA基礎(chǔ)扎實(shí),不少于8年的一線開發(fā)經(jīng)驗(yàn)，精通Spring boot/MyBatis/Restful API的開發(fā)與管理. 熟悉ReactJS/Angular/Vue之一前端開發(fā)技術(shù)，熟悉Maven或Ant.，熟悉Python語(yǔ)言開發(fā)加分。
3. 不少于4年大數(shù)據(jù)的直接研發(fā)經(jīng)驗(yàn)，精通Hadoop/Spark系統(tǒng)，有hands-on的架構(gòu)設(shè)計(jì)、性能調(diào)優(yōu)、開發(fā)經(jīng)驗(yàn)。有MongoDB、Kafka、Hbase/Cassandra/Storm/Hive 等系統(tǒng)的開發(fā)經(jīng)驗(yàn)。
4. 掌握分布式系統(tǒng)原理，對(duì)分布式存儲(chǔ)、流式計(jì)算、消息隊(duì)列中的一項(xiàng)或多項(xiàng)有深入的理解和認(rèn)識(shí)。
5. 熟悉分布式系統(tǒng)的監(jiān)控、運(yùn)維、故障恢復(fù)，高可用原理和設(shè)計(jì)理念。
6. 算法基礎(chǔ)扎實(shí)，熟悉常見(jiàn)的數(shù)據(jù)結(jié)構(gòu)，掌握大規(guī)模高并發(fā)訪問(wèn)、大數(shù)據(jù)開發(fā)等處理經(jīng)驗(yàn);熟練的Linux系統(tǒng), 網(wǎng)絡(luò), 內(nèi)存和存儲(chǔ)等方面知識(shí)。
7. 必須要有千萬(wàn)級(jí)別的項(xiàng)目管理經(jīng)驗(yàn)，包括但不限于前期需求溝通，建設(shè)方案編寫，中期項(xiàng)目實(shí)施，進(jìn)度匯報(bào)，后期項(xiàng)目維護(hù)。
大數(shù)據(jù)架構(gòu)師工作的職責(zé)3
職責(zé)：
把控大數(shù)據(jù)系統(tǒng)及全公司的產(chǎn)品做技術(shù)選型和架構(gòu)設(shè)計(jì);
負(fù)責(zé)公司產(chǎn)品需求技術(shù)解決方案的編制設(shè)計(jì)工作,并能夠?qū)⒔鉀Q方案清晰地傳達(dá)給項(xiàng)目組成員;
主導(dǎo)項(xiàng)目關(guān)鍵技術(shù)問(wèn)題的攻關(guān),協(xié)助項(xiàng)目管理對(duì)技術(shù)問(wèn)題進(jìn)行跟進(jìn);
協(xié)助解決具體研發(fā)過(guò)程中的問(wèn)題;
定期進(jìn)行新技術(shù)研究和匯報(bào);
對(duì)產(chǎn)品線進(jìn)行技術(shù)方案支持，及客戶、市場(chǎng)技術(shù)調(diào)研
任職要求：
1. 全日制綜合類大學(xué)本科及以上學(xué)歷，計(jì)算機(jī)科學(xué)與技術(shù)、信息工程、大數(shù)據(jù)、通訊相關(guān)專業(yè)(如有特殊經(jīng)歷者酌情考慮);
2. 擁有多年系統(tǒng)設(shè)計(jì)與開發(fā)工作經(jīng)驗(yàn)，深刻理解計(jì)算機(jī)、互聯(lián)網(wǎng)有關(guān)技術(shù)與理論、設(shè)計(jì)模式，深刻理解多線程、內(nèi)存數(shù)據(jù)庫(kù)、分布式系統(tǒng)、大數(shù)據(jù)相關(guān)的設(shè)計(jì)、架構(gòu)規(guī)劃、開發(fā)經(jīng)驗(yàn)者優(yōu)先;
3. 深入理解各類技術(shù)與產(chǎn)品的原理與思想，有較強(qiáng)需求分析和技術(shù)設(shè)計(jì)與實(shí)現(xiàn)能力;
大數(shù)據(jù)架構(gòu)師工作的職責(zé)4
職責(zé)：
1、正確理解業(yè)務(wù)需求，對(duì)需求進(jìn)行工作量評(píng)估;
2、參與項(xiàng)目相關(guān)的需求、設(shè)計(jì)、投產(chǎn)手冊(cè)等文檔的編寫;
3、根據(jù)進(jìn)度計(jì)劃，完成所承擔(dān)功能模塊的設(shè)計(jì)、開發(fā)、單元測(cè)試、聯(lián)調(diào)測(cè)試;
4、配合測(cè)試組修復(fù)代碼缺陷，確保功能實(shí)現(xiàn)與代碼質(zhì)量;
5、負(fù)責(zé)所承擔(dān)功能模塊投產(chǎn)、部署，及上線后的日常維護(hù);
6、完成項(xiàng)目經(jīng)理或者架構(gòu)師安排的其他工作;
任職資格：
1、本科以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
2、熟悉Linux 環(huán)境，掌握shell或python;
3、熟練使用hadoop，hive，HBase，YARN，kafka，spark等大數(shù)據(jù)開發(fā)組件;
4、精通 ETL，數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)和開發(fā);
5、有大數(shù)據(jù)處理實(shí)戰(zhàn)經(jīng)驗(yàn)，熟悉整個(gè)大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲(chǔ);
6、較強(qiáng)的動(dòng)手能力和學(xué)習(xí)能力，良好的溝通能力、團(tuán)隊(duì)協(xié)調(diào)能力;
7、具有銀行、金融行業(yè)從業(yè)背景者優(yōu)先。
大數(shù)據(jù)架構(gòu)師工作的職責(zé)5
職責(zé)：
1. 負(fù)責(zé)大數(shù)據(jù)基礎(chǔ)平臺(tái)、海量數(shù)據(jù)存儲(chǔ)/處理分布式平臺(tái)、數(shù)據(jù)分析系統(tǒng)架構(gòu)設(shè)計(jì)和研發(fā);
2. 負(fù)責(zé)實(shí)時(shí)計(jì)算平臺(tái)基礎(chǔ)架構(gòu)設(shè)計(jì)、部署、監(jiān)控、優(yōu)化升級(jí);
3. 制定項(xiàng)目/數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)及實(shí)現(xiàn)規(guī)范，指導(dǎo)設(shè)計(jì)研發(fā)和部署;
4. 協(xié)助策略和算法團(tuán)隊(duì)工作，保障數(shù)據(jù)挖掘建模和工程化;
5. 深入研究大數(shù)據(jù)相關(guān)技術(shù)和產(chǎn)品，跟進(jìn)業(yè)界先進(jìn)技術(shù)。
任職要求：
1. 全日制本科及以上學(xué)歷，5年以上軟件和分布式系統(tǒng)研發(fā)經(jīng)驗(yàn)，3年以上大數(shù)據(jù)系統(tǒng)架構(gòu)經(jīng)驗(yàn);
2. 精通Hadoop/HBase/Spark/Storm/Redis技術(shù)及其生態(tài)圈;
3. 具備Java/C++/Scala等開發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)挖掘和分析的策略與算法;
4. 具備良好的系統(tǒng)分析能力、故障診斷能力;
5. 有大數(shù)據(jù)策略、算法、可視化經(jīng)驗(yàn)優(yōu)先;
6、211/985 重點(diǎn)學(xué)校畢業(yè)優(yōu)先。