大數(shù)據(jù)開發(fā)工程師崗位的基本職責
大數(shù)據(jù)開發(fā)工程師崗位的基本職責
大數(shù)據(jù)開發(fā)工程師需要編寫產品研發(fā)相關任務單計劃，階段性代碼、技術方案和軟件產品及時提交至配置管理理庫。以下是學習啦小編整理的大數(shù)據(jù)開發(fā)工程師崗位的基本職責。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責1
職責:
1、負責大數(shù)據(jù)平臺的技術和產品的設計、開發(fā)、優(yōu)化和維護;
2、負責大數(shù)據(jù)平臺設計文檔編寫，線上產品的維護;
3、負責系統(tǒng)性能優(yōu)化，解決各類潛在系統(tǒng)技術風險，保證系統(tǒng)的安全、穩(wěn)定、快速運行;
4、負責整個產品平臺的搭建、多維數(shù)據(jù)庫建設及管控流程設計;
5、參與指標設計，數(shù)據(jù)建模，負責將數(shù)據(jù)模型在系統(tǒng)中實現(xiàn);
6、負責數(shù)據(jù)抽取、數(shù)據(jù)交換、實時計算等框架研究及相關產品的研發(fā);
7、負責追蹤整體產品過程及質量把控。
任職要求：
1、專業(yè)技能：精通 Hadoop 生態(tài)圈中的一項或幾項技術，深入了解 Hadoop 及相關組件的部署及調優(yōu);設計或開發(fā)過大容量，高性能，高可用，易擴展的分布式系統(tǒng);熟悉實時計算/流式計算系統(tǒng)，至少熟悉一項 Nosql 技術;具有扎實 java 功底及開發(fā)能力;對 hadoop，hive，hbase，spark 等相關源碼有一定了解;
2、學歷背景：計算機相關專業(yè)本科及以上學歷;
3、工作經驗：3年以上JAVA開發(fā)經驗及1年以上大數(shù)據(jù)研發(fā)經驗
4、能力素質：具有出色的抽象設計能力，思路清晰，善于思考，良好的團隊合作能力、溝通能力、較好的自學能力，具有敬崗愛業(yè)的精神。
5、有團隊管理經驗者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責2
職責：
1、負責大數(shù)據(jù)統(tǒng)計平臺建設與優(yōu)化;
2、負責廣告效果分析，反作弊平臺建設;
3、負責移動廣告平臺相關系統(tǒng)的設計研發(fā)及持續(xù)優(yōu)化。
職位要求：
1、計算機或相關專業(yè)本科學歷及以上，2年工作經驗;
2、精通大數(shù)據(jù)采集、處理、存儲、查詢相關技術;
3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相關技術;
4、至少熟練掌握 Java/Scala/Python 中一門語言;
5、有做過大數(shù)據(jù)量查詢優(yōu)化的優(yōu)先;
6、有大數(shù)據(jù)服務運維、性能調優(yōu)者優(yōu)先;
7、熟悉常用的設計模式，對MVC框架有了解;
8、強烈的責任心，對技術充滿熱情，高效率，良好的溝通能力。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責3
職責：
1.有獨立工作能力，工作踏實認真，以及較強的團隊協(xié)作精神。
2.負責日志大數(shù)據(jù)平臺的搭建和規(guī)劃;
3.在總體架構設計下，完成日志大數(shù)據(jù)產品的設計、搭建、維護和調優(yōu)，技術文檔的編寫與維護;
4.參與業(yè)務日志的大數(shù)據(jù)分析;
5.及時反饋開發(fā)中遇到的難點問題，溝通并尋求解決方案，按階段有計劃地完成開發(fā)任務
任職資格:
1、計算機等相關專業(yè)本科以上學歷，2年以上開發(fā)經驗;
2、熟悉 linux 操作系統(tǒng)，熟悉 shell 腳本語言，精通 Java，有較強的開發(fā)能力;
2、熟練使用SQL，熟悉Mysql、MongoDB、Hive等數(shù)據(jù)庫技術的基本操作及原理;
3、熟悉Hadoop/Spark生態(tài)系統(tǒng)組件的使用，至少有1年的Spark(Core/Streaming/SQL)開發(fā)經驗;
4、熟悉Elastic產品線(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法，了解常見優(yōu)化方案，熟悉Elasticsearch部署、監(jiān)控及性能調優(yōu);
5、熟悉數(shù)據(jù)挖掘、機器學習、網(wǎng)絡數(shù)據(jù)分析等技術優(yōu)先;
大數(shù)據(jù)開發(fā)工程師崗位的基本職責4
職責：
1. 根據(jù)公司業(yè)務需求，進行數(shù)據(jù)開發(fā)及報表制作;
2. 參與BI、大數(shù)據(jù)平臺體系建設;
3. 文檔整理，包括ER圖、原型設計、數(shù)據(jù)字典整理等;
崗位要求：
1. 本科或以上學歷，計算機相關專業(yè)，2年及以上工作經驗;
2. 熟練使用主流數(shù)據(jù)庫(如ORACLE/PostgreSQL/MYSQL等)，掌握SQL查詢優(yōu)化方法;
3. 熟悉HADOOP生態(tài)，能夠熟練使用HIVE/HBASE/SPARK進行數(shù)據(jù)開發(fā);
4. 掌握JAVA或PYTHON，會TABLEAU/KYLIN/帆軟等BI工具者優(yōu)先;
大數(shù)據(jù)開發(fā)工程師崗位的基本職責5
職責：
1. 負責設計和實現(xiàn)手機衛(wèi)士大數(shù)據(jù)BI平臺;
2. 不斷完善數(shù)據(jù)產品的架構設計，應用開發(fā)和新技術迭代;
3. 配合業(yè)務，產品，根據(jù)不同的業(yè)務需求，靈活快速地完成具有挑戰(zhàn)性的項目，為業(yè)務提供有價值的數(shù)據(jù)分析和預測。
任職要求
1. 計算機軟件相關專業(yè)本科及以上學歷，至少3年以上工作經驗;
2. 認可技術與平臺在BI的價值，能夠深入業(yè)務領域，通過使用數(shù)據(jù)分析和挖據(jù)技術，讓業(yè)務生成的海量數(shù)據(jù)產生更大價值。
3. 熟練掌握大數(shù)據(jù)技術：包括Hadoop，Spark，Storm，Hive，Presto，Parquet，F(xiàn)link，Druid，OLAP, Elastic Search等等。
4. 具備良好的編程能力和代碼風格，熟練掌握Java， Python等語言，熟練使用SQL，并具有較強的優(yōu)化能力。
5. 需要有很強的開發(fā)和架構設計能力，特別是在大數(shù)據(jù)的分布式和實時處理領域，對存儲引擎和查詢引擎的原理和優(yōu)化都具備比較深入的理解。
6. 有一定的數(shù)據(jù)挖掘和機器學習算法能力，包括推薦系統(tǒng)，深度學習等技術領域 。
7. 擁有正直、積極、寬容的品質，學習能力強，并且善于溝通合作。
相關文章：