大數(shù)據(jù)運維工程師的主要職責說明
大數(shù)據(jù)運維工程師的主要職責說明
大數(shù)據(jù)運維工程師需要設計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺。下面是學習啦小編為您精心整理的大數(shù)據(jù)運維工程師的主要職責說明。
大數(shù)據(jù)運維工程師的主要職責說明1
職責:
1、響應及解決客戶的技術要求、疑問以及系統(tǒng)使用過程中的各種問題;
2、負責服務過程中問題現(xiàn)象和處理方案的收集撰寫,形成知識庫,并對知識庫進行維護更新;
3、及時反饋技術處理過程中的異常情況,及時向上級反饋告警,同時主動協(xié)調資源推動問題解決;
4、定期對所有服務問題進行分析,并對服務效率有影響的問題提供反饋意見,提升服務支撐團隊專業(yè)度。
5、能夠獨當一面,具備獨立思考和處理問題的能力,并能夠與客戶建立良好的關系。
6、明確工作范圍,定期與客戶溝通工作量,并獲取客戶回執(zhí),及時歸檔。
7、能夠快速熟悉參與項目中的業(yè)務,總結后與研發(fā)定期溝通。
崗位要求:
1、3年及以上工作經(jīng)驗,計算機相關專業(yè)本科及以上學歷;
2、熟悉weblogic中間件的安裝部署;
3、熟悉Oracle數(shù)據(jù)庫的增刪改查操作;
4、了解ETL相關內容,如Informatica、kettle等,具備基礎操作技能;
5、了解BI報表相關內容,如cognos、tableau、自助式分析工具等,具備基礎操作技能;
6、掌握基本的windows/linux操作命令;
7、熟練操作Office辦公軟件;具有較強的文檔理解與編寫能力,具有較強的語言表達及溝通協(xié)調能力;
8、熟悉電網(wǎng)業(yè)務優(yōu)先。
大數(shù)據(jù)運維工程師的主要職責說明2
職責:
1. 管理公司大數(shù)據(jù)集群,提供高可用、高性能大數(shù)據(jù)集群系統(tǒng),并保障系統(tǒng)穩(wěn)定運行
2. 負責大數(shù)據(jù)集群性能監(jiān)控與優(yōu)化,故障處理,數(shù)據(jù)備份及災難恢復
3. 負責大數(shù)據(jù)集群自助平臺的高可用架構設計和負載均衡的設計和實現(xiàn)
4. 負責業(yè)務系統(tǒng)大數(shù)據(jù)集群管理,包括數(shù)據(jù)庫日常維護,系統(tǒng)數(shù)據(jù)安全以及權限管理、故障處理、日常錯誤情況處理等
5. 負責依據(jù)業(yè)務需求優(yōu)化數(shù)據(jù)存儲結構,負責數(shù)據(jù)庫系統(tǒng)部署方案的計劃、設計和實施
6. 負責系統(tǒng)大數(shù)據(jù)集群定期檢查,進行性能分析與調優(yōu),充分保證信息系統(tǒng)數(shù)據(jù)的安全及系統(tǒng)高效運行
任職資格:
1. 全日制本科及以上學歷,計算機或相關專業(yè),1年以上hadoop運維經(jīng)驗
2. 熟悉Hadoop生態(tài)圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優(yōu)化
3. 熟悉MySQL等關系型數(shù)據(jù)庫的部署與優(yōu)化,了解MongoDB或Cassandra等NoSQL數(shù)據(jù)庫
4. 熟悉Linux類操作系統(tǒng)的基礎命令操作,能夠編寫腳本開展日常運維工作
5. 熟悉Linux開發(fā)環(huán)境,會使用Shell/Java/Python中的一門腳本語言
6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用
大數(shù)據(jù)運維工程師的主要職責說明3
職責:
1、負責大數(shù)據(jù)運維體系中的監(jiān)控工作;
2、負責處理用戶服務請求事件;
3、負責監(jiān)控報警事件的處理;
4、負責協(xié)助完善監(jiān)控體系;
5、負責監(jiān)控平臺運維工作,持續(xù)優(yōu)化監(jiān)控體系;
6、按時完成領導交辦的其他相關工作。
任職要求:
1、大專及以上學歷,計算機相關專業(yè),1年以上大數(shù)據(jù)系統(tǒng)運維經(jīng)驗;
2、熟悉linux操作系統(tǒng),熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;
3、熟悉中間件工作原理,對TOMCAT/jetty/nginx/微服務有一定了解,具備一定的操作能力;
4、至少熟悉python/bash/shell一種或多種語言,可獨立編寫維護及監(jiān)控腳本;
5、有強烈的求知欲和鉆研技巧,具有良好的獨立分析問題與迅速解決問題的能力;
6、有良好的職業(yè)責任心和團隊協(xié)作意識;
7、能適應7*24小時三班倒工作時間。
大數(shù)據(jù)運維工程師的主要職責說明4
職責:
1、負責公司大數(shù)據(jù)集群的構建,任務調度、監(jiān)控預警,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
2、負責集群容量規(guī)劃、擴容、集群性能優(yōu)化及日常巡檢和應急值守,參與大數(shù)據(jù)基礎環(huán)境的架構設計與改進;
3、深入研究大數(shù)據(jù)業(yè)務相關運維技術,持續(xù)優(yōu)化集群服務架構,探索新的Hadoop、Spark運維技術及發(fā)展方向;
4、具備ownership,故障排查能力,有很好的技術敏感度和風險識別能力;
5、良好的服務意識,主動思考,自我驅動力。
任職資格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系統(tǒng)的配置、管理、內核優(yōu)化。能夠獨立編寫(Shell/Python)腳本語言,腳本開展日常服務器的運維;
2、熟悉hadoop生態(tài)圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調試和運維經(jīng)驗; 熟悉分布式日志分析系統(tǒng)ELK及相關技術;
3、熟悉軟硬件設備,網(wǎng)絡原理,有豐富的大數(shù)據(jù)平臺部署,性能優(yōu)化和運維經(jīng)驗; 了解運維高容量、大流量、大并發(fā)Web系統(tǒng)的業(yè)務知識以及解決方案;
4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;
5、能夠利用各種開源監(jiān)控工具、運維工具,HA、負載均衡軟件完成工作任務;
6、mongodb、mysql等配置、調優(yōu)和備份。
大數(shù)據(jù)運維工程師的主要職責說明5
職責:
1.負責參與公司大數(shù)據(jù)基礎架構平臺規(guī)劃,運維,監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺服務的穩(wěn)定性和可用性;
2.研究大數(shù)據(jù)前沿技術,改進現(xiàn)有系統(tǒng)的服務和運維架構,提升系統(tǒng)可靠性和可運維性;
3.負責公司Hadoop核心技術組件HDFS、Yarn、MapReduce、HBase、Storm大數(shù)據(jù)存儲計算核心的監(jiān)控和日常運維工作。
4.獨立完成大數(shù)據(jù)運維過程中問題定位、問題解決、并進行總結及部門的大數(shù)據(jù)基礎技能培訓;
任職要求:
1. 計算機、信息系統(tǒng)、數(shù)學或相近專業(yè)本科以上學歷;
2. 擁有至少3年以上Hadoop運維經(jīng)驗、具備基于CDH與HDP的維護經(jīng)驗;
3. 熟悉Hadoop大數(shù)據(jù)生態(tài)圈服務的工作原理,具備相關實戰(zhàn)維護經(jīng)驗,包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少獨立維護過中大型Hadoop集群系統(tǒng)服務;
5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統(tǒng)性能優(yōu)化及故障排除能力;
6. 有大數(shù)據(jù)架構師工作經(jīng)驗更佳;
相關文章: