學(xué)習(xí)啦 > 實用范文 > 辦公文秘 > 崗位職責(zé) > 大數(shù)據(jù)運維工程師崗位的主要職責(zé)

大數(shù)據(jù)運維工程師崗位的主要職責(zé)

時間: 舒欣1213 分享

大數(shù)據(jù)運維工程師崗位的主要職責(zé)

  大數(shù)據(jù)運維工程師需要及時反饋技術(shù)處理過程中的異常情況,及時向上級反饋告警,同時主動協(xié)調(diào)資源推動問題解決。以下是學(xué)習(xí)啦小編整理的大數(shù)據(jù)運維工程師崗位的主要職責(zé)。

  大數(shù)據(jù)運維工程師崗位的主要職責(zé)1

  1) 承擔(dān)團隊的日常管理,如值班安排、工作分配、日??荚u等;

  2) 組織制訂、完善與本部門相關(guān)的管理制度、標(biāo)準(zhǔn)操作手冊SOP、維護操作MOP和應(yīng)急預(yù)案等;

  3) 組織制定中心基礎(chǔ)設(shè)施保養(yǎng)計劃,做好相關(guān)計劃的實現(xiàn)、控制及優(yōu)化工作;

  4) 審核、報批、組織實施各類變更申請、事件報告工作,做好相關(guān)應(yīng)急工作的指揮與處理;

  5) 組織開展數(shù)據(jù)中心基礎(chǔ)設(shè)施運行維護相關(guān)培訓(xùn)、訓(xùn)練與演練;

  6) 協(xié)助商務(wù)部與外包服務(wù)商洽談相關(guān)維護服務(wù)合同,監(jiān)督服務(wù)實施并要求進行審核與考評,確保相關(guān)基礎(chǔ)設(shè)施的穩(wěn)定運行;

  7) 負(fù)責(zé)數(shù)據(jù)中心基礎(chǔ)設(shè)施資源統(tǒng)計、容量預(yù)警工作,做好每月用水用電統(tǒng)計、PUE統(tǒng)計與分析;

  8) 配合數(shù)據(jù)中心進駐客戶的場地選址、平面布局、改造實施、進駐管理等支持協(xié)調(diào)工作;

  9) 基礎(chǔ)設(shè)施月報、環(huán)境報告的編寫和提交;

  10) 數(shù)據(jù)中心基礎(chǔ)設(shè)施的持續(xù)優(yōu)化和改善;

  11) 負(fù)責(zé)上級主管領(lǐng)導(dǎo)交辦的其它工作。

  大數(shù)據(jù)運維工程師崗位的主要職責(zé)2

  職責(zé):

  根據(jù)產(chǎn)品需求,完成產(chǎn)品功能的設(shè)計、編碼、測試和發(fā)布;

  現(xiàn)場項目支持工作,對現(xiàn)場反饋工單問題進行分析、定位和解決;

  對現(xiàn)場項目提出的新需求進行分析、設(shè)計并完成;

  根據(jù)產(chǎn)品和技術(shù)發(fā)展要求,完成平臺的設(shè)計、開發(fā)和支持維護工作。

  職位要求:

  本科及以上學(xué)歷,計算機、軟件工程相關(guān)專業(yè),3年以上相關(guān)工作經(jīng)驗;

  精通sql、greenplum/postgresql、impala、oracle、mysql至少1種技術(shù)、可融匯貫通靈活轉(zhuǎn)換使用;

  熟悉hadoop平臺zookeeper、hdfs、spark、MR及hbase等常用組件的運行原理;

  基于linux/unix平臺進行shell、python的常用腳本開發(fā)。

  大數(shù)據(jù)運維工程師崗位的主要職責(zé)3

  職責(zé):

  1、負(fù)責(zé)公司大數(shù)據(jù)平臺自動化運維開發(fā)、監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺服務(wù)的穩(wěn)定性和可用性;

  2、負(fù)責(zé)公司Hadoop核心技術(shù)組件日常運維工作 ;

  3、負(fù)責(zé)公司大數(shù)據(jù)平臺現(xiàn)場故障處理和排查工作;

  4、研究大數(shù)據(jù)前沿技術(shù),改進現(xiàn)有系統(tǒng)的服務(wù)和運維架構(gòu),提升系統(tǒng)可靠性和可運維性;

  任職要求:

  1、本科或以上學(xué)歷,計算機、軟件工程等相關(guān)專業(yè),3年以上相關(guān)從業(yè)經(jīng)驗

  2、精通Linux運維命令,熟悉Linux的維護和管理,熟悉Shell/Python腳本開發(fā),掌握Scala/JAVA優(yōu)先;

  3、熟悉大數(shù)據(jù)項目實施:包括不限于Kafka、Hadoop、Hive、Hbase、Spark等大數(shù)據(jù)生態(tài)的平臺搭建,監(jiān)控和調(diào)優(yōu);

  4、良好團隊精神服務(wù)意識,溝通協(xié)調(diào)能力;

  大數(shù)據(jù)運維工程師崗位的主要職責(zé)4

  職責(zé):

  1、負(fù)責(zé)Hadoop、HBase、Hive、Spark等大數(shù)據(jù)平臺 規(guī)劃、部署、監(jiān)控、系統(tǒng)優(yōu)化等,確保高可用;

  2、負(fù)責(zé)公司大數(shù)據(jù)平臺的運維管理工作,集群容量規(guī)劃、擴容及性能優(yōu)化;

  3、處理公司大數(shù)據(jù)平臺各類異常和故障,確保系統(tǒng)平臺的穩(wěn)定運行;

  4、設(shè)計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺;

  5、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的大數(shù)據(jù)運維技及發(fā)展方向。

  任職要求:

  1、熟悉Hadoop/HBase/Hive/Spark/Kafka/Zookeeper等開源項目的安裝與調(diào)試,升級擴容;

  2、熟悉Hadoop大數(shù)據(jù)生態(tài)圈,包括但不限于HDFS、YARN、Hive、HBase、Spark、Kafka、Flume等;

  3、精通一門以上腳本語言(shell/perl/python等),熟練掌握Linux系統(tǒng)及常規(guī)命令與工具,熟練的Shell腳本編寫能力。

  大數(shù)據(jù)運維工程師崗位的主要職責(zé)5

  職責(zé):

  1.負(fù)責(zé)大數(shù)據(jù)管理平臺產(chǎn)品的運維支撐工作,包括項目實施(安裝、調(diào)優(yōu)、培訓(xùn))、項目聯(lián)調(diào)以及其他日常維護等;

  2.負(fù)責(zé)大數(shù)據(jù)管理平臺產(chǎn)品的自動化運維相關(guān)腳本的開發(fā)、維護等;

  3.參與大數(shù)據(jù)管理平臺其他相關(guān)工作;

  4.領(lǐng)導(dǎo)交付的其他事宜任職要求

  任職要求:

  1.熟悉Linux(redhat/centos)軟硬件環(huán)境、系統(tǒng)管理和優(yōu)化,熟練部署、優(yōu)化各種常用服務(wù),熟練使用Linux 命令;

  2.具備一定的故障排查能力,能夠獨立排查及解決操作系統(tǒng)層的各類問題,有良好的技術(shù)敏感度和風(fēng)險識別能力,熟悉一門以上腳本語言(Shell/Python等);

  3.熟悉Hadoop大數(shù)據(jù)生態(tài)圈,包括但不限于Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;

  4.熟悉Hadoop各組件的原理和實現(xiàn),有實際部署維護、管理( 包括元數(shù)據(jù)管理)及優(yōu)化經(jīng)驗,并擁有持續(xù)調(diào)優(yōu)能力,運維管理過大規(guī)模數(shù)據(jù)平臺經(jīng)驗者優(yōu)先考慮;

  5.熟悉掌握常用的安全協(xié)議和組件服務(wù),對hadoop各組件的權(quán)限、安全、kerberos進行配置管理。熟悉SSL、ACL、kerberos等在大數(shù)據(jù)環(huán)境場景的使用;

  6.大型節(jié)假日需低頻次維護各項目,可以調(diào)休;

  7.具備良好的服務(wù)意識,善于主動思考,自我驅(qū)動力強。有良好的溝通、協(xié)調(diào)能力,富有團隊精神,有較強的文檔編寫能力;

  8.本科或碩士畢業(yè)于211、985等國內(nèi)知名高校者優(yōu)先(注意,僅是加分項,不是必須);

  9.有實際工作經(jīng)驗者優(yōu)先;

相關(guān)文章:

1.大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述

2.初級運維工程師的崗位職責(zé)模板

3.運維經(jīng)理的具體職責(zé)

4.中級軟件測試工程師的主要職責(zé)

5.運維經(jīng)理崗位的基本職責(zé)

55937