大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)
大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)
大數(shù)據(jù)運(yùn)維工程師需要及時(shí)反饋技術(shù)處理過(guò)程中的異常情況,及時(shí)向上級(jí)反饋告警,同時(shí)主動(dòng)協(xié)調(diào)資源推動(dòng)問(wèn)題解決。以下是學(xué)習(xí)啦小編整理的大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)。
大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)1
1) 承擔(dān)團(tuán)隊(duì)的日常管理,如值班安排、工作分配、日??荚u(píng)等;
2) 組織制訂、完善與本部門(mén)相關(guān)的管理制度、標(biāo)準(zhǔn)操作手冊(cè)SOP、維護(hù)操作MOP和應(yīng)急預(yù)案等;
3) 組織制定中心基礎(chǔ)設(shè)施保養(yǎng)計(jì)劃,做好相關(guān)計(jì)劃的實(shí)現(xiàn)、控制及優(yōu)化工作;
4) 審核、報(bào)批、組織實(shí)施各類(lèi)變更申請(qǐng)、事件報(bào)告工作,做好相關(guān)應(yīng)急工作的指揮與處理;
5) 組織開(kāi)展數(shù)據(jù)中心基礎(chǔ)設(shè)施運(yùn)行維護(hù)相關(guān)培訓(xùn)、訓(xùn)練與演練;
6) 協(xié)助商務(wù)部與外包服務(wù)商洽談相關(guān)維護(hù)服務(wù)合同,監(jiān)督服務(wù)實(shí)施并要求進(jìn)行審核與考評(píng),確保相關(guān)基礎(chǔ)設(shè)施的穩(wěn)定運(yùn)行;
7) 負(fù)責(zé)數(shù)據(jù)中心基礎(chǔ)設(shè)施資源統(tǒng)計(jì)、容量預(yù)警工作,做好每月用水用電統(tǒng)計(jì)、PUE統(tǒng)計(jì)與分析;
8) 配合數(shù)據(jù)中心進(jìn)駐客戶(hù)的場(chǎng)地選址、平面布局、改造實(shí)施、進(jìn)駐管理等支持協(xié)調(diào)工作;
9) 基礎(chǔ)設(shè)施月報(bào)、環(huán)境報(bào)告的編寫(xiě)和提交;
10) 數(shù)據(jù)中心基礎(chǔ)設(shè)施的持續(xù)優(yōu)化和改善;
11) 負(fù)責(zé)上級(jí)主管領(lǐng)導(dǎo)交辦的其它工作。
大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)2
職責(zé):
根據(jù)產(chǎn)品需求,完成產(chǎn)品功能的設(shè)計(jì)、編碼、測(cè)試和發(fā)布;
現(xiàn)場(chǎng)項(xiàng)目支持工作,對(duì)現(xiàn)場(chǎng)反饋工單問(wèn)題進(jìn)行分析、定位和解決;
對(duì)現(xiàn)場(chǎng)項(xiàng)目提出的新需求進(jìn)行分析、設(shè)計(jì)并完成;
根據(jù)產(chǎn)品和技術(shù)發(fā)展要求,完成平臺(tái)的設(shè)計(jì)、開(kāi)發(fā)和支持維護(hù)工作。
職位要求:
本科及以上學(xué)歷,計(jì)算機(jī)、軟件工程相關(guān)專(zhuān)業(yè),3年以上相關(guān)工作經(jīng)驗(yàn);
精通sql、greenplum/postgresql、impala、oracle、mysql至少1種技術(shù)、可融匯貫通靈活轉(zhuǎn)換使用;
熟悉hadoop平臺(tái)zookeeper、hdfs、spark、MR及hbase等常用組件的運(yùn)行原理;
基于linux/unix平臺(tái)進(jìn)行shell、python的常用腳本開(kāi)發(fā)。
大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)3
職責(zé):
1、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)自動(dòng)化運(yùn)維開(kāi)發(fā)、監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺(tái)服務(wù)的穩(wěn)定性和可用性;
2、負(fù)責(zé)公司Hadoop核心技術(shù)組件日常運(yùn)維工作 ;
3、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)現(xiàn)場(chǎng)故障處理和排查工作;
4、研究大數(shù)據(jù)前沿技術(shù),改進(jìn)現(xiàn)有系統(tǒng)的服務(wù)和運(yùn)維架構(gòu),提升系統(tǒng)可靠性和可運(yùn)維性;
任職要求:
1、本科或以上學(xué)歷,計(jì)算機(jī)、軟件工程等相關(guān)專(zhuān)業(yè),3年以上相關(guān)從業(yè)經(jīng)驗(yàn)
2、精通Linux運(yùn)維命令,熟悉Linux的維護(hù)和管理,熟悉Shell/Python腳本開(kāi)發(fā),掌握Scala/JAVA優(yōu)先;
3、熟悉大數(shù)據(jù)項(xiàng)目實(shí)施:包括不限于Kafka、Hadoop、Hive、Hbase、Spark等大數(shù)據(jù)生態(tài)的平臺(tái)搭建,監(jiān)控和調(diào)優(yōu);
4、良好團(tuán)隊(duì)精神服務(wù)意識(shí),溝通協(xié)調(diào)能力;
大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)4
職責(zé):
1、負(fù)責(zé)Hadoop、HBase、Hive、Spark等大數(shù)據(jù)平臺(tái) 規(guī)劃、部署、監(jiān)控、系統(tǒng)優(yōu)化等,確保高可用;
2、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的運(yùn)維管理工作,集群容量規(guī)劃、擴(kuò)容及性能優(yōu)化;
3、處理公司大數(shù)據(jù)平臺(tái)各類(lèi)異常和故障,確保系統(tǒng)平臺(tái)的穩(wěn)定運(yùn)行;
4、設(shè)計(jì)實(shí)現(xiàn)大規(guī)模分布式集群的運(yùn)維、監(jiān)控和管理平臺(tái);
5、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的大數(shù)據(jù)運(yùn)維技及發(fā)展方向。
任職要求:
1、熟悉Hadoop/HBase/Hive/Spark/Kafka/Zookeeper等開(kāi)源項(xiàng)目的安裝與調(diào)試,升級(jí)擴(kuò)容;
2、熟悉Hadoop大數(shù)據(jù)生態(tài)圈,包括但不限于HDFS、YARN、Hive、HBase、Spark、Kafka、Flume等;
3、精通一門(mén)以上腳本語(yǔ)言(shell/perl/python等),熟練掌握Linux系統(tǒng)及常規(guī)命令與工具,熟練的Shell腳本編寫(xiě)能力。
大數(shù)據(jù)運(yùn)維工程師崗位的主要職責(zé)5
職責(zé):
1.負(fù)責(zé)大數(shù)據(jù)管理平臺(tái)產(chǎn)品的運(yùn)維支撐工作,包括項(xiàng)目實(shí)施(安裝、調(diào)優(yōu)、培訓(xùn))、項(xiàng)目聯(lián)調(diào)以及其他日常維護(hù)等;
2.負(fù)責(zé)大數(shù)據(jù)管理平臺(tái)產(chǎn)品的自動(dòng)化運(yùn)維相關(guān)腳本的開(kāi)發(fā)、維護(hù)等;
3.參與大數(shù)據(jù)管理平臺(tái)其他相關(guān)工作;
4.領(lǐng)導(dǎo)交付的其他事宜任職要求
任職要求:
1.熟悉Linux(redhat/centos)軟硬件環(huán)境、系統(tǒng)管理和優(yōu)化,熟練部署、優(yōu)化各種常用服務(wù),熟練使用Linux 命令;
2.具備一定的故障排查能力,能夠獨(dú)立排查及解決操作系統(tǒng)層的各類(lèi)問(wèn)題,有良好的技術(shù)敏感度和風(fēng)險(xiǎn)識(shí)別能力,熟悉一門(mén)以上腳本語(yǔ)言(Shell/Python等);
3.熟悉Hadoop大數(shù)據(jù)生態(tài)圈,包括但不限于Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;
4.熟悉Hadoop各組件的原理和實(shí)現(xiàn),有實(shí)際部署維護(hù)、管理( 包括元數(shù)據(jù)管理)及優(yōu)化經(jīng)驗(yàn),并擁有持續(xù)調(diào)優(yōu)能力,運(yùn)維管理過(guò)大規(guī)模數(shù)據(jù)平臺(tái)經(jīng)驗(yàn)者優(yōu)先考慮;
5.熟悉掌握常用的安全協(xié)議和組件服務(wù),對(duì)hadoop各組件的權(quán)限、安全、kerberos進(jìn)行配置管理。熟悉SSL、ACL、kerberos等在大數(shù)據(jù)環(huán)境場(chǎng)景的使用;
6.大型節(jié)假日需低頻次維護(hù)各項(xiàng)目,可以調(diào)休;
7.具備良好的服務(wù)意識(shí),善于主動(dòng)思考,自我驅(qū)動(dòng)力強(qiáng)。有良好的溝通、協(xié)調(diào)能力,富有團(tuán)隊(duì)精神,有較強(qiáng)的文檔編寫(xiě)能力;
8.本科或碩士畢業(yè)于211、985等國(guó)內(nèi)知名高校者優(yōu)先(注意,僅是加分項(xiàng),不是必須);
9.有實(shí)際工作經(jīng)驗(yàn)者優(yōu)先;
相關(guān)文章: