大數(shù)據(jù)運維工程師的主要職責(zé)說明
大數(shù)據(jù)運維工程師的主要職責(zé)說明
大數(shù)據(jù)運維工程師需要設(shè)計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺。下面是學(xué)習(xí)啦小編為您精心整理的大數(shù)據(jù)運維工程師的主要職責(zé)說明。
大數(shù)據(jù)運維工程師的主要職責(zé)說明1
職責(zé):
1、響應(yīng)及解決客戶的技術(shù)要求、疑問以及系統(tǒng)使用過程中的各種問題;
2、負(fù)責(zé)服務(wù)過程中問題現(xiàn)象和處理方案的收集撰寫,形成知識庫,并對知識庫進(jìn)行維護更新;
3、及時反饋技術(shù)處理過程中的異常情況,及時向上級反饋告警,同時主動協(xié)調(diào)資源推動問題解決;
4、定期對所有服務(wù)問題進(jìn)行分析,并對服務(wù)效率有影響的問題提供反饋意見,提升服務(wù)支撐團隊專業(yè)度。
5、能夠獨當(dāng)一面,具備獨立思考和處理問題的能力,并能夠與客戶建立良好的關(guān)系。
6、明確工作范圍,定期與客戶溝通工作量,并獲取客戶回執(zhí),及時歸檔。
7、能夠快速熟悉參與項目中的業(yè)務(wù),總結(jié)后與研發(fā)定期溝通。
崗位要求:
1、3年及以上工作經(jīng)驗,計算機相關(guān)專業(yè)本科及以上學(xué)歷;
2、熟悉weblogic中間件的安裝部署;
3、熟悉Oracle數(shù)據(jù)庫的增刪改查操作;
4、了解ETL相關(guān)內(nèi)容,如Informatica、kettle等,具備基礎(chǔ)操作技能;
5、了解BI報表相關(guān)內(nèi)容,如cognos、tableau、自助式分析工具等,具備基礎(chǔ)操作技能;
6、掌握基本的windows/linux操作命令;
7、熟練操作Office辦公軟件;具有較強的文檔理解與編寫能力,具有較強的語言表達(dá)及溝通協(xié)調(diào)能力;
8、熟悉電網(wǎng)業(yè)務(wù)優(yōu)先。
大數(shù)據(jù)運維工程師的主要職責(zé)說明2
職責(zé):
1. 管理公司大數(shù)據(jù)集群,提供高可用、高性能大數(shù)據(jù)集群系統(tǒng),并保障系統(tǒng)穩(wěn)定運行
2. 負(fù)責(zé)大數(shù)據(jù)集群性能監(jiān)控與優(yōu)化,故障處理,數(shù)據(jù)備份及災(zāi)難恢復(fù)
3. 負(fù)責(zé)大數(shù)據(jù)集群自助平臺的高可用架構(gòu)設(shè)計和負(fù)載均衡的設(shè)計和實現(xiàn)
4. 負(fù)責(zé)業(yè)務(wù)系統(tǒng)大數(shù)據(jù)集群管理,包括數(shù)據(jù)庫日常維護,系統(tǒng)數(shù)據(jù)安全以及權(quán)限管理、故障處理、日常錯誤情況處理等
5. 負(fù)責(zé)依據(jù)業(yè)務(wù)需求優(yōu)化數(shù)據(jù)存儲結(jié)構(gòu),負(fù)責(zé)數(shù)據(jù)庫系統(tǒng)部署方案的計劃、設(shè)計和實施
6. 負(fù)責(zé)系統(tǒng)大數(shù)據(jù)集群定期檢查,進(jìn)行性能分析與調(diào)優(yōu),充分保證信息系統(tǒng)數(shù)據(jù)的安全及系統(tǒng)高效運行
任職資格:
1. 全日制本科及以上學(xué)歷,計算機或相關(guān)專業(yè),1年以上hadoop運維經(jīng)驗
2. 熟悉Hadoop生態(tài)圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優(yōu)化
3. 熟悉MySQL等關(guān)系型數(shù)據(jù)庫的部署與優(yōu)化,了解MongoDB或Cassandra等NoSQL數(shù)據(jù)庫
4. 熟悉Linux類操作系統(tǒng)的基礎(chǔ)命令操作,能夠編寫腳本開展日常運維工作
5. 熟悉Linux開發(fā)環(huán)境,會使用Shell/Java/Python中的一門腳本語言
6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用
大數(shù)據(jù)運維工程師的主要職責(zé)說明3
職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)運維體系中的監(jiān)控工作;
2、負(fù)責(zé)處理用戶服務(wù)請求事件;
3、負(fù)責(zé)監(jiān)控報警事件的處理;
4、負(fù)責(zé)協(xié)助完善監(jiān)控體系;
5、負(fù)責(zé)監(jiān)控平臺運維工作,持續(xù)優(yōu)化監(jiān)控體系;
6、按時完成領(lǐng)導(dǎo)交辦的其他相關(guān)工作。
任職要求:
1、大專及以上學(xué)歷,計算機相關(guān)專業(yè),1年以上大數(shù)據(jù)系統(tǒng)運維經(jīng)驗;
2、熟悉linux操作系統(tǒng),熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;
3、熟悉中間件工作原理,對TOMCAT/jetty/nginx/微服務(wù)有一定了解,具備一定的操作能力;
4、至少熟悉python/bash/shell一種或多種語言,可獨立編寫維護及監(jiān)控腳本;
5、有強烈的求知欲和鉆研技巧,具有良好的獨立分析問題與迅速解決問題的能力;
6、有良好的職業(yè)責(zé)任心和團隊協(xié)作意識;
7、能適應(yīng)7*24小時三班倒工作時間。
大數(shù)據(jù)運維工程師的主要職責(zé)說明4
職責(zé):
1、負(fù)責(zé)公司大數(shù)據(jù)集群的構(gòu)建,任務(wù)調(diào)度、監(jiān)控預(yù)警,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
2、負(fù)責(zé)集群容量規(guī)劃、擴容、集群性能優(yōu)化及日常巡檢和應(yīng)急值守,參與大數(shù)據(jù)基礎(chǔ)環(huán)境的架構(gòu)設(shè)計與改進(jìn);
3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的Hadoop、Spark運維技術(shù)及發(fā)展方向;
4、具備ownership,故障排查能力,有很好的技術(shù)敏感度和風(fēng)險識別能力;
5、良好的服務(wù)意識,主動思考,自我驅(qū)動力。
任職資格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系統(tǒng)的配置、管理、內(nèi)核優(yōu)化。能夠獨立編寫(Shell/Python)腳本語言,腳本開展日常服務(wù)器的運維;
2、熟悉hadoop生態(tài)圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調(diào)試和運維經(jīng)驗; 熟悉分布式日志分析系統(tǒng)ELK及相關(guān)技術(shù);
3、熟悉軟硬件設(shè)備,網(wǎng)絡(luò)原理,有豐富的大數(shù)據(jù)平臺部署,性能優(yōu)化和運維經(jīng)驗; 了解運維高容量、大流量、大并發(fā)Web系統(tǒng)的業(yè)務(wù)知識以及解決方案;
4、工作認(rèn)真負(fù)責(zé),有較強的學(xué)習(xí)能力,動手能力和分析解決問題的能力;
5、能夠利用各種開源監(jiān)控工具、運維工具,HA、負(fù)載均衡軟件完成工作任務(wù);
6、mongodb、mysql等配置、調(diào)優(yōu)和備份。
大數(shù)據(jù)運維工程師的主要職責(zé)說明5
職責(zé):
1.負(fù)責(zé)參與公司大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺規(guī)劃,運維,監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺服務(wù)的穩(wěn)定性和可用性;
2.研究大數(shù)據(jù)前沿技術(shù),改進(jìn)現(xiàn)有系統(tǒng)的服務(wù)和運維架構(gòu),提升系統(tǒng)可靠性和可運維性;
3.負(fù)責(zé)公司Hadoop核心技術(shù)組件HDFS、Yarn、MapReduce、HBase、Storm大數(shù)據(jù)存儲計算核心的監(jiān)控和日常運維工作。
4.獨立完成大數(shù)據(jù)運維過程中問題定位、問題解決、并進(jìn)行總結(jié)及部門的大數(shù)據(jù)基礎(chǔ)技能培訓(xùn);
任職要求:
1. 計算機、信息系統(tǒng)、數(shù)學(xué)或相近專業(yè)本科以上學(xué)歷;
2. 擁有至少3年以上Hadoop運維經(jīng)驗、具備基于CDH與HDP的維護經(jīng)驗;
3. 熟悉Hadoop大數(shù)據(jù)生態(tài)圈服務(wù)的工作原理,具備相關(guān)實戰(zhàn)維護經(jīng)驗,包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少獨立維護過中大型Hadoop集群系統(tǒng)服務(wù);
5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統(tǒng)性能優(yōu)化及故障排除能力;
6. 有大數(shù)據(jù)架構(gòu)師工作經(jīng)驗更佳;
相關(guān)文章: