大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明
大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明
大數(shù)據(jù)運(yùn)維工程師需要設(shè)計(jì)實(shí)現(xiàn)大規(guī)模分布式集群的運(yùn)維、監(jiān)控和管理平臺(tái)。下面是學(xué)習(xí)啦小編為您精心整理的大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明。
大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明1
職責(zé):
1、響應(yīng)及解決客戶的技術(shù)要求、疑問以及系統(tǒng)使用過程中的各種問題;
2、負(fù)責(zé)服務(wù)過程中問題現(xiàn)象和處理方案的收集撰寫,形成知識(shí)庫,并對(duì)知識(shí)庫進(jìn)行維護(hù)更新;
3、及時(shí)反饋技術(shù)處理過程中的異常情況,及時(shí)向上級(jí)反饋告警,同時(shí)主動(dòng)協(xié)調(diào)資源推動(dòng)問題解決;
4、定期對(duì)所有服務(wù)問題進(jìn)行分析,并對(duì)服務(wù)效率有影響的問題提供反饋意見,提升服務(wù)支撐團(tuán)隊(duì)專業(yè)度。
5、能夠獨(dú)當(dāng)一面,具備獨(dú)立思考和處理問題的能力,并能夠與客戶建立良好的關(guān)系。
6、明確工作范圍,定期與客戶溝通工作量,并獲取客戶回執(zhí),及時(shí)歸檔。
7、能夠快速熟悉參與項(xiàng)目中的業(yè)務(wù),總結(jié)后與研發(fā)定期溝通。
崗位要求:
1、3年及以上工作經(jīng)驗(yàn),計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2、熟悉weblogic中間件的安裝部署;
3、熟悉Oracle數(shù)據(jù)庫的增刪改查操作;
4、了解ETL相關(guān)內(nèi)容,如Informatica、kettle等,具備基礎(chǔ)操作技能;
5、了解BI報(bào)表相關(guān)內(nèi)容,如cognos、tableau、自助式分析工具等,具備基礎(chǔ)操作技能;
6、掌握基本的windows/linux操作命令;
7、熟練操作Office辦公軟件;具有較強(qiáng)的文檔理解與編寫能力,具有較強(qiáng)的語言表達(dá)及溝通協(xié)調(diào)能力;
8、熟悉電網(wǎng)業(yè)務(wù)優(yōu)先。
大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明2
職責(zé):
1. 管理公司大數(shù)據(jù)集群,提供高可用、高性能大數(shù)據(jù)集群系統(tǒng),并保障系統(tǒng)穩(wěn)定運(yùn)行
2. 負(fù)責(zé)大數(shù)據(jù)集群性能監(jiān)控與優(yōu)化,故障處理,數(shù)據(jù)備份及災(zāi)難恢復(fù)
3. 負(fù)責(zé)大數(shù)據(jù)集群自助平臺(tái)的高可用架構(gòu)設(shè)計(jì)和負(fù)載均衡的設(shè)計(jì)和實(shí)現(xiàn)
4. 負(fù)責(zé)業(yè)務(wù)系統(tǒng)大數(shù)據(jù)集群管理,包括數(shù)據(jù)庫日常維護(hù),系統(tǒng)數(shù)據(jù)安全以及權(quán)限管理、故障處理、日常錯(cuò)誤情況處理等
5. 負(fù)責(zé)依據(jù)業(yè)務(wù)需求優(yōu)化數(shù)據(jù)存儲(chǔ)結(jié)構(gòu),負(fù)責(zé)數(shù)據(jù)庫系統(tǒng)部署方案的計(jì)劃、設(shè)計(jì)和實(shí)施
6. 負(fù)責(zé)系統(tǒng)大數(shù)據(jù)集群定期檢查,進(jìn)行性能分析與調(diào)優(yōu),充分保證信息系統(tǒng)數(shù)據(jù)的安全及系統(tǒng)高效運(yùn)行
任職資格:
1. 全日制本科及以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè),1年以上hadoop運(yùn)維經(jīng)驗(yàn)
2. 熟悉Hadoop生態(tài)圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優(yōu)化
3. 熟悉MySQL等關(guān)系型數(shù)據(jù)庫的部署與優(yōu)化,了解MongoDB或Cassandra等NoSQL數(shù)據(jù)庫
4. 熟悉Linux類操作系統(tǒng)的基礎(chǔ)命令操作,能夠編寫腳本開展日常運(yùn)維工作
5. 熟悉Linux開發(fā)環(huán)境,會(huì)使用Shell/Java/Python中的一門腳本語言
6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用
大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明3
職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)運(yùn)維體系中的監(jiān)控工作;
2、負(fù)責(zé)處理用戶服務(wù)請(qǐng)求事件;
3、負(fù)責(zé)監(jiān)控報(bào)警事件的處理;
4、負(fù)責(zé)協(xié)助完善監(jiān)控體系;
5、負(fù)責(zé)監(jiān)控平臺(tái)運(yùn)維工作,持續(xù)優(yōu)化監(jiān)控體系;
6、按時(shí)完成領(lǐng)導(dǎo)交辦的其他相關(guān)工作。
任職要求:
1、大專及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè),1年以上大數(shù)據(jù)系統(tǒng)運(yùn)維經(jīng)驗(yàn);
2、熟悉linux操作系統(tǒng),熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運(yùn)維方式;
3、熟悉中間件工作原理,對(duì)TOMCAT/jetty/nginx/微服務(wù)有一定了解,具備一定的操作能力;
4、至少熟悉python/bash/shell一種或多種語言,可獨(dú)立編寫維護(hù)及監(jiān)控腳本;
5、有強(qiáng)烈的求知欲和鉆研技巧,具有良好的獨(dú)立分析問題與迅速解決問題的能力;
6、有良好的職業(yè)責(zé)任心和團(tuán)隊(duì)協(xié)作意識(shí);
7、能適應(yīng)7*24小時(shí)三班倒工作時(shí)間。
大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明4
職責(zé):
1、負(fù)責(zé)公司大數(shù)據(jù)集群的構(gòu)建,任務(wù)調(diào)度、監(jiān)控預(yù)警,持續(xù)完善大數(shù)據(jù)平臺(tái),保證穩(wěn)定性、安全性;
2、負(fù)責(zé)集群容量規(guī)劃、擴(kuò)容、集群性能優(yōu)化及日常巡檢和應(yīng)急值守,參與大數(shù)據(jù)基礎(chǔ)環(huán)境的架構(gòu)設(shè)計(jì)與改進(jìn);
3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的Hadoop、Spark運(yùn)維技術(shù)及發(fā)展方向;
4、具備ownership,故障排查能力,有很好的技術(shù)敏感度和風(fēng)險(xiǎn)識(shí)別能力;
5、良好的服務(wù)意識(shí),主動(dòng)思考,自我驅(qū)動(dòng)力。
任職資格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系統(tǒng)的配置、管理、內(nèi)核優(yōu)化。能夠獨(dú)立編寫(Shell/Python)腳本語言,腳本開展日常服務(wù)器的運(yùn)維;
2、熟悉hadoop生態(tài)圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調(diào)試和運(yùn)維經(jīng)驗(yàn); 熟悉分布式日志分析系統(tǒng)ELK及相關(guān)技術(shù);
3、熟悉軟硬件設(shè)備,網(wǎng)絡(luò)原理,有豐富的大數(shù)據(jù)平臺(tái)部署,性能優(yōu)化和運(yùn)維經(jīng)驗(yàn); 了解運(yùn)維高容量、大流量、大并發(fā)Web系統(tǒng)的業(yè)務(wù)知識(shí)以及解決方案;
4、工作認(rèn)真負(fù)責(zé),有較強(qiáng)的學(xué)習(xí)能力,動(dòng)手能力和分析解決問題的能力;
5、能夠利用各種開源監(jiān)控工具、運(yùn)維工具,HA、負(fù)載均衡軟件完成工作任務(wù);
6、mongodb、mysql等配置、調(diào)優(yōu)和備份。
大數(shù)據(jù)運(yùn)維工程師的主要職責(zé)說明5
職責(zé):
1.負(fù)責(zé)參與公司大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺(tái)規(guī)劃,運(yùn)維,監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺(tái)服務(wù)的穩(wěn)定性和可用性;
2.研究大數(shù)據(jù)前沿技術(shù),改進(jìn)現(xiàn)有系統(tǒng)的服務(wù)和運(yùn)維架構(gòu),提升系統(tǒng)可靠性和可運(yùn)維性;
3.負(fù)責(zé)公司Hadoop核心技術(shù)組件HDFS、Yarn、MapReduce、HBase、Storm大數(shù)據(jù)存儲(chǔ)計(jì)算核心的監(jiān)控和日常運(yùn)維工作。
4.獨(dú)立完成大數(shù)據(jù)運(yùn)維過程中問題定位、問題解決、并進(jìn)行總結(jié)及部門的大數(shù)據(jù)基礎(chǔ)技能培訓(xùn);
任職要求:
1. 計(jì)算機(jī)、信息系統(tǒng)、數(shù)學(xué)或相近專業(yè)本科以上學(xué)歷;
2. 擁有至少3年以上Hadoop運(yùn)維經(jīng)驗(yàn)、具備基于CDH與HDP的維護(hù)經(jīng)驗(yàn);
3. 熟悉Hadoop大數(shù)據(jù)生態(tài)圈服務(wù)的工作原理,具備相關(guān)實(shí)戰(zhàn)維護(hù)經(jīng)驗(yàn),包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少獨(dú)立維護(hù)過中大型Hadoop集群系統(tǒng)服務(wù);
5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統(tǒng)性能優(yōu)化及故障排除能力;
6. 有大數(shù)據(jù)架構(gòu)師工作經(jīng)驗(yàn)更佳;
相關(guān)文章: