大數(shù)據(jù)運維工程師崗位的基本職責描述
大數(shù)據(jù)運維工程師崗位的基本職責描述
大數(shù)據(jù)運維工程師需要定期對所有服務問題進行分析，并對服務效率有影響的問題提供反饋意見，提升服務支撐團隊專業(yè)度。以下是學習啦小編整理的大數(shù)據(jù)運維工程師崗位的基本職責描述。
大數(shù)據(jù)運維工程師崗位的基本職責描述1
職責：
1、負責維護服務器的運行，包括巡檢、故障排除、數(shù)據(jù)備份等業(yè)務，保證服務器高質(zhì)量、高效率運行狀態(tài);
2、負責服務器漏洞整改及補丁升級;
3、負責hadoop運維相關工作;
4、負責大數(shù)據(jù)平臺的日常部署、升級、擴容、遷移;
5、負責高并發(fā)，大存儲和實時流的Hadoop/spark大數(shù)據(jù)平臺規(guī)劃，運維，監(jiān)控和優(yōu)化工作。
任職資格
1、2年左右服務器運維經(jīng)驗;
2、對linux基礎運維命令熟悉，shell,python至少精通一種，如會scala語言可優(yōu)先考慮;
3、熟悉Linux的維護和管理，熟悉bat及Shell腳本開發(fā)，能看懂Python/Scala優(yōu)先;
4、做過大規(guī)模hadoop集群優(yōu)先;
5、大數(shù)據(jù)項目：包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數(shù)據(jù)生態(tài)的平臺搭建，監(jiān)控，運維，調(diào)優(yōu)、生產(chǎn)環(huán)境hadoop集群trouble shooting 、hadoop版本升級管理及優(yōu)化支持。
大數(shù)據(jù)運維工程師崗位的基本職責描述2
職責：
1、負責云平臺等基礎環(huán)境規(guī)劃及建設，虛擬化等技術實施;
2、負責機房物理設備的日常巡檢，對云平臺及大數(shù)據(jù)運行環(huán)境的日常維護，保證運行環(huán)境的安全和穩(wěn)定，對突發(fā)事件進行快速處理和恢復;
3、負責Hadoop集群的部署及日常維護，熟悉Hadoop生態(tài)圈組件的配置與調(diào)優(yōu);
4、負責硬件設備和系統(tǒng)軟件購買采購數(shù)的擬定，以及運維相關技術文檔的整理和維護。
任職要求：
1、***優(yōu)先，30歲以下，計算機相關專業(yè)，統(tǒng)招本科及以上學歷，3年以上中、大型云平臺服務器運維經(jīng)驗。
2、具備基本的機房建設及管理能力，能對機房內(nèi)服務器、交換機、路由器等物理設備巡檢維護數(shù)據(jù)備份及恢復。
3、熟悉TCP/IP協(xié)議，熟練掌握CISCO路由器、防火墻、交換機配置，具備一定的網(wǎng)絡規(guī)劃和組網(wǎng)技術能力，負責VLan及子網(wǎng)劃分，提供內(nèi)外網(wǎng)及VPN連接等網(wǎng)絡接入方式;
4、熟悉KVM/Docker等虛擬化技術，及基于VMWare/OpenStack云平臺的搭建及運維;
5、有豐富的Hadoop生態(tài)系統(tǒng)運維經(jīng)驗，了解Hadoop、STorm、Spark、Kafka、zookeeper這些組件的原理，具備部署、實施、維護hadoop集群及相關組件的能力。
6、熟悉Zabbix、Nagios等開源運維監(jiān)控系統(tǒng)，熟悉通過LVS/Keepalived/Hearbeat技術實現(xiàn)負載均衡，了解CDN技術。
7、有中大型云平臺數(shù)據(jù)中心容災建設方案(一城兩中心、兩地三中心)實施經(jīng)驗者優(yōu)先;有思科認證(CCNA/CCNP/CCIE)證書者優(yōu)先。
8、為人正直，有責任感，工作認真細心。
大數(shù)據(jù)運維工程師崗位的基本職責描述3
職責：
1.負責大數(shù)據(jù)業(yè)務集群的運維工作(Hadoop/Hbase/Hive/ Yarn/ Spark/ Storm/ ES等大數(shù)據(jù)生態(tài)圈組件)確保高可用性。
2.負責集群容量規(guī)劃、擴容及性能優(yōu)化;
3.參入建設大規(guī)模分布式集群的運維、監(jiān)控和管理平臺;
4.參與業(yè)務架構設計，在設計階段給出可運維性改進建議;
5.深入研究大數(shù)據(jù)業(yè)務相關運維技術，持續(xù)優(yōu)化集群服務架構，探索新的大數(shù)據(jù)運維技及發(fā)展方向。
任職要求：
1.三年及以上大數(shù)據(jù)運維工作經(jīng)驗，熟悉hadoop、hbase、hive、Solr、ES等分布式相關技術，熟悉源碼尤佳，至少掌握java/python/shell中的一種語言。
2.了解大數(shù)據(jù)平臺應用架構，具備常見問題的基本分析和解決能力。
3.熟悉Linux操作系統(tǒng)的配置、管理及優(yōu)化，能夠獨立排查及解決操作系統(tǒng)層面的問題;
4.熟悉nginx、tomcat等web應用及中間件的使用和配置
5.強烈的責任心和使命感，執(zhí)行力強，富有團隊合作精神;
6.對大數(shù)據(jù)方向運維有很高的熱情和興趣，能主動學習了解相關知識;
大數(shù)據(jù)運維工程師崗位的基本職責描述4
職責
1、維護基于Linux的系統(tǒng)和相應的組件;
2、維護Hadoop集群，包括hdfs、hive、sqoop、kafka等核心生態(tài)系統(tǒng)，確保集群運行平穩(wěn);
3、基于***實踐，根據(jù)業(yè)務需求設計和優(yōu)化Hadoop生態(tài)系統(tǒng);
4、設計和維護Hadoop相關基礎設施的監(jiān)控;
5、維護技術文件;
6、根據(jù)業(yè)務需求設計和安裝新的生態(tài)系統(tǒng)或技術組件，并制定最終解決方案。
任職資格
1、本科及以上，信息技術或相關專業(yè);
2、2年以上企業(yè)Linux系統(tǒng)和Hadoop經(jīng)驗;
3、Hadoop生態(tài)系統(tǒng)的經(jīng)驗和知識(必須具備：HDFS, Yarn, Hive, HUE;傾向具備：MapReduce、Spark、Kafka、Logstash、Flume);
3、較強的事故分析和故障排除能力，較強的shell腳本編寫能力;
4、了解HA機制者優(yōu)先;有ITIL知識者優(yōu)先;
5、有跨國工作經(jīng)驗者優(yōu)先;
6、愿意學習新事物，解決問題。
大數(shù)據(jù)運維工程師崗位的基本職責描述5
職責：
1、負責大數(shù)據(jù)基礎架構平臺(Hadoop/Spark/MPP DB)的自動部署;
2、負責線上數(shù)據(jù)平臺的運維，保障服務的穩(wěn)定性和可用性;
3、參與超大規(guī)模數(shù)據(jù)快速查詢系統(tǒng)的架構設計和開發(fā);
4、研究大數(shù)據(jù)前沿技術，改進現(xiàn)有系統(tǒng)的服務和運維架構，提升系統(tǒng)的運維效率。
任職要求：
1. 熟悉linux shell及SQL語言
2. 了解Hadoop等分布式技術，數(shù)據(jù)倉庫技術;
3. 熟悉數(shù)據(jù)倉庫數(shù)據(jù)流監(jiān)控、故障自動化定位及運維;
4. 強烈的責任心與求知欲，愿意學習新技術并能快速應用;
5. 有較強的書面與口頭溝通表達能力，獨立分析、解決問題的能力;
6、做事認真負責，自學能力較強。
相關文章：