當前位置:萬佳範文網 >

文祕 >崗位職責 >

大數據運維工程師崗位的基本職責描述(通用20篇)

大數據運維工程師崗位的基本職責描述(通用20篇)

大數據運維工程師崗位的基本職責描述 篇1

職責:

大數據運維工程師崗位的基本職責描述(通用20篇)

1、負責維護服務器的運行,包括巡檢、故障排除、數據備份等業務,保證服務器高質量、高效率運行狀態;

2、負責服務器漏洞整改及補丁升級;

3、負責hadoop運維相關工作;

4、負責大數據平台的日常部署、升級、擴容、遷移;

5、負責高併發,大存儲和實時流的Hadoop/spark大數據平台規劃,運維,監控和優化工作。

任職資格

1、2年左右服務器運維經驗;

2、對linux基礎運維命令熟悉,shell,python至少精通一種,如會scala語言可優先考慮;

3、熟悉Linux的維護和管理,熟悉bat及Shell腳本開發,能看懂Python/Scala優先;

4、做過大規模hadoop集羣優先;

5、大數據項目:包括不限於hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數據生態的平台搭建,監控,運維,調優、生產環境hadoop集羣trouble shooting 、hadoop版本升級管理及優化支持。

大數據運維工程師崗位的基本職責描述 篇2

職責:

1.負責大數據業務集羣的運維工作(Hadoop/Hbase/Hive/ Yarn/ Spark/ Storm/ ES等大數據生態圈組件)確保高可用性。

2.負責集羣容量規劃、擴容及性能優化;

3.參入建設大規模分佈式集羣的運維、監控和管理平台;

4.參與業務架構設計,在設計階段給出可運維性改進建議;

5.深入研究大數據業務相關運維技術,持續優化集羣服務架構,探索新的大數據運維技及發展方向。

任職要求:

1.三年及以上大數據運維工作經驗,熟悉hadoop、hbase、hive、Solr、ES等分佈式相關技術,熟悉源碼尤佳,至少掌握java/python/shell中的一種語言。

2.瞭解大數據平台應用架構,具備常見問題的基本分析和解決能力。

3.熟悉Linux操作系統的配置、管理及優化,能夠獨立排查及解決操作系統層面的問題;

4.熟悉nginx、tomcat等web應用及中間件的使用和配置

5.強烈的責任心和使命感,執行力強,富有團隊合作精神;

6.對大數據方向運維有很高的熱情和興趣,能主動學習瞭解相關知識;

大數據運維工程師崗位的基本職責描述 篇3

職責

1、維護基於Linux的系統和相應的組件;

2、維護Hadoop集羣,包括hdfs、hive、sqoop、kafka等核心生態系統,確保集羣運行平穩;

3、基於實踐,根據業務需求設計和優化Hadoop生態系統;

4、設計和維護Hadoop相關基礎設施的監控;

5、維護技術文件;

6、根據業務需求設計和安裝新的生態系統或技術組件,並制定最終解決方案。

任職資格

1、本科及以上,信息技術或相關專業;

2、2年以上企業Linux系統和Hadoop經驗;

3、Hadoop生態系統的經驗和知識(必須具備:HDFS, Yarn, Hive, HUE;傾向具備:MapReduce、Spark、Kafka、Logstash、Flume);

3、較強的事故分析和故障排除能力,較強的shell腳本編寫能力;

4、瞭解HA機制者優先;有ITIL知識者優先;

5、有跨國工作經驗者優先;

6、願意學習新事物,解決問題。

大數據運維工程師崗位的基本職責描述 篇4

職責:

1、負責大數據基礎架構平台(Hadoop/Spark/MPP DB)的自動部署;

2、負責線上數據平台的運維,保障服務的穩定性和可用性;

3、參與超大規模數據快速查詢系統的架構設計和開發;

4、研究大數據前沿技術,改進現有系統的服務和運維架構,提升系統的運維效率。

任職要求:

1. 熟悉linux shell及SQL語言

2. 瞭解Hadoop等分佈式技術,數據倉庫技術;

3. 熟悉數據倉庫數據流監控、故障自動化定位及運維;

4. 強烈的責任心與求知慾,願意學習新技術並能快速應用;

5. 有較強的書面與口頭溝通表達能力,獨立分析、解決問題的能力;

6、做事認真負責,自學能力較強。

大數據運維工程師崗位的基本職責描述 篇5

職責:

1、負責雲平台等基礎環境規劃及建設,虛擬化等技術實施;

2、負責機房物理設備的日常巡檢,對雲平台及大數據運行環境的日常維護,保證運行環境的安全和穩定,對突發事件進行快速處理和恢復;

3、負責Hadoop集羣的部署及日常維護,熟悉Hadoop生態圈組件的配置與調優;

4、負責硬件設備和系統軟件購買採購數的擬定,以及運維相關技術文檔的整理和維護。

任職要求:

1、優先,30歲以下,計算機相關專業,統招本科及以上學歷,3年以上中、大型雲平台服務器運維經驗。

2、具備基本的機房建設及管理能力,能對機房內服務器、交換機、路由器等物理設備巡檢維護數據備份及恢復。

3、熟悉TCP/IP協議,熟練掌握CISCO路由器、防火牆、交換機配置,具備一定的網絡規劃和組網技術能力,負責VLan及子網劃分,提供內外網及VPN連接等網絡接入方式;

4、熟悉KVM/Docker等虛擬化技術,及基於VMWare/OpenStack雲平台的搭建及運維;

5、有豐富的Hadoop生態系統運維經驗,瞭解Hadoop、STorm、Spark、Kafka、zookeeper這些組件的原理,具備部署、實施、維護hadoop集羣及相關組件的能力。

6、熟悉Zabbix、Nagios等開源運維監控系統,熟悉通過LVS/Keepalived/Hearbeat技術實現負載均衡,瞭解CDN技術。

7、有中大型雲平台數據中心容災建設方案(一城兩中心、兩地三中心)實施經驗者優先;有思科認證(CCNA/CCNP/CCIE)證書者優先。

8、為人正直,有責任感,工作認真細心。

大數據運維工程師崗位的基本職責描述 篇6

職責:

1. 公司內部IT相關網絡設備,服務器的管理和運維,保證系統正常運轉;

2. 服務器,虛擬機,應用程序數據的備份、還原以及數據同步;

3. 負責搭建各系統測試環境,組織項目實施;

4. 負責私有云虛擬化平台及虛擬化服務器管理。

5. 撰寫服務器、網絡設備,應用程序操作説明、配置文檔,GMP相關的計算機驗證工作等 。

任職要求:

1. 計算機或相關專業, 全日制本科及以上學歷;

2. 具有 2年以上IT系統運維,項目實施相關經驗;

3. 精通windows server 20xx、20xx操作系統,熟練linux操作系統;

4. 能夠對SQL SERVER/ORACLE數所庫進行日常維護;

5. 具有較強的網絡安全意識、較強的信息安全和保密意識;

6. 善於交流和溝通,具有良好的書面和語言表達能力。

大數據運維工程師崗位的基本職責描述 篇7

職責:

1、參與項目需求的調研、討論,提出優化建議;

2、負責對接項目方開展項目的研發、實施,確保項目按時保質完成;

3、負責對內開展系統相關的培訓工作;

4、及時響應並處理系統故障,保障系統的穩定運行;

5、負責公司的桌面運維工作;

6、完成領導交辦的其他工作。

任職要求:

1、計算機或相關專業的全日制本科及以上學歷;

2、1年及以上計算機軟件的工作經驗或優秀的應屆畢業生,有承擔軟件項目經理工作經驗者優先,有融資租賃行業經驗者優先;

3、精通j2ee平台(webshpere,weblogic等),瞭解SSO,精通B/S體系架構下的應用開發技術;熟悉主流網絡設備的安裝和調試,熟悉網絡結構、服務器、Oracel數據庫等技術;熟悉CMM軟件開發管理過程,有良好的編程規範及開發技能;

4、具有良好的職業道德,較強的溝通協調及語言表達能力;

5、工作認真、細緻、有責任心,待人熱情有耐心。

大數據運維工程師崗位的基本職責描述 篇8

職責:

1. 負責各區塊鏈節點的搭建部署。

2. 負責運維開發體系規劃,架構設計

3. 負責基礎設施運維平台系統設計和開發,(包括基礎設施管理、構建發佈、配置管理、監控告警等系統);

4. 推進自動化運維體系建設,提升運維工作效率。

5. 提供高效區塊鏈節點服務。

任職要求:

1. 計算機相關專業,3-5年以上的工作經驗。(大型互聯網企業背景優先);

2. 有實際運維工作經驗,熟悉Saltstack/Puppet/confd/ansible等自動化運維、配置管理工具;

3. 掌握shell、python腳本語言,並主導或參與過自動化運維平台項目的開發;

4. 瞭解區塊鏈(btc,eth,eos等)技術,原理,編譯和搭建部署

5. 有亞馬遜平台使用經驗。

6. 有高度網絡安全防範意識。

7. 有較強的團隊協作能力,學習能力,溝通協調能力,並能自我驅動.

大數據運維工程師崗位的基本職責描述 篇9

職責:

1、負責數據中心服務器操作系統日常管理與運維;

2、負責數據中心機房環境的日常巡檢與維護;

3、負責對數據中心服務器、存儲日常運維;

4、負責管理與維護數據中心運維管理平台;

5、負責數據中心網絡安全與網絡運維;

6、協助對數據中心建設進行規劃設計與實施;

任職資格:

1、熟悉Linux服務器操作系統體系架構與日常運維管理;

2、熟悉Vmware虛擬化架構,熟悉Vmware虛擬化平台日常管理與運維;

3、熟悉IBM(聯想)、DELL服務器體系架構;

4、熟悉Zabbix、Nginx等相關應用服務;

5、對WindowsAD域、DFS、DHCP等應用相應工作經驗;

6、瞭解IBM、EMC、日立存儲的日常管理與維護;

7、有2年以上數據中心服務器等設備日常管理和運維經驗;

8、瞭解OSI七層模型和TCP/IP四層模型工作原理;

9、有較強的學習能力和語言表達能力;

10、具備一定的技術文檔編寫能力。

大數據運維工程師崗位的基本職責描述 篇10

職責:

1、負責公司各業務線服務器日常運維工作;

2、參與服務器網絡架構設計,制定公司的安全方案和規範;

3、負責項目服務器安裝調試,跟蹤、測試網絡項目實施過程中的問題,完成項目實施方案的編寫及確認;

4、協助完善運維環境的安全建設和安全管理;

5、負責服務器網絡攻擊處理,及安全防護措施改進等;

任職要求:

1、211本科及以上,1年以上同崗位工作經驗;

2、深入理解Linux系統,運維體系結構,精於容量規劃、架構設計、性能優化,熟悉腳本語言,如Python, Shell等;

3、對網站自動化運維有濃厚興趣,有大型網站自動化運維和抗惡意攻擊經驗者優先;

4、熟悉主流雲計算平台,如阿里雲、AWS等;

5、較強的網絡安全意識,對信息安全技術(如:攻防、IDS、遠程掃描等技術)有一定了解,能夠熟練搭建有效的安全防護、監測工具系統;

6、具有大型互聯網公司、大型金融機構運維工作經驗,參與過電商、門户、社交等業務線上運維者優先;

7、1年以上中大規模集羣環境下的Hadoop/Spark集羣相關運維管理經驗,熟悉基於Hadoop的大數據平台應用開發及調優,擁有Hadoop/Spark等大數據開源社區開發經驗者優先;

大數據運維工程師崗位的基本職責描述 篇11

職責:

1、負責服務器的配置、維護、監控、調優,故障排除等。

2、運維自動化及運維腳本開發。

3、高可用性服務器系統部署方案的制定及實施與監控。

4、及時響應並處理線上故障。

5、推動及開發高效的自動化運維、管理工具,提升運維工作效率。

任職要求:

1、大學專科以上學歷,有2年及以上互聯網公司運維方面經驗。

2、高度責任感,性格沉穩,心思縝密,有耐心,能積極應對壓力,能接受並完成高重複性的事情。

3、熟練使用Linux和Mysql,熟悉nginx、tomcat、redis、mq、git的安裝部署和優化。

4、至少掌握一種自動化運維工具(ansible、puppet、saltstack)。

5、熟悉TCP/IP、HTTP等協議,有良好的網絡、數據傳輸、安全、計算機體系結構方面的知識。

6、高度的責任感,較強的故障分析及排查能力,善於在工作中學習,能承受工作壓力。

7、認同DevOps文化,積極瞭解和學習自動化方式處理各種問題。

大數據運維工程師崗位的基本職責描述 篇12

職責:

1、負責應用系統的性能分析與架構優化,不斷提高系統運行效率。

2、協同開發,測試,提高線上產品運行質量。

3、負責突發事件管理,問題跟蹤與管理;能夠運用主機監控,日誌分析等工具進行復雜問題定位。

4、主動發現生產環境的問題和隱患,通過自動化運維工具來降低維護成本。

5、總結工作中遇到的問題,探索、完善運維方法、流程、文檔,提高運維的效率和效果。

6、負責運維體系及信息安全制度建立,對網絡安全、數據安全措施制定方案。

7、當發生信息安全事件時,快速進行事件的分析、定位及處置,確保事件得到有效處置。

8、Mysql或Oracle數據庫日常管理,對數據備份及恢復。

9、負責系統容災規劃及搭建。

任職要求:

1、大專及以上學歷, 3年以上相關工作經驗。

2、熟悉Nginx,Redis,Tomcat,fpm, nodejs,等基礎組件及配置。

3、熟悉Docker容器技術及相關的操作系統基礎設施(文件系統,網絡,cgroups等), 熟悉微服務架構。

4、熟悉kubernetes相關技術及原理,或有其他雲平台工作經驗。

5、系統工程能力紮實過硬,深入瞭解系統(linux)及上下游鏈路服務(網絡/io等),具有很強技術敏感度和故障排查經驗。

6、熟悉Shell或python開發,能夠根據需要快速編寫各類服務器維護腳本。

7、熟悉Linux系統高可用集羣的部署及原理(LVS、Haproxy、keepalived等)。

8、熟悉jenkins/ansible 等自動化部署、運維工具的使用,根據不同業務進行自動化代碼發佈,應用部署及運維。

9、熟悉TCP/IP和http協議,熟悉iptables原理及應用;熟悉網絡安全知識,熟悉路由器,防火強配置。

10、熟悉雲計算產品、有國內主流雲平台如阿里雲,騰訊雲,金山雲等雲平台之一的運維經驗者優先。

11、掌握WEB安全滲透和漏洞挖掘,瞭解漏洞的內在原理、檢測方法、利用手段以及對應解決方案,熟悉者優先。

12、熟悉常見黑客攻防方法,熟悉者優先。

13、對生產環境的數據庫進行全量和增量備份,在系統數據庫出現異常時能夠快速的進行數據恢復。

14、生產環境系統出現不可用時,系統可以自動切換到容災環境,對用户無感知。

大數據運維工程師崗位的基本職責描述 篇13

職責:

1、負責軟件項目或集成項目的實施及售後維護工作,處理服務器系統運行過程中的問題;

2、配合銷售人員進行售前諮詢、技術支持,引導用户需求並提出諮詢建議方案,負責基本客户需求調研、介紹演示等工作;

3、熟悉應用系統底層架構,能通過深度隱患排查對應用架構、數據庫架構或配置等進行優化;

4、有一定文檔功底,能編寫各類專項工作文檔、技術文檔;

5、反饋項目中遇到的問題,並以文檔形式提交歸檔 ,積極與客户、項目管理人員溝通協調、彙報軟件系統運行情況,跟蹤運行狀態及客户滿意度。

任職要求:

1、專科及以上學歷,計算機或相關專業。

2、具有良好的溝通協調能力和團隊合作精神,能承受壓力。

3、熟練掌握服務器Windows/Linu系統安裝及系統日常運維、網絡基礎環境配置及系統安全策略的配置,獨立操作服務器硬raid初始化調試,具備中間件(iis、redis、tomcat等)的安裝配置維護及優化經驗,包括中間件集羣的安裝配置和運維;

4、熟練使用數據庫操作如Oracle、MySQL、SqlServer,熟悉sql語句、增刪改查、聯合查詢、索引、表空間、表分區、存儲過程等知識;

5、具備2年或以上集成項目軟件實施、軟件開發經驗,智能交通行業經驗者優先。

大數據運維工程師崗位的基本職責描述 篇14

職責:

1. 負責Linux服務器、Windows服務器,MySQL數據庫服務器日常運維、優化等工作

2. 負責處理系統日常變更,控制突發情況,對疑難問題進行分析並解決,以及各類故障和事務的應急響應和技術支持

3. 監控服務器的運行狀態、系統性能;保障產品服務器的穩定性、可用性以及安全性

4. 負責服務器及設備的安裝、調試、維護、監控、備份等日常工作

5. 負責對服務器性能監測數據以及故障日誌等的分析,協助研發進行相關問題查找

6.負責服務器日常管理維護,對系統進行性能分析、優化、問題跟蹤

7.負責辦公設備的日常維護及管理技術檔案維護

任職要求:

1. 計算機相關專業,本科及以上學歷.有2-3年以上服務器運維經驗

2. 2年以上Linux系統運維工作經驗,熟悉Linux的常用服務配置,並能夠快速部署、配置

3. 熟悉linux平台常用服務器的部署,Apache Nginx Rync vsftp PHP MySQL Memcache Redis等,並且對服務器的安全優化和性能調優有一定的研究

4. 熟悉MySQLRedisMongoDB等主流數據庫的基本應用、熟練編寫sql語句、有實際sql調優經驗優先,熟悉web中間件如WebLogic、Tomcat、Nginx等,對MySQL和web的高可用架構有一定的研究。

5. 對各類常用網絡或系統檢測、分析工具有一定的瞭解(nagioscactizabbix)

6. 熟悉ShellPerlPython編程(至少一種),熟練使用腳本來完成日常系統運維工作

7. 熟悉公有云,如阿里雲、AWS等。

8. 對網絡安全和應用安全有一定的認知者優先

9. 要有耐心的工作態度,有很強的責任心,良好的溝通技巧和協調能力

10. 具有嚴密的邏輯思維能力,有進取心、團隊協作精神,良好的溝通表達能力

大數據運維工程師崗位的基本職責描述 篇15

職責:

1、機房服務器監控

2、運維平台搭建

3、為其他團隊提供服務器資源

4、服務器異常處理

5、持續改進提升運維團隊效率

崗位技能:

1、Linux/Windows常用服務配置,Python或Shell;

2、VMware/Docker/OpenStack/ELK至少會其中某一平台實施;

3、本科及以上學歷,三年及以上相關工作經驗。

大數據運維工程師崗位的基本職責描述 篇16

職責:

1)負責桌面計算機軟硬件(計算機、打印機、掃描儀等)

2)負責公司桌面計算機的安裝、配置、升級、運行維護與管理,保障桌面系統正常運行,滿足日常工作的需要;

3)負責常見網絡故障的排查和處理;

4)負責日常視頻會議的調試和開會保障工作;

5)負責桌面應用服務管理、加域、各種PC權限管理;

6)負責對公司常用辦公應用系統(如OA系統、郵箱、浪潮、手機OA等)的安裝、配置、維護工作;

7)負責辦公環境(辦公區、會議室等)的例行巡檢;

8)負責撰寫相關操作手冊文檔

9)完成公司領導安排其他相關任務。

任職要求:

1)大學本科及以上學歷;

2)熟 練 掌 握 windows xp 、 windows7 、 windows10等操作系統,能夠熟練安裝、調試以上操作系統及相關軟件。

3)熟練掌握計算機軟硬件安裝、調試、維護;

4)熟練掌握複印機、打印機、掃描儀及家用路由器的安裝、調試、維護;

5)掌握word,excel,PPT、PDF等辦公軟件的操作使用和故障處理;

6)掌握office的軟件中“宏”的編寫和使用者優先;

7)掌握TCP/IP協議。熟悉IT機房設備上下架,綜合佈線,有基本的網絡運維經驗者優先;

8)做事耐心細緻,工作敬業,責任心強,組織紀律好,具有良好的溝通能力、理解能力、學習能力和團隊合作精神。

大數據運維工程師崗位的基本職責描述 篇17

職責:

1、負責系統運維,解答用户疑問,處理異常;

2、負責系統用户操作培訓;

3、負責收集並統計用户系統需求及初步溝通及分析;

4、負責系統數據庫的基本維護檢查備份。

任職要求:

1、計算機或信息化管理等專業本科及以上學歷;

2、熟悉SQL Server/Postgresql數據庫,熟練掌握SQL 語句的運用;

3、有一定軟件開發語言基礎,熟悉C#語言者優先;

4、熟悉製造企業的生產流程,熟悉鞋服制造企業生產流程者優先;

5、抗壓能力強;

6、良好的溝通及理解能力。

大數據運維工程師崗位的基本職責描述 篇18

職責:

1、協助計算機相關軟、硬件的故障診斷,排錯和升級工作;

2、協助外設設備維護:打印機、傳真機、複印機設備維護工作;

3、現場緊急事件支持與協助;

4、完成上級交辦的臨時事務。

任職要求:

1、大專及以上學歷,計算機相關專業;

2、具備基本的計算機硬件、網絡配置等相關知識;

3、能對常見的電腦終端故障進行快速定位與排障;

4、具備良好溝通表達能力及團隊合作能力。

大數據運維工程師崗位的基本職責描述 篇19

職責:

1、負責公司各項目Docker與k8s集羣管理、監控及相關業務支撐;

2、負責容器雲平台的監控、應急響應等,及時定位及解決性能瓶頸和疑難問題;

3、編寫各種運維腳本,推動業務自動化運維,確保日常部署工具安全高效進行;

4、負責線上系統的監控報警系統的優化和開發,確保更佳準確及時的反映線上系統狀態;

5、和團隊成員共同承擔線上7x24小時服務質量保障工作;

任職要求:

1、熟悉服務器、存儲、網絡等基礎設施的管理和運維工作;

2、熟練使用Linux系統,具有Linux系統安裝配置和系統參數優化經驗,至少熟悉centos和ubuntu。

3、熟悉shell/python腳本語言,有腳本的開發經驗;

4、熟悉虛擬化技術,至少熟悉一種虛擬化管理平台,如vmware、xen、kvm等;

5、熟悉容器化技術,熟悉docker的常用管理命令,熟悉docker的存儲、網絡管理方式,熟悉鏡像倉庫的搭建和管理。

6、熟悉Apache、Nginx、MySQL、Tomcat、Redis、RabbitMQ、ZABBIX等常用服務的安裝、配置、維護、和調優;

7、熟悉Kubernetes、有生產環境kubernetes運維經驗者優先;

8、工作認真嚴謹,責任心強,抗壓能力強;

9、有阿里雲,騰訊雲,華為雲等至少一家公有云使用經驗優先考慮

大數據運維工程師崗位的基本職責描述 篇20

職責:

1、與開發團隊一起構建高可用,高度靈活和高可擴展性的系統平台,參與系統架構設計;

2、及時響應並處理線上故障,快速處理運維事故,保障業務穩定運行;

3、負責運維體系的建立與完善,服務器管理,應用監控、容災、備份機制,系統調優、安全方案,系統應急處理預案的制定等;

4、負責系統安全和數據安全相關的技術,並協助處理政策相關事務。

任職要求:

1、專科及以上學歷,計算機相關專業;

2、2年以上互聯網行業運維經驗;

3、熟悉Linux環境中nginx/jenkins/elk/mongodb/mysql/redis/kafka/hadoop/spark緩存及隊列服務等工具的配置維護,並掌握工作原理;熟練並掌握至少一種腳本編程語言;熟悉Docker,K8S 等容器技術;熟悉負載均衡技術,集羣技術等;

4、掌握 Zabbix/Promethus至少一種開源監控工具的使用;

5、瞭解網絡原理,熟悉 TCP/IP 協議。

  • 文章版權屬於文章作者所有,轉載請註明 https://wjfww.com/wenmi/gangwei/7vyl86.html
專題